我要投搞

标签云

收藏小站

爱尚经典语录、名言、句子、散文、日志、唯美图片

当前位置:白小姐 > 分布式应用 >

java解决分布式存储计算

归档日期:07-30       文本归类:分布式应用      文章编辑:爱尚语录

  数据太大一台服务器内存不够,如何将多数据分段保存在不同的服务器上,这个数据的内存是自己申请的。比如如果传过来的是8,那就要申请2的8次方个元素的数组,如何将这个数组分段在不同...

  数据太大一台服务器内存不够,如何将多数据分段保存在不同的服务器上,这个数据的内存是自己申请的。比如如果传过来的是8,那就要申请2的8次方个元素的数组,如何将这个数组分段在不同的服务器上申请?然后分布式计算?不用spark redis

  安徽新华电脑专修学院始建于1988年,隶属于新华教育集团,是国家信息化教育示范基地、中国 IT 教育影响力品牌院校.

  Hadoop:Hadoop的框架最核心的设计就是:HDFS和MapReduce。HDFS为海量的数据提供了存储,则MapReduce为海量的数据提供了计算。

  CUDA:CUDA(Compute Unified Device Architecture),是显卡厂商NVIDIA推出的运算平台。 CUDA是一种由NVIDIA推出的通用并行计算架构,该架构使GPU能够解决复杂的计算问题。 它包含了CUDA指令集架构(ISA)以及GPU内部的并行计算引擎。 开发人员现在可以使用C语言来为CUDA架构编写程序,C语言是应用最广泛的一种高级编程语言。所编写出的程序于是就可以在支持CUDA的处理器上以超高性能运行。CUDA3.0已经开始支持C++和FORTRAN。

  (2)数据怎么用呢,分析、处理MapReduce框架,让你通过编写代码来实现对大数据的分析工作。

  那就用hadoop,自己实现数据的拼接过于复杂,而且还要是计算过后的,大数据的分布式计算最好是借助工具。

本文链接:http://frankstella.net/fenbushiyingyong/967.html