全部版块 我的主页
论坛 数据科学与人工智能 大数据分析 Hadoop论坛
1528 1
2014-06-10

一、Hadoop是什么?

答:是google的核心算法MapReduce的一个开源实现。用于海量数据的并行处理。

HDFS是分布式文件系统,用于分布式存储海量数据。
MapReduce是分布式数据处理模型,本质是并行处理。
hadoop中核心主要包含:HDFS和MapReduce 。

二、多少数据算海量数据?

答:个人认为,TB(1024GB)级别往上就可以算海量数据。

三、谁在使用hadoop?

在国内,包括中国移动、百度、网易、淘宝、腾讯、金山和华为等众多公司都在研究和使用它 ,使用空间比较大,更多资料可以学习   https://bbs.pinggu.org

四、用它来做什么?

1、最简单的,做个数据备份/文件归档的地方,这利用了hadoop海量数据的存储能力
2、数据仓库/数据挖掘:分析web日志,分析用户的行为(如:用户使用搜索时,在搜索结果中点击第2页的概率有多大)
3、搜索引擎:设计hadoop的初衷,就是为了快速建立索引。
4、云计算:据说,中国移动的大云,就是基于hadoop的
5、研究:hadoop的本质就是分布式计算,又是开源的。有很多思想值得借鉴。

你可以把hadoop看成是:分布式计算框架(或系统、或平台),可以说是用来做云计算的,(云计算的本质就是:海量数据存储/并行处理,即hadoop中的HDFS和MapReduc。

二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

全部回复
2014-6-10 10:36:20
顶一下~~
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

相关推荐
栏目导航
热门文章
推荐文章

说点什么

分享

扫码加好友,拉您进群
各岗位、行业、专业交流群