全部版块 我的主页
论坛 数据科学与人工智能 大数据分析 Hadoop论坛
2012 0
2014-05-20

判断Hadoop工作是正确可靠

具体的实验:在hadoop的hdfs中的根目录下创建“input”目录,把Ubuntu上本地的Hadoop安装包中的bin目录下所有以“sh”为后缀的文件拷贝到hdfs的input目录中,然后运行hadoop自带的wordcount工具把 结果输出到hdfs根目录下的output目录中,最后要验证我们的hadoop对单词个数统计的正确性。具体的操作如下:

Step 1: 在hadoop的hdfs中的根目录下创建“input”目录:

下载.png

此时查看HDFS的Web控制台,出现了我们创建的“input”目录:

1.png

Step 2:把Ubuntu上本地的Hadoop安装包中的bin目录下所有以“sh”为后缀的文件拷贝到hdfs的input目录中:

2.png

此时查看HDFS的Web控制台中的“input”目录,会发现我们成功的把Ubuntu本地的文件拷贝到了hdfs的/input/目录下:

3.png

Step 3:运行hadoop自带的wordcount工具把 结果输出到hdfs根目录下的output目录并查看运行结果:

后续步骤请下载免费附件:



附件列表
b.png

原图尺寸 71.01 KB

b.png

a.png

原图尺寸 85.46 KB

a.png

c.png

原图尺寸 170.33 KB

c.png

9.png

原图尺寸 203.04 KB

9.png

8.png

原图尺寸 113.51 KB

8.png

7.png

原图尺寸 90.92 KB

7.png

6.png

原图尺寸 98.52 KB

6.png

5.png

原图尺寸 95.54 KB

5.png

4.png

原图尺寸 110.55 KB

4.png

二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

相关推荐
栏目导航
热门文章
推荐文章

说点什么

分享

扫码加好友,拉您进群
各岗位、行业、专业交流群