欢迎登陆真网站,您的到来是我们的荣幸。 登陆 注册 忘记密码? ☆设为首页 △加入收藏
欢迎加入真幸福QQ群
电脑知识: 基础知识 网络技术 操作系统 办公软件 电脑维修 电脑安全 windows7 windows8 windows10 服务器教程 平板电脑 视频播放教程 网络应用 互联网 工具软件 浏览器教程 QQ技巧 输入法教程 影视制作 YY教程 wps教程 word教程 Excel教程 PowerPoint
云南西双版纳特产小花糯玉米真空包装


Win8系统硬盘进行碎片整理教程
银河麒麟系统是什么
windows无效驱动器的问题
win7访问控制面板的设置方法
CentOS-6.3系统中安装配置Web服务器Nginx
LNMP环境中WordPress程序伪静态解决方案
egui.exe进程是什么
用来查看linux内存使用情况的shell脚本
Windows7下将grub4dos加入开机菜单
window下cygwin完全卸载办法
成功搭建Hadoop集群后简单实验
【 来源:网络 】【 点击:1 】 【 发布时间:2017_03_03 08:59:59 】

  1> 检查对HDFS的访问(在namenode上操作)

  #./hadoop-0.20.2/bin/hadoop fs -ls

  2> hadoop中的文件系统操作

  #./hadoop-0.20.2/bin/hadoop fs -mkdir test

  #./hadoop-0.20.2/bin/hadoop fs -ls test

  #./hadoop-0.20.2/bin/hadoop fs -rmr test

  3> 测试hadoop

  a> 创建子目录

  #./hadoop-0.20.2/bin/hadoop fs -mkdir input

  b> 把本地文件移动到hdfs

  #./hadoop-0.20.2/bin/hadoop fs -put /usr/share/doc/pam-1.1.1/rfc86.0.txt input

  #./hadoop-0.20.2/bin/hadoop fs -put /usr/share/doc/pam-1.1.1/Linux-PAM_SAG.txt input

  c> 查看文件是否存在

  #./hadoop-0.20.2/bin/hadoop fs -ls input

  d> 执行计算单词频率的MapReduce作业

  #./hadoop-0.20.2/bin/hadoop jar /root/hadoop-0.20.2/hadoop-0.20.2-examples.jar wordcount input output

  Found 2 items

  drwxr-xr-x - root supergroup 0 2012-11-26 04:25 /user/root/output/_logs

  -rw-r--r-- 2 root supergroup 8315 2012-11-26 04:25 /user/root/output/part-r-00000

  e> 查看输出结果

  #./hadoop-0.20.2/bin/hadoop fs -ls output

  #./hadoop-0.20.2/bin/hadoop fs -cat output/part-r-00000 | head -n 13

  f> 从HDFS提取输出

  #./hadoop-0.20.2/bin/hadoop fs -get output/part-r-00000 output.txt

本网站由川南居提供技术支持,fkzxf版权所有 浙ICP备12031891号
淳安分站 淳安分站