首页 > 编程语言 > 详细

Hadoop java 程序运行

时间:2015-04-25 08:07:43      阅读:233      评论:0      收藏:0      [点我收藏+]

1, 右击project,选择 maven build,产生jar文件。

2,产生输入文件:

hadoop fs -put 输入文件路径 文件夹
example:
hadoop fs -put $HADOOP_HOME/Hadoop-WordCount/input/ input
hadoop fs -ls input

3, 运行java 文件:

hadoop jar jar文件路径 package名称.文件名 input文件 输出文件
example:
hadoop jar $HADOOP_HOME/Hadoop-WordCount/wordcount.jar WordCount input output

4, view output file

hadoop fs -ls output
hadoop fs -cat output/*

如果想要显示system.out.println 的文件:

Easy way to access the logs is http://localhost:50030/jobtracker.jsp->click on the completed job->click on map or reduce task->click on tasknumber->task logs->stdout logs.  

Hadoop java 程序运行

原文:http://www.cnblogs.com/lilyfindjobs/p/4455277.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!