首页 > 其他 > 详细

MapReduce原理

时间:2017-08-28 14:58:49      阅读:313      评论:0      收藏:0      [点我收藏+]

MappeReduce的一般程序流程由三个类组成——Mapper类,Reduce类,Driver类。

Mapper类:

技术分享

敲黑板!重点:第十二行,IntWritable v = new IntWritable();

重点二:当我们在第十行写完的时候,关于第十四十五十六行的内容可以由自动生成的方式生成。输入“map”,就会出现自动提示内容了;如果未设置自动提示,按“alt”+"/"也能出现自动提示。

Reducer类:

技术分享

敲黑板!重点:stringBuffer和string都可以代表字符串,但是当需要对字符串进行多次修改时,使用stringBuffer。stringBuffer使用构造方法来初始化,如上第13行所示。

重点二:第20行的第二个参数,固定格式要写:NullWritable.get().

 

 

 

Driver类:

技术分享

 来听解释啦!

23到30行后面的“.class”的意思不是类哦,而是java编译的 .class 文件。

 

运行结果:

技术分享

老师使用这个程序给我们讲MapReduce的原理。

MapReduce原理

原文:http://www.cnblogs.com/dream-nalizi/p/7436903.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!