首页 > 其他 > 详细

大数据之单词统计

时间:2020-07-10 00:22:36      阅读:73      评论:0      收藏:0      [点我收藏+]

package com.sjw.flink

import org.apache.flink.api.scala._

object WordCount {

def main(args: Array[String]): Unit = {

//创建批处理执行环境
val env: ExecutionEnvironment = ExecutionEnvironment.getExecutionEnvironment
//数据源 文件读取
val dataDS: DataSet[String] = env.readTextFile("src\\main\\resources\\words.txt")
//对DS处理
dataDS.flatMap(_.split(" ")).map((_,1)).groupBy(0).sum(1).print()

}

}

大数据之单词统计

原文:https://www.cnblogs.com/whyuan/p/13276868.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!