首页 > 其他 > 详细

流数据

时间:2019-11-05 20:14:48      阅读:88      评论:0      收藏:0      [点我收藏+]

特征:

持续到达,数据量大,注重数据整体价值,数据顺序可能颠倒,丢失,实时计算,

海量,分布,实时,快速部署,可靠

linked in Kafka

spark streaming:微小批处理,模拟流计算,秒级响应

DStream 一系列RDD 的集合

支持批处理

技术分享图片

 

 技术分享图片

 

 技术分享图片

 

 创建文件流

技术分享图片

 

 10代表每10s启动一次流计算

textFileStream 定义了一个文件流数据源

 任务: 寻找并跑demo代码 搭建环境 压力测试

 

流数据

原文:https://www.cnblogs.com/cschen588/p/11800107.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!