首页 > 其他 > 详细

Hadoop 生态系统

时间:2019-12-08 09:43:11      阅读:202      评论:0      收藏:0      [点我收藏+]

Hadoop 生态系统

概述:

  hadoop使用领域非常广泛,针对于不同的领域和不同的功能,各家厂商开发了并提供了很多与Hadoop相关的开发工具、开源软件、商业化工具和技术服务。Hadoop的生态系统非常丰富!本文主要内容就是解析Hadoop生态系统中各个组成部分。

一、Hadoop的生态系统

1.0:Zookeeper:分布式协调服务,Hbase:分布式数据库,Ambari:安装部署工具,Oozie:作业流调度系统,Hive:数据仓库,Pig:工作流引擎,Mahout:数据挖掘库,MapReduce:分布式计算框架,HDFS:分布式存储系统,Sqoop:数据库TEL工具,Flume:日志收集。

图-1 Hadoop1.0

技术分享图片

2.0:Zookeeper:分布式协调服务,Hbase:分布式数据库,Ambari:安装部署工具,Oozie:作业流调度系统,Hive:数据仓库,Pig:工作流引擎,Shark:数据仓库,Mahout:数据挖掘库,MapReduce:分布式计算框架,Tez:DAG计算,Spark:内存计算,YARN:资源管理系统,HDFS:分布式存储系统,Sqoop:数据库TEL工具,Flume:日志收集。 

图-2 Hadoop2.0

技术分享图片

 

 

 

 

 

 

 

Hadoop 生态系统

原文:https://www.cnblogs.com/yinminbo/p/11840517.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!