首页 > 其他 > 详细

了解一下大数据

时间:2014-09-11 07:40:51      阅读:324      评论:0      收藏:0      [点我收藏+]

项目开发针对的主要是企业家的应用,所以数据量算不上大数据,但是最近大数据在互联网行业的使用,作为一名程序员,应该学习新技术吗?但是学习他仅仅是为了借鉴一下大数据的处理思想,实现的过程,针对的场景,以便在我们的项目开发中借鉴一些思想,提高开发水平。

======================================

hadoop生态系统:

bubuko.com,布布扣

CPU:hadoop的Mad-Reduce------------------------并行编程的模型机制

内存:HBase-基于列的NoSQL数据库------------------Key-Value的基于HashTable的快速查询机制

存储:Hadfs的分布式文件系统--------------------------存储大量数据

======================

Habse:nosql数据库

Hive:nosql的数据仓库

hadfs:分布式文件系统

sqoop:etl的工具(数据抽取工作-做etl的过程)

zookeeper:时间同步工具------注意网络之间协调本质就是时间服务。

======================

 如果学习的话,这就是一个应该学习的技术.

部分来自:http://blog.csdn.net/woshiwanxin102213/article/details/19688393

了解一下大数据

原文:http://www.cnblogs.com/gstsyyb/p/3965588.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!