首页 > 其他 > 详细

大数据入门

时间:2020-01-14 18:16:54      阅读:91      评论:0      收藏:0      [点我收藏+]

  不知道怎么学,暂时看网上的一些介绍计划了一下学习顺序,希望看到的大佬能指引一下方向,现在非常没有头绪。

计划:

  1. 安装3个虚拟机

  2.安装配置hadoop

  3.学习hadoop相关:yarn、HDFS、Mapreduce ……

  4.实际操作

  5.安装配置kafka

  6.kafka……

  7.storm……

  8.spark……

  9.……

参考:

  1.2019最新大数据学习路线图:http://blog.itpub.net/31561003/viewspace-2287206/

  2.阿里云大学-hadoop快速入门-学习笔记:https://developer.aliyun.com/edu/course/1800/learn#lesson/15661

  ……

一、概念

  大数据:无法在一定时间内用常规软件工具进行捕获、管理和处理的数据集合,是海量、高增长率、多样化的信息资产。

      解决海量数据的存储和分析计算

  数据量:TB PB EB级

   ……

二、准备环境

  1.虚拟机

    一般做大数据都是要有多台服务器作为多个“节点”来存储和处理海量的数据,但是我们没有那么多服务器,因此需要借助虚拟机来实现有多个节点的一个学习环境。

    虚拟机软件:VMware Workstation Pro v15.5.1

    VMware Workstation Pro v15.5.1 官方版+激活密钥:https://www.nocmd.com/740.html

    密钥:

      YG5H2-ANZ0H-M8ERY-TXZZZ-YKRV8
      UG5J2-0ME12-M89WY-NPWXX-WQH88
      UA5DR-2ZD4H-089FY-6YQ5T-YPRX6

    下载地址:

      Workstation 15 Pro for Windows

      Workstation 15 Pro for Linux

  2.虚拟机系统

    系统:centos 7 64位

    Centos 7 安装详细图解说明:https://blog.csdn.net/qq_30764991/article/details/81843626

  3.节点配置

    node01:

    node02:

    node03:

三、Hadoop

  1.安装

    ……

大数据入门

原文:https://www.cnblogs.com/unpro-mercy/p/12193069.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!