在上面的例子中,我们通过java代码对hdfs进行了操作,操作结果我们可以用代码继续查看或者通过命令行获得,但不论哪一种都不够直观,eclipse提供了一种直接连接HDFS 并展示的插件。我们将展示如何使用此插件。 1 系统、软件以及前提约束 在CentOS7中安装hadoop https://ww ...
分类:
系统服务 时间:
2020-03-26 20:44:33
收藏:
0 评论:
0 赞:
0 阅读:
54
一、jdk的安装(已安装过的同学不用再安装,但要注意JAVA_HOME这个系统环境变量是否配置好了,如果没有配置一定要按下面的方法配置好)安装好JDK后,还要设置相关的系统环境变量。主要设置三个系统变量:CLASSPATH、JAVA_HOME、PATH。(原来配置过的不用再配置了!) JAVA_HO ...
分类:
Web开发 时间:
2020-03-26 20:44:11
收藏:
0 评论:
0 赞:
0 阅读:
48
前面我们已经完成了scala的第一个程序,本文将在其基础之上阐述scala的基本语法。 1 系统、软件以及前提约束 win10 64位 已在idea中完成scala的helloworld程序 https://www.jianshu.com/p/ec64c70e6bb6 2 操作 1 数据类型 pyt ...
分类:
编程语言 时间:
2020-03-26 20:43:25
收藏:
0 评论:
0 赞:
0 阅读:
51
原创itcats_cn 最后发布于2018-09-02 21:31:33 阅读数 41007 收藏展开什么是跨域问题?跨域问题来源于JavaScript的"同源策略",即只有 协议+主机名+端口号 (如存在)相同,则允许相互访问。也就是说JavaScript只能访问和操作自己域下的资源,不能访问和操 ...
分类:
Web开发 时间:
2020-03-26 20:42:46
收藏:
0 评论:
0 赞:
0 阅读:
36
1.1 异常处理 异常的处理应当符合 尽早抛出,延迟捕获 的原则。 在进行 MVC 分层调用时,Service 与 Dao 层触发的异常应统一向上抛出,交给 Controller 层处理。因为只有 Controller 层可以更好的决策发生异常时应当给用户何种反馈。 但这样会造成我们的 Contro ...
分类:
其他 时间:
2020-03-26 20:42:15
收藏:
0 评论:
0 赞:
0 阅读:
42
ssl证书等格式说明 crt /key /req /csr /pem /der 带有私钥的证书 PKCS12(P12) 包含了公钥和私钥的二进制格式的证书形式,以 pfx 作为证书文件后缀名。 二进制编码的证书(DER) 证书中没有私钥,DER 编码二进制格式的证书文件,以 .cer 作为证书文件后 ...
分类:
其他 时间:
2020-03-26 20:41:55
收藏:
0 评论:
0 赞:
0 阅读:
49
我们已经了解了使用flume监听端口以及文件内容,本节将展示使用flume导入数据到hbase。 1 系统、软件以及前提约束 CentOS 7 64 工作站 作者的机子ip是192.168.100.200,请读者根据自己实际情况设置 已完成flume安装并监听端口数据,flume的服务名称为a1 h ...
分类:
Web开发 时间:
2020-03-26 20:41:35
收藏:
0 评论:
0 赞:
0 阅读:
59
1、步骤 1)打开命令行,进入项目中manage.py同级目录 2)命令行输入:python manage.py startapp firstApp 3)添加应用名到setting.py中的INSTALLED_APPS里 2、详细: 1)进入目录: 2)输入命令:项目名叫firstApp 没有报错, ...
分类:
其他 时间:
2020-03-26 20:41:15
收藏:
0 评论:
0 赞:
0 阅读:
53
# 购物车 前提构想# 买家 卖家# 商品编号: 商品名称: 商品价格:、li = [{"名称":"苹果","价格":10},{"名称":"红枣","价格":15},{"名称":"香蕉","价格":20},{"名称":"桔子","价格":60},{"名称":"柚子","价格":80},{" ...
分类:
其他 时间:
2020-03-26 20:40:38
收藏:
0 评论:
0 赞:
0 阅读:
48
Gerrit 通过git push后增加一个中间状态, 来完成代码审批环节, 因此在git commit的时候增加了一个change id, 并且push到定制的target, 在push之后, 需要审批通过后再fetch, 将状态同步后, 才能继续push. 使用中Git相关的一些操作 1. 本地 ...
分类:
其他 时间:
2020-03-26 20:40:21
收藏:
0 评论:
0 赞:
0 阅读:
47
面试题写一个固定容量同步容器,拥有put和get方法,以及getCount方法能够支持2个生产者线程以及10个消费者线程的阻塞调用一,使用wait和notify/notifyAll来实现 import java.util.LinkedList; public class MyContainer1<T ...
分类:
编程语言 时间:
2020-03-26 20:39:59
收藏:
0 评论:
0 赞:
0 阅读:
55
常用的分类器有逻辑斯蒂回归分类器和决策树分类器,本文将阐述在scala中使用逻辑斯蒂回归完成判断是否有某字段。 1 系统、软件以及前提约束 CentOS 7 64 工作站 作者的机子ip是192.168.100.200,主机名为danji,请读者根据自己实际情况设置 已完成spark访问hive h ...
分类:
其他 时间:
2020-03-26 20:39:17
收藏:
0 评论:
0 赞:
0 阅读:
52
在安装好Hadoop之后,我们来熟悉在命令行界面当中操作分布式文件存储组件HDFS。 HDFS是Hadoop大数据平台中的分布式文件系统,为上层应用或其他大数据组件提供数据存储,如Hive,Mapreduce,Spark,HBase等。 1 系统、软件以及前提约束 CentOS 7 64 为减少li ...
分类:
其他 时间:
2020-03-26 20:39:00
收藏:
0 评论:
0 赞:
0 阅读:
53
The old bluetooth cat et adatper iii has stopped production, and you can get the new WIFI CAT Caterpillar ET Diagnostic Tool adapter to replace it, VO ...
分类:
其他 时间:
2020-03-26 20:38:39
收藏:
0 评论:
0 赞:
0 阅读:
67
数据分两类,一类是静态处理,多做批量处理,属于OLAP,一类是流式数据,多做实时处理,属于OLTP。Spark Streaming属于微批处理,并非真正意义上的实时处理。本节将介绍一个真正意义上的流处理框架Storm,本文将阐述Storm的安装。 1 系统、软件以及前提约束 CentOS 7 64 ...
分类:
其他 时间:
2020-03-26 20:38:20
收藏:
0 评论:
0 赞:
0 阅读:
62
通过上面几篇文章,我们熟悉了单机情况下的HDFS操作和MapReduce计算,在实际使用中,为了提升性能和稳定性,大数据组件都会以集群的方式存在,本文将阐述如何搭建hadoop集群。 1 系统、软件和前提约束 CentOS 7 (1)三台CentOS都已经配置免密登录 https://www.jia ...
分类:
其他 时间:
2020-03-26 20:37:39
收藏:
0 评论:
0 赞:
0 阅读:
52
SSL/TLS 介绍 一: SSL/TLS 介绍SSL 是安全套接层 (secure sockets layer),TLS 是 SSL 的继任者,叫传输层安全 (transport layer security)。 在明文的上层和 TCP 层之间加上一层加密,这样就保证上层信息传输的安全。如 HTT ...
分类:
其他 时间:
2020-03-26 20:37:20
收藏:
0 评论:
0 赞:
0 阅读:
62
问题描述:在一个 8 x 8 的棋盘上,有一个白色车(rook)。也可能有空方块,白色的象(bishop)和黑色的卒(pawn)。它们分别以字符 “R”,“.”,“B” 和 “p” 给出。大写字符表示白棋,小写字符表示黑棋。 车按国际象棋中的规则移动:它选择四个基本方向中的一个(北,东,西和南),然 ...
分类:
编程语言 时间:
2020-03-26 20:36:52
收藏:
0 评论:
0 赞:
0 阅读:
45
数据分两类,一类是静态处理,多做批量处理,属于OLAP,一类是流式数据,多做实时处理,属于OLTP。Spark Streaming属于微批处理,并非真正意义上的实时处理。本节将介绍一个顶级的流处理框架Flink。 1 系统、软件以及前提约束 CentOS 7 64 工作站 作者的机子ip是192.1 ...
分类:
其他 时间:
2020-03-26 20:36:14
收藏:
0 评论:
0 赞:
0 阅读:
184
主要的命令:DistCp 官方有明确的解释:http://hadoop.apache.org/docs/r1.0.4/cn/distcp.html 概述: DistCp(分布式拷贝)是用于大规模集群内部和集群之间拷贝的工具。 它使用Map/Reduce实现文件分发,错误处理和恢复,以及报告生成。 它 ...
分类:
其他 时间:
2020-03-26 20:35:41
收藏:
0 评论:
0 赞:
0 阅读:
39