asd zxc qwe -> qwe zxc asd ...
分类：
其他 时间：
2019-09-14 22:11:48
收藏：
0 评论：
0 赞：
0 阅读：
91
1. introductory subjects Programming Skills： 6.0001 https://ocw.mit.edu/courses/electrical engineering and computer science/6 0001 introduction to com ...
分类：
其他 时间：
2019-09-14 22:11:26
收藏：
0 评论：
0 赞：
0 阅读：
136
一、搭建步骤 1）新建Spring Boot项目，引入pom坐标 2）增加相关配置 3）启动类增加注解 二、应用服务如何以http的方式，将sleuth生成的traceId等追踪数据发送到Zipkin中 默认是以http的方式进行发送的，相关配置如下 1）增加pom坐标 注意这里的版本是2.0.3. ...
分类：
编程语言 时间：
2019-09-14 22:11:08
收藏：
0 评论：
0 赞：
0 阅读：
220
一、知识总览 信号量机制的基本原理：两个或多个进程可以利用彼此间收发的简单的信号来实现“正确的”并发执行，一个进程在收到一个指定信号前，会被迫在一个确定的或者需要的地方停下来，从而保持同步或互斥。 二、整型信号量 三、记录型信号量 四、总结： ...
分类：
其他 时间：
2019-09-14 22:10:43
收藏：
0 评论：
0 赞：
0 阅读：
89
map方法： map的方法 public void map(Object key, Text value, Context context) throws IOException, InterruptedException {…} key:偏移量，一般为0，用不到 value：每行的值 contex ...
分类：
其他 时间：
2019-09-14 22:10:02
收藏：
0 评论：
0 赞：
0 阅读：
141
《长安十二时辰》，看过原著，电视剧看完前33集了。后面的剧情在知乎上也看了许多讨论，基本明白了，说点看法。总体印象，分几个方面：1：情节。我认为原著小说免费放出来的前8章是最精彩的。前8章需要脑洞不需要圆谎，后面要把前面的脑洞补齐了，不少地方都很勉强了，并且下半部大部分的内容是动作电影的武打动作描写 ...
分类：
其他 时间：
2019-09-14 22:09:24
收藏：
0 评论：
0 赞：
0 阅读：
159
reducetask并行度同样影响整个job的执行并发度和执行效率，与maptask的并发数由切片数决定不同，Reducetask数量的决定是可以直接手动设置：<!--more--> job.setNumReduceTasks(4); 如果数据分布不均匀，就有可能在reduce阶段产生数据倾斜。 注 ...
分类：
其他 时间：
2019-09-14 22:08:49
收藏：
0 评论：
0 赞：
0 阅读：
113
算法导论 第二章 算法基础 1.示例 INSERTION-SORT(A) for j=2 to A.length key=A[j]//要插入的元素A[j] //insertion A[j] into sequence A[1,2,...,j-1]. i=j-1//从第j-1个元素开始逐一比对 for ...
分类：
编程语言 时间：
2019-09-14 22:08:29
收藏：
0 评论：
0 赞：
0 阅读：
108
<!--more--> ...
分类：
其他 时间：
2019-09-14 22:08:11
收藏：
0 评论：
0 赞：
0 阅读：
103
整合Kafka两种模式说明 ★面试题：Receiver & Direct 开发中我们经常会利用SparkStreaming实时地读取kafka中的数据然后进行处理，在spark1.3版本后，kafkaUtils里面提供了两种创建DStream的方法: 1.Receiver接收方式： KafkaUti ...
分类：
其他 时间：
2019-09-14 22:07:52
收藏：
0 评论：
0 赞：
0 阅读：
414
1、PCA分类介绍 在scikit-learn中，与PCA相关的类都在sklearn.decomposition包中。最常用的PCA类就是sklearn.decomposition.PCA。 原理：线性映射（或线性变换），简单的来说就是将高维空间数据投影到低维空间上，那么在数据分析上，我们是将数据的 ...
分类：
其他 时间：
2019-09-14 22:06:51
收藏：
0 评论：
0 赞：
0 阅读：
113
from multiprocessing import Queueq = Queue(3)q.put('hello') #‘put’就是放入q.put({'a':1})q.put([1,2,3])#队列中如果指定放入3个元素，则过多放入会卡在原地。直至有人取出n个元素，才能放入n个元素。原理同互斥锁 ...
分类：
其他 时间：
2019-09-14 22:06:35
收藏：
0 评论：
0 赞：
0 阅读：
68
secondary namenode NameNode职责是管理元数据信息，DataNode的职责是负责数据具体存储，那么SecondaryNameNode的作用是什么？对很多初学者来说是非常迷惑的。它为什么会出现在HDFS中。从它的名字上看，它给人的感觉就像是NameNode的备份。但它实际上却不 ...
分类：
其他 时间：
2019-09-14 22:06:19
收藏：
0 评论：
0 赞：
0 阅读：
166
压缩目的： 降低数据磁盘存储空间，减少传输数据的IO量 压缩追求的指标： 压缩时间 越短越好 压缩化 越大越好<!--more--> 硬件需求如：CPU 算法支持 mr中可以使用压缩的地方： map的输出数据进行数据压缩，减少shuff给reduce的数据量 reduce的输出进行数据压缩，减少最终 ...
分类：
其他 时间：
2019-09-14 22:05:59
收藏：
0 评论：
0 赞：
0 阅读：
98
1、理解NODE_ENV 在node中，有全局变量process表示的是当前的node进程。process.env包含着关于系统环境的信息。但是process.env中并不存在NODE_ENV这个东西。NODE_ENV是用户一个自定义的变量，在webpack中它的用途是判断生产环境或开发环境的依据的 ...
分类：
其他 时间：
2019-09-14 22:05:37
收藏：
0 评论：
0 赞：
0 阅读：
84
问题分析<!--more--> 实现代码 InversIndex类 import java.io.IOException; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.Path; import or ...
分类：
其他 时间：
2019-09-14 22:05:04
收藏：
0 评论：
0 赞：
0 阅读：
56
学习总是枯燥的，对于Python小白的我来讲，更是乏味的。为了提高学习的兴趣，今天我就来写一个小程序练练手。 数字猜谜游戏相信大家都不陌生，A给出最小值最大值，B写一个该范围内的数，A猜测写下的是多少，B通过大小给出提示，并计算猜了多少次才猜对。 使用Python做出这个程序，我们应是A。 第一步， ...
分类：
编程语言 时间：
2019-09-14 22:04:43
收藏：
0 评论：
0 赞：
0 阅读：
97
Mapper： import java.io.IOException; import org.apache.hadoop.io.LongWritable; import org.apache.hadoop.io.NullWritable; import org.apache.hadoop.io.Te ...
分类：
其他 时间：
2019-09-14 22:04:13
收藏：
0 评论：
0 赞：
0 阅读：
114
刚入手了一个树莓派4B替换掉旧的3B搭Nas。吐槽下3B的网卡和USB速度真的太慢。 虽然官方推荐的是Debian，由于习惯了CentOS不想增加学习成本，我还是决定用CentOS。 镜像下载地址：http://mirrors.huaweicloud.com/centos-altarch/7.6.1 ...
分类：
其他 时间：
2019-09-14 22:03:54
收藏：
0 评论：
0 赞：
0 阅读：
1774
项目简介 这里给出一个经典的词频统计的案例：统计如下样本数据中每个单词出现的次数。 SparkHBase HiveFlinkStormHadoopHBaseSpark Flink HBaseStorm HBaseHadoopHiveFlink HBaseFlinkHiveStorm HiveFlin ...
分类：
其他 时间：
2019-09-14 22:03:29
收藏：
0 评论：
0 赞：
0 阅读：
103
