首页 > 2019年05月02日 > 全部分享
大数据技术之_19_Spark学习_06_Spark 内核解析 + Spark 通信架构、脚本解析、standalone 模式启动、提交流程 + Spark Shuffle 过程 + Spark 内存管理与分配 + Spark 部署模式
第1章 Spark 整体概述1.1 整体概念1.2 RDD 抽象1.3 计算抽象1.4 集群模式1.5 RPC 网络通信抽象1.6 启动 Standalone 集群1.7 核心组件1.8 核心组件交互流程1.9 Block 管理1.10整体应用第2章 Spark 通信架构2.1 通信组件概览2.2 ...
分类:其他   时间:2019-05-02 20:46:59    收藏:0  评论:0  赞:0  阅读:154
解决问题:使用pandas中DataFrame如何使用条件选择某行
初始化 如果我想选择出‘db’ == ‘my’ 的所有行,操作如下: 学会了吗,(~ ̄▽ ̄)~ ...
分类:其他   时间:2019-05-02 20:45:47    收藏:0  评论:0  赞:0  阅读:114
信号量生产者和消费者模型
使用信号量完成线程间同步,模拟生产者,消费者问题。 【sem_product_consumer.c】 思路分析: 规定: 如果□中有数据,生产者不能生产,只能阻塞。 如果□中没有数据,消费者不能消费,只能等待数据。 定义两个信号量:S满 = 0, S空 = 1 (S满代表满格的信号量,S空表示空格的 ...
分类:其他   时间:2019-05-02 20:45:28    收藏:0  评论:0  赞:0  阅读:134
UOJ#400. 【CTSC2018】暴力写挂 边分治 线段树合并
原文链接 www.cnblogs.com/zhouzhendong/p/UOJ400.html 前言 老年选手没有码力。 题解 先对第一棵树进行边分治,然后,设点 x 到分治中心的距离为 $D[x]$,点 x 在原树上的深度为 $d[x]$,那么 $$d[x]+d[y] - d[LCA(x,y)] ...
分类:其他   时间:2019-05-02 20:45:11    收藏:0  评论:0  赞:0  阅读:116
bzoj 3527https://passport.csdn.net/account/login
一道FFT的典型题 首先,做FFT一定要有推式子的觉悟,而且要有诡异构造的觉悟,否则是无法适应的 本题我见到的最优秀的做法就是推导+构造后卷积,比强行推导要舒适的多 首先给出结论: 我们令所有下标从0开始,那么: 构造两个多项式 , 那么将这两个多项式卷积,然后输出$(n,2*n]$的系数即可 为什 ...
分类:Web开发   时间:2019-05-02 20:44:41    收藏:0  评论:0  赞:0  阅读:148
8.5打包libgdx为一个桌面程序(jar包)
简陋的地图编辑终于做好了,于是要开始制作地图了,想导出为一个windows下可用的程序,让熟人代做地图,然后找人问了下打包流程,其实跟普通java打包为jar没什么区别,记录如下: 导出类型选第三个 然后选择启动类 选择第三个 然后提示导出成功 因为游戏地图是用Gdx.files.local方法写的 ...
分类:编程语言   时间:2019-05-02 20:44:06    收藏:0  评论:0  赞:0  阅读:185
ES6 - let & const
js是弱类型语言,语法很松散,这是一个缺点。let、const很好的弥补了这个缺点。 ...
分类:其他   时间:2019-05-02 20:43:34    收藏:0  评论:0  赞:0  阅读:128
使用mongodb
1.安装 yarn add moogose 2.启动 3.连接数据库 4.对数据库在命令行进行操作 5.命令行使用: https://baijiahao.baidu.com/s?id=1612042780837847633&wfr=spider&for=pc ...
分类:数据库技术   时间:2019-05-02 20:43:04    收藏:0  评论:0  赞:0  阅读:136
vue-cli安装中出现的问题' vue' 不是内部或外部命令,也不是可运行的程序或批处理文件。
安装成功的vue-cli运行不出结果解决方法 1,检查自己是不是修改了默认prefix(全局)和cache(缓存), 默认的npm下载文件在C:\Users\Administrator\AppData\Roaming\npm, 如果修改了npm下载的地址,则需要注意: 安装在nodejs下的步骤:( ...
分类:其他   时间:2019-05-02 20:42:50    收藏:0  评论:0  赞:0  阅读:2400
【题解】晋升者计数 Promotion Counting [USACO 17 JAN] [P3605]
【题解】晋升者计数 Promotion Counting [USACO 17 JAN] [P3605] 奶牛们又一次试图创建一家创业公司,还是没有从过去的经验中吸取教训。!牛是可怕的管理者! 【题目描述】 奶牛从 $1$ ~ $N(1≤N≤1e5)$ 进行了编号,把公司组织成一棵树,$1$号奶牛作为 ...
分类:其他   时间:2019-05-02 20:42:33    收藏:0  评论:0  赞:0  阅读:148
机器学习技法笔记:07 Blending and Bagging
原文地址:https://www.jianshu.com/p/36113fa117ca Roadmap Motivation of Aggregation Uniform Blending Linear and Any Blending Bagging (Bootstrap Aggregation) ...
分类:其他   时间:2019-05-02 20:42:00    收藏:0  评论:0  赞:0  阅读:151
Netty源码分析之处理新连接
Netty服务端处理新连接的流程: 1.检测新连接 2.基于NioServerSocketChannel创建客户端的NioSocketChannel 3.分配客户端channel的线程,注册线程所对应的selector 4.向selector注册读事件 新连接检测 服务端在创建完服务端的NioSer ...
分类:Web开发   时间:2019-05-02 20:41:43    收藏:0  评论:0  赞:0  阅读:111
设计模式:工厂方法模式(Factory method)
一、问题 在前一章中通过披萨的实例介绍了简单工厂模式。在披萨实例中,如果我想根据地域的不同生产出不同口味的披萨,如纽约口味披萨,芝加哥口味披萨。如果利用简单工厂模式,我们需要两个不同的工厂,NYPizzaFactory、ChicagoPizzaFactory。在该地域中有很多的披萨店,他们并不想依照 ...
分类:其他   时间:2019-05-02 20:41:23    收藏:0  评论:0  赞:0  阅读:131
推荐一本学习Groovy的书籍Groovy程序设计!
有朋友公司在用groovy开发,于是推荐我学习一下,搜到了这本书: 花了一个月时间读完了这本书!写的很棒,几乎没有废话,全书都是很重要的知识点和很好的讲解,确实像封面说的那样,使用的好可以提高开发效率 唯一不足的可能是版本太旧了,而且java也在高速进步,12已经发布了,其实java并没有书里说的那 ...
分类:其他   时间:2019-05-02 20:40:58    收藏:0  评论:0  赞:0  阅读:221
Hbase 完全分布式 高可用 集群搭建
1、准备 Hadoop 版本:2.7.7 ZooKeeper 版本:3.4.14 Hbase 版本:2.0.5 四台主机: s0, s1, s2, s3 搭建目标如下: HMaster:s0,s1(备份HMaster) HRegionServer:s1, s2, s3 主机映射信息如下 Hadoop ...
分类:其他   时间:2019-05-02 20:40:38    收藏:0  评论:0  赞:0  阅读:129
C语言函数调用时候内存中栈的动态变化详细分析(彩图)
版权声明:本文为博主原创文章,未经博主允许不得转载。欢迎联系我qq2488890051 https://blog.csdn.net/kangkanglhb88008/article/details/89739105先了解如下几点知识和过程: * 冯诺伊曼体系计算机程序指令代码都是提前从硬盘加载进入内 ...
分类:编程语言   时间:2019-05-02 20:39:49    收藏:0  评论:0  赞:0  阅读:213
简谈packet tracer软件使用时数据包分叉状态
这种分叉的状态是我们在使用模拟模式时,会看到数据包发出后会分叉为多个,发送给很多终端,再一次发送时会发现这种状况又消失了。这是为什么呢? 首先我们会通过ping的命令去测试是否通信,ping发出的数据包类型是ICMP(网络控制消息协议)。 交换机属于二层设备又称二层交换,代表OSI七层的前两层,不支 ...
分类:其他   时间:2019-05-02 20:39:23    收藏:0  评论:0  赞:0  阅读:153
POJ1475 Pushing Boxes(BFS套BFS)
描述 Imagine you are standing inside a two dimensional maze composed of square cells which may or may not be filled with rock. You can move north, south ...
分类:其他   时间:2019-05-02 20:38:56    收藏:0  评论:0  赞:0  阅读:114
JS动画和CSS动画
一. JS动画和CSS动画区别。 CSS实现动画:animation transition transform JS实现动画:setInterval setTimeout requestAnimationFrame JS动画: 优点: 1. 过程控制,可以在动画播放过程中对动画进行控制:开始、暂停、 ...
分类:Web开发   时间:2019-05-02 20:38:33    收藏:0  评论:0  赞:0  阅读:150
在自学django中摸爬滚打一个多月后的总结整理,思维层面
背景: 去年辞职,在家里学习了哲学,自以为懂得世间最难的学问后,自信心爆棚。 春节过后,想要干点实事,于是开始自满地进入软件编程开发,切入点是python django web开发。 入职小公司,没有该技术方面的前辈指导。 经历: 我自学了django后,也看了官方的说明文档,每个功能及使用方法很详 ...
分类:其他   时间:2019-05-02 20:38:16    收藏:0  评论:0  赞:0  阅读:145
1094条   上一页 1 ... 11 12 13 14 15 ... 55 下一页
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!