首页 > 其他
YARN内存管理
总结一: 关于内存的配置总共有以下几个方面: 以下的示例数据为gdc中的配置 (1)每个节点可用于container的内存与虚拟内存 NM的内存资源配置,主要是通过下面两个参数进行的(这两个值是Yarn平台特性,应在yarn-sit.xml中配置) : yarn.nodemanager.resource.memory-mb  94208 yarn.nodemanager.vmem-...
分类:其他   时间:2015-06-16 19:22:54    收藏:0  评论:0  赞:0  阅读:947
RSYNC介绍
总结: 1、安装 一般不需要,默认已安装 2、服务器端配置 (1)/etc/rsyncd.secrets:保存登陆的用户名密码,如: scribe:abcpassword (2)/etc/rsyncd.conf:配置模块,指定登陆的用户,同步的路径,客户端的ip等。见后面的附录 3、在客户端进行rsync rsync -avzP scribe@s...
分类:其他   时间:2015-06-16 19:22:44    收藏:0  评论:0  赞:0  阅读:225
hadoop远程调试
1、修改etc/hadoop/yarn.sh,增加以下内容 export YARN_NODEMANAGER_OPTS="-Xdebug -Xrunjdwp:transport=dt_socket,address=8788,server=y,suspend=y” export YARN_RESOUCEMANAGER_OPTS="-Xdebug -Xrunjdwp:transport=dt_soc...
分类:其他   时间:2015-06-16 19:22:24    收藏:0  评论:0  赞:0  阅读:232
JVM调试命令
(一)jps   显示java进程,即使用java命令启动的进程 常用用法 1、jps:显示进程id与进程名称 2、jps -l:显示主类的全名,如果进程执行的是jar包,则输出Jar路径 3、jps -v:输出JVM参数 hadoop@gdc-dn06-formal:~$ jps -lv | grep -i datanode 48150 org.apache.hadoop.hdf...
分类:其他   时间:2015-06-16 19:21:35    收藏:0  评论:0  赞:0  阅读:268
Zookeeper 04 异步访问ZooKeeper
ZooKeeper提供的Java API.每一个方法有一个异步调用版本。异步调用和同步调用的区别之处:同步调用中,需要处理异常。异步调用中已经把异常封装为返回码。 同时异步调用会得到更好的性能。这里要注意,一般来说异步调用会在命令发送到Zookeeper服务器之前,就返回继续执行之后的代码。 推荐使用异步方法访问Zookeeper,除了可以简化异常处理,提高性能外。还应为Watcher的...
分类:其他   时间:2015-06-16 19:21:14    收藏:0  评论:0  赞:0  阅读:209
OSError: libev.so.4: cannot open shared object file: No such file or directory
Ubuntu12.04 下使用pyev 模块,但是运行sudo python setup.py install后却提示出现以下错误: Traceback (most recent call last):   File "setup.py", line 59, in     check_version(libev_version(), min_libev_version, "libev")...
分类:其他   时间:2015-06-16 19:21:04    收藏:0  评论:0  赞:0  阅读:298
[LeetCode] Rectangle Area
Rectangle Area Find the total area covered by two rectilinear rectangles in a 2D plane. Each rectangle is defined by its bottom left corner and top right corner as shown in the figure. ...
分类:其他   时间:2015-06-16 19:20:04    收藏:0  评论:0  赞:0  阅读:191
Yii2:推荐一个方法arrayHelper::map()
arrayHelper::map()这个方法可以将一个数组拆成一个键-值对映射的多维数组或对象数组。 例子: $array = [ ['id' => '123', 'name' => 'aaa', 'class' => 'x'], ['id' => '124', 'name' => 'bbb', 'class' => 'x'], ['id' => '345', ...
分类:其他   时间:2015-06-16 19:19:24    收藏:0  评论:0  赞:0  阅读:99
如何进行文献检索
很多人都说在中国做学术比较困难,其实真的困难吗?或许没有想象中那么糟糕。 平时我们查找文献资料,大都是从哪里查询?中国知网是吧?但是真的会用吗?根据自己的情况,我总结一下自己在文献查找方面走过的磕磕绊绊: (1) 谷歌学术就不说了,进不去,进去了找到的相关文献有时还得让你掏出$支付,所以能进去的可以用一下谷歌学术上的引用,当然,里面的高级检索什么的,我也在学习,不介  绍。 在中国有个“谷粉”...
分类:其他   时间:2015-06-16 19:19:04    收藏:0  评论:0  赞:0  阅读:181
FFmpeg的HEVC解码器源代码简单分析:CTU解码(CTU Decode)部分-TU
本文分析FFmpeg的libavcodec中的HEVC解码器的CTU解码(CTU Decode)部分的源代码。FFmpeg的HEVC解码器调用hls_decode_entry()函数完成了Slice解码工作。hls_decode_entry()则调用了hls_coding_quadtree()完成了CTU解码工作。由于CTU解码部分的内容比较多,因此将这一部分内容拆分成两篇文章:一篇文章记录PU的解码,另一篇文章记录TU解码。本文记录TU的解码过程。...
分类:其他   时间:2015-06-16 19:18:55    收藏:0  评论:0  赞:0  阅读:1310
GC微调实践
垃圾回收微调与其它的性能微调活动没有什么区别。 不屈服于对应用程序的随机部分进行调整,你需要确保你理解当前的情况和期望的结果。通常按照以下过程来处理容易些。 1.声明你的必须目标 2.运行测试 3.测量 4.和目标进行比较 5.改变并回归测试设定与性能微调相关的目标和可测量的三维是很重要的。这些目标包括延迟,吞吐量和容量,为了更好的理解我推荐大家看一下 垃圾回收手册 中对应的章节。我们看...
分类:其他   时间:2015-06-16 19:18:44    收藏:0  评论:0  赞:0  阅读:192
莫孤注一掷(Don't Just Roll the Dice 译文三)
第三章 价格陷阱 至此,我们已经学习了一些经济理论和定价心理学。值得期待的是,在定价方面你已经有了一些主意。但是还有其他一些因素也是要牢记在心,同时一些陷阱也是要特别注意的。 竞争对手 当你设定你产品的价格时你要考虑你的竞争对手会如何回应。如果你削弱他们,他们会不会启动价格战?尽管你的竞争对手采用的是高成本的商业模式从而不能做长期的价格竞争。...
分类:其他   时间:2015-06-16 19:18:24    收藏:0  评论:0  赞:0  阅读:255
TNS-03505 名称无法解析
TNS-03505 名称无法解析问题现象:[oracle@db01 admin]$ tnsping woo TNS Ping Utility for Linux: Version 11.2.0.4.0 - Production on 15-JUN-2015 21:57:52 Copyright (c) 1997, 2013, Oracle. All rights reserved. Use...
分类:其他   时间:2015-06-16 19:17:35    收藏:0  评论:0  赞:0  阅读:161
监控SharePoint效率之(四) –开展效率测试
在真正上线之前,要对效率做充足的测试,以免上线之后出现响应慢而影响用户体验。那么应该如何做生产环境上线之前就做效率测试呢?   那就需要模拟一个和生产环境相似的测试环境,来完成这个工作。在搭建测试环境的时候,需要注意测试环境要和生产环境足够的接近。比如: 和生产环境同样的硬件规格同样的软件设置同样的操作系统版本同样的第三方解决方案同样的用户,用户组和权限设置   除此之外,还...
分类:其他   时间:2015-06-16 19:16:45    收藏:0  评论:0  赞:0  阅读:129
Kernel散记——系统调用
Kernel散记——系统调用 这里是指arm linux架构(Android4.4) 1,referen http://blog.csdn.net/myarrow/article/details/7036266 1.1,这是讲得比较全面。读完之后,你大致可以讲得清系统调用的过程 “系统调用就是用户民通过swi指令陷入内核,cpu由user模式进入svc模式的过程,调用的过程大致是...
分类:其他   时间:2015-06-16 19:13:33    收藏:0  评论:0  赞:0  阅读:134
HDU3416 Marriage Match IV(spfa+最大流SAP)
Marriage Match IV Time Limit: 2000/1000 MS (Java/Others)    Memory Limit: 32768/32768 K (Java/Others) Total Submission(s): 2391    Accepted Submission(s): 722 Problem Description Do not sincer...
分类:其他   时间:2015-06-16 19:12:35    收藏:0  评论:0  赞:0  阅读:176
最简单的makefile
hello.c的内容如下: #include int main() {     printf("Hello World!\n");     return 0; } makefile 的内容如下: hello.exe : hello.o     gcc -o hello.exe hello.o hello.o : hello.c        gcc -c hello.c ...
分类:其他   时间:2015-06-16 19:12:24    收藏:0  评论:0  赞:0  阅读:221
[LeetCode] Count Complete Tree Nodes
Count Complete Tree Nodes   Given a complete binary tree, count the number of nodes. Definition of a complete binary tree from Wikipedia: In a complete binary tree every level, except possib...
分类:其他   时间:2015-06-16 19:12:14    收藏:0  评论:0  赞:0  阅读:109
cocos2d-x3.3获取时间
一、获取时间 struct tm *tm; time_t timep; #if (CC_TARGET_PLATFORM == CC_PLATFORM_WIN32)  time(&timep); #else struct timeval tv; gettimeofday(&tv, NULL); timep = tv.tv_sec; #endif  tm = localtime(&...
分类:其他   时间:2015-06-16 19:12:05    收藏:0  评论:0  赞:0  阅读:120
保存openssl中RSA密钥对
标准的openssl生成的证书的顺序是 : [OpenSSL 测试程序: https://github.com/qianguozheng/datastructure]如下是生成密钥对, 根据密钥并且分别保存密钥对的私钥,与公钥.经过测试, 密钥对中的私钥可以提取出公钥, 我对其密钥不是很了解,通过测试发现是可以的. 不知道谁可以讲述下./* 产生RSA密钥 */ RSA *rsa = RSA_ne...
分类:其他   时间:2015-06-16 19:11:44    收藏:0  评论:0  赞:0  阅读:206
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!