首页 > 2014年03月11日 > 全部分享
Flume 中Sink批量参数设置调优
在Flume 配置中,Sink的参数batchSize 会影响到整个流程的性能。比如说HDFS sink,它的参数称作hdfs.batchSize,这样称呼是由于历史的原因,建议使用hdfs.txnEvenMax。 在sink端调优批量值设置,它依赖于相应的隧道(channel)的事务容量。sink端的批量大小应该小于或者等于channel端的事务容量,而事务容量应该设置为实际需要的最大值(...
分类:其他   时间:2014-03-11 09:00:00    收藏:0  评论:0  赞:0  阅读:424
hibernate缓存机制
一级缓存(session缓存) 1、生命周期就是session的生命周期 2、一级缓存存放的数据都是私有数据 把session存放在threadlocal中,不同的线程是不能访问的,所以保证了数据的安全性 3、怎么样把数据存放到一级缓存中 利用session.save/update/load/get方法都可以存放在一级缓存中 4、利用session.get/load方法可以把数据从一级缓存中取出 5、session.evict方法可以把一个对象从...
分类:其他   时间:2014-03-11 08:53:13    收藏:0  评论:0  赞:0  阅读:395
php中$this->是什么意思?
$this 的含义表示什么,实例化后的具体对象! 我们一般是先声明一个类,然后用这个类去实例化对象! 但是,当我们在声明这个类的时候,想在类本身内部使用本类的属性或者方法。应该怎么表示呢?...
分类:Web开发   时间:2014-03-11 08:40:03    收藏:0  评论:0  赞:0  阅读:227
POJ1852
Ants Time Limit: 1000MS   Memory Limit: 30000K Total Submissions: 8093   Accepted: 3714 Description An army of ants walk on a horizontal pole of length l cm, each with ...
分类:其他   时间:2014-03-11 08:59:16    收藏:0  评论:0  赞:0  阅读:472
JavaEE体系架构概述
闲的蛋痛,复习下。 1.java web应用的缺陷 2.什么是企业级应用 3.javaee体系平台核心思想 4.ejb组件和容器 5.pojo与轻量级框架 javaweb应用的缺陷...
分类:其他   时间:2014-03-11 08:58:34    收藏:0  评论:0  赞:0  阅读:472
图的存储方式
1.图的存储方式 图的存储方式有邻接矩阵,邻接链表,十字链表等,邻接矩阵表示法通常将图G中的结点编为1,2,3…V,然后构造一个V*V的矩阵a[V][V],邻接矩阵的空间需求是O(V^2).对于无向图,邻接矩阵是一个对称矩阵,有时为了减少空间需求,可以存储半个矩阵。邻接矩阵也可以存储权重图,矩阵中的元素代表权重值,如果两个结点之间没有边,可以将对应的权重值设置为-1或者一个不可能的值。 对...
分类:其他   时间:2014-03-11 08:43:51    收藏:0  评论:0  赞:0  阅读:245
LeetCode | Pascal's Triangle
题目 Given numRows, generate the first numRows of Pascal's triangle. For example, given numRows = 5, Return [ [1], [1,1], [1,2,1], [1,3,3,1], [1,4,6,4,1] ] 分析 逐层构造,注意边界条件。 代码...
分类:其他   时间:2014-03-11 08:35:54    收藏:0  评论:0  赞:0  阅读:446
Thinking in BigDate(14)大数据之DM经典模型(5)
数据挖掘与统计学之间的区别,我在上面的一篇博客中细细谈到过,这里不多赘述。实际上,所有的数据挖掘技术都是以概率论和统计学为基础的。 下面我们将探讨如何用模型来表示简单的、描述性的统计数据。如果我们可以描述所要找的事物,那么想要找到它就会变得很容易。这就是相似度模型的来历——某事物与所要寻找的事物越相似,其得分就越高。 主要介绍:相似度模型、表查询模型、RFM、朴素贝叶斯模型、线性回归、多元回归、逻辑回归分析等模型...
分类:其他   时间:2014-03-11 08:43:09    收藏:0  评论:0  赞:0  阅读:694
hadoop的伪分布安装
hadoop有3种安装模式,分别是:本地模式、伪分布模式、集群模式。 本文只介绍伪分布安装模式。 hadoop伪分布安装的步骤: 1、验证IP地址 执行命令: service network restart 验证: ifconfig2、关闭防火墙 执行命令: service iptables stop 验证: service iptables status3、防火...
分类:其他   时间:2014-03-11 08:56:25    收藏:0  评论:0  赞:0  阅读:493
EasyUI入门
概述         EasyUI是在本次项目中使用的,封装的非常的好,非常容易实现想要的效果,所以,在这里介绍一下EasyUI。 EasyUI简介          EasyUI是一个名称,它代表的是基于JQuery实现的各种用户界面的插件,即,EasyUI是在JQuery上的一层封装,注意,在封装JQuery的同时,也封装了CSS代码,这样使EasyUI更容易实现编程人员的需求。...
分类:其他   时间:2014-03-11 09:02:07    收藏:0  评论:0  赞:0  阅读:544
JobConrol实现原理 ---《hadoop技术内幕》读书笔记
JobControl : 在实际场景中,作业可能比较复杂,相互之间存在依赖关系,这些作业构成有向图(DAG),jobControl可以实现作业间的调度关系。 主要通过addDepending()方法来设置作业间的依赖关系。 设计原理: JobControl由两个类组成:Job 和 Jobcontrol 。 Job类  :封装了一个MR作业及其对应的依赖关系,主要负责监控各个依赖作业的运行状...
分类:其他   时间:2014-03-11 08:45:05    收藏:0  评论:0  赞:0  阅读:469
哈理工校赛1C题
C.长长长长龙 Time Limit: 3000 MS Memory Limit: 32768 K Total Submit: 202 (73 users) Total Accepted: 50 (46 users) Special Judge: No Description 时间:今天是...
分类:其他   时间:2014-03-11 08:36:37    收藏:0  评论:0  赞:0  阅读:513
python学习
什么是python Python是一种简单易学,功能强大的编程语言,它有高效率的高层数据结构,能简单而有效地实现面向对象编程。Python简洁的语法和对动态输入的支持,再加上解释性语言的本质,使得它在大多数平台上的很多领域都是一个理想的脚本语言,特别适用于快速的应用程序开发。...
分类:编程语言   时间:2014-03-11 08:44:26    收藏:0  评论:0  赞:0  阅读:504
PB函数大全(超全,解析很全面)
这几天在pb花的时间比较长,用一个新的ide,一个新的语言,在短时间内去开发一个MIS,也是比较有难度的一件事儿。最主要的是熟悉语法格式和各种常用函数,再结合以前所学的编程语言,来快速消化并掌握它。        工欲善其事,必先利其器。所以熟悉了语法格式后,常用函数则需要有个大概了了解,方便用时来查。下面是我收集的常用函数,比较多,希望对大家有用。 Abs() 功能计算绝对值。...
分类:其他   时间:2014-03-11 08:55:46    收藏:0  评论:0  赞:0  阅读:227
LeetCode | Populating Next Right Pointers in Each Node II
题目 Follow up for problem "Populating Next Right Pointers in Each Node". What if the given tree could be any binary tree? Would your previous solution still work? Note: You may only use c...
分类:其他   时间:2014-03-11 08:37:20    收藏:0  评论:0  赞:0  阅读:472
细数JDK里的设计模式
前面有些废话就不翻译了,直接切入正题吧~ 结构型模式 适配器模式 用来把一个接口转化成另一个接口。 java.util.Arrays#asList()javax.swing.JTable(TableModel)java.io.InputStreamReader(InputStream)java.io.OutputStreamWriter(OutputStre...
分类:其他   时间:2014-03-11 08:57:08    收藏:0  评论:0  赞:0  阅读:565
Apache Kafka开发入门指南
Apache Kafka开发入门指南作者:chszs,转载需注明。博客主页:http://blog.csdn.net/chszsApache Kafka可以帮助你解决在发布/订阅架构中遇到消费数百万消息的问题。如今,商业应用、社交应用以及其它类型的应用产生的实时信息在不断增长,这些信息需要以简单的方式快速、可靠地路由到各种类型的接收者。在大多数情况下,产生信息和消费信息的应用都是自然分开的,彼此不...
分类:其他   时间:2014-03-11 08:38:03    收藏:0  评论:0  赞:0  阅读:524
插入排序,希尔排序
插入排序及希尔排序   插入排序: 字段定义: 排序:数据分为有序和无序,使数据从无序到有序这一过程为排序。用的策略称为排序算法。 时间复杂度:算法不存在特定的是时间单位,用O表示一个算法的上界(最坏情况)。 算法描述: 从第一个元素开始,该元素可以认为已经被排序 取出下一个元素,在已经排序的元素序列中从后向前扫描 如果该元素(已排序)大于新元素,将该元素...
分类:其他   时间:2014-03-11 09:05:14    收藏:0  评论:0  赞:0  阅读:373
Java中另类使用内存的方法
sun.misc.Unsafe为你大开Java的方便之门,你可以用它做很多Java不允许的事情,在一些非常特殊的场景下它还是非常有用的。99%的时候,你都应该避免使用它,然而在有些非常罕见的情况下,只有它能解决问题。 本文讲述了它在OpenHFT中的使用场景以及我希望在Java 9中看到哪些功能。如果希望访问大量内存的同时又不影响GC,就特别适合使用Unsafe。在进程间共享内存,同时又不希望引...
分类:其他   时间:2014-03-11 09:04:32    收藏:0  评论:0  赞:0  阅读:421
django表单处理(一)--最简单的表单
是时候讲django的表单处理了。 最简单的表单处理就是从输入框中提取字符串,交给后台进行数据处理并返回相应结果。 本着简单入门的原则,今天设计的表单就只有一个文本框和一个按钮。 在templates目录下新建一个test01.html文件 django表单处理 body, div { padding: 0; margin: 0; } #containe...
分类:其他   时间:2014-03-11 08:47:14    收藏:0  评论:0  赞:0  阅读:433
2185条   上一页 1 ... 61 62 63 64 65 ... 110 下一页
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!