监控指定文件夹，读取文件（新文件动态读取）里的内容，统计单词的数量。FileSpout.java，监控文件夹，读取新文件内容1234567891011121314151617181920212223242526272829303132333435363738394041424344454647484...
分类：
其他 时间：
2015-06-07 23:11:38
收藏：
0 评论：
0 赞：
0 阅读：
244
本章提到测试的主要目的是逐步建立，不断加强并再次确认我们对于代码的信心：即代码正确并高效地实现了功能。文章认为，最漂亮的测试是那些能将我们的信心最大化的测试，这个信心就是代码的确实现了它被要求的功能，并将一直保持这一点。由于代码不同方面的属性需要不同类型的测试来验证，所以对于“漂亮”的评判准则也不是...
分类：
其他 时间：
2015-06-07 23:11:18
收藏：
0 评论：
0 赞：
0 阅读：
299
Given a stringsand a dictionary of wordsdict, determine ifscan be segmented into a space-separated sequence of one or more dictionary words.For exampl...
分类：
其他 时间：
2015-06-07 23:11:08
收藏：
0 评论：
0 赞：
0 阅读：
249
foreach：一行一行的遍历数据，处理一行的数据，然后返回一个tuple。users = load '/users.data';1）别名引用f = foreach users generate name, age; 2）位置引用f = foreach users generate $0, $1;....
分类：
其他 时间：
2015-06-07 23:10:48
收藏：
0 评论：
0 赞：
0 阅读：
449
环境：hadoop-2.4.1、jdk1.6.0_45、pig-0.12.11、下载pig并解压tar -xzvf pig-0.12.1.tar.gz 2、设置环境变量export PIG_HOME=~/pig-0.12.1export PATH=$PATH:$PIG_HOME/bin 3、测试.....
分类：
其他 时间：
2015-06-07 23:10:08
收藏：
0 评论：
0 赞：
0 阅读：
328
过河问题时间限制：1000ms | 内存限制：65535KB难度：5描述在漆黑的夜里，N位旅行者来到了一座狭窄而且没有护栏的桥边。如果不借助手电筒的话，大家是无论如何也不敢过桥去的。不幸的是，N个人一共只带了一只手电筒，而桥窄得只够让两个人同时过。如果各自单独过桥的话，N人所需要的时间已知；而如果两...
分类：
其他 时间：
2015-06-07 23:09:58
收藏：
0 评论：
0 赞：
0 阅读：
324
1、下载、解压缩2、编辑conf/storm.yaml12345678910111213141516storm.zookeeper.servers:- "vm1"# - "server2"#storm.zookeeper.port: 2181storm.local.dir: "/usr/local/...
分类：
其他 时间：
2015-06-07 23:09:38
收藏：
0 评论：
0 赞：
0 阅读：
282
Time Limit:1000MS Memory Limit:10000KDescription Every time it rains on Farmer John's fields, a pond forms over Bessie's favorite clover patch. Thi...
分类：
其他 时间：
2015-06-07 23:08:58
收藏：
0 评论：
0 赞：
0 阅读：
366
sorted = order data by $0;数值类型按照数值大小比较chararray类型按照字符的字典顺序比较bytearray按照字节的字典顺序比较复杂类型（map、tuple、bag）不能比较null是最小的触发reduce阶段sorted = order data by $0;sor...
分类：
其他 时间：
2015-06-07 23:08:48
收藏：
0 评论：
0 赞：
0 阅读：
286
jnd = join a by f1, b by f2;join操作默认的是内连接，只有两边都匹配才会保留需要用null补位的那边需要知道它的模式：如果是左外连接，需要知道右边的数据集的模式，不匹配的字段用null补位如果是右外连接，需要知道左边的数据集的模式，不匹配的字段用null补位如果是全外连...
分类：
其他 时间：
2015-06-07 23:08:08
收藏：
0 评论：
0 赞：
0 阅读：
311
弱啊弱啊，我用了扩展指令，然后大牛告诉我，只对VC++有用，对G++没用的。。shit，三题就这样没了。方法是使用ST在线算法，O(1)查询，然后用线段树维护。。呃感觉这个好慢。看了大斌神的是用LCA倍增+维护一个表 ，得学习一下。。。先贴弱的代码：#include #include #includ...
分类：
其他 时间：
2015-06-07 23:07:58
收藏：
0 评论：
0 赞：
0 阅读：
211
概念本文列出了Storm的主要概念及相关的信息链接。讨论到的概念有：TopologiesStreamsSpoutsBoltsStreamgroupingsReliabilityTasksWorkersTopologies实时应用的逻辑被打包成了Storm topology。Storm topolog...
分类：
其他 时间：
2015-06-07 23:07:38
收藏：
0 评论：
0 赞：
0 阅读：
337
some = sample data 0.1遍历整个数据集，获取指定比例的行数的数据，获取的数据不确定，条数也不准确。内部重写为filter data by random() <= 0.1抽取100行数据data = load 'data';grpd = group data all;sums = ...
分类：
其他 时间：
2015-06-07 23:07:08
收藏：
0 评论：
0 赞：
0 阅读：
272
users.data的内容如下：lisg 28 75dengsl 24 88 强制类型转换users = load '/users.data'fehed = foreach users generate (int)$1 as age; 隐式类型转换users = load...
分类：
其他 时间：
2015-06-07 23:06:58
收藏：
0 评论：
0 赞：
0 阅读：
334
filter：过滤数据，只有符合特定条件的数据才会被保留下来，然后进入下一个数据流。1）等值比较filter data by $0 == 1filter data by $0 != 12）字符串 正则匹配 JAVA的正则表达式字符串以CM开头filter data by $0 matches 'CM...
分类：
其他 时间：
2015-06-07 23:06:48
收藏：
0 评论：
0 赞：
0 阅读：
412
Datazen是被微软收购的移动端全平台的数据展现解决方案。此篇主要介绍如何创建和发布图表。
分类：
其他 时间：
2015-06-07 23:06:08
收藏：
0 评论：
0 赞：
0 阅读：
311
parallel语句可以附加到Pig Latin中任一个关系操作符后面，然后它会控制reduce阶段的并行，因此只有对与可以触发reduce过程的操作符才有意义。 可以触发reduce过程的操作符有：group、order、distinct、join、cogroup、cross设置paralle.....
分类：
其他 时间：
2015-06-07 23:05:08
收藏：
0 评论：
0 赞：
0 阅读：
498
1、Storm并行度相关的概念Storm集群有很多节点，按照类型分为nimbus（主节点）、supervisor（从节点），在conf/storm.yaml中配置了一个supervisor有多个槽（supervisor.slots.ports），每个槽就是一个JVM，就是一个worker，在每个wo...
分类：
其他 时间：
2015-06-07 23:04:28
收藏：
0 评论：
0 赞：
0 阅读：
353
经纬的合伙人张颖前不久发了一篇名为《泡沫就在那里------致经纬系CEO的一封信》，这篇文章所提到的泡沫论在业界引发了强烈的反响，随后有评论觉得，这明明是VC（风险投资）们自己的危机，为何要拉创业者垫背，似乎对张颖的观点非常不屑。只是笔者想说的是，VC还没下贱到要拉创业者垫背的地步，这怎么说呢.....
分类：
其他 时间：
2015-06-07 23:04:18
收藏：
0 评论：
0 赞：
0 阅读：
289
/// /// http://www.dotnetperls.com/linq /// public partial class LinqForm : Form { const int _max = 1000000; /// /...
分类：
其他 时间：
2015-06-07 23:03:58
收藏：
0 评论：
0 赞：
0 阅读：
290
