调优 Spark Streaming集成Kafka时，当数据量较小时默认配置一般都能满足我们的需要，但是当数据量大的时候，就需要进行一定的调整和优化。 合理的批处理时间（batchDuration） 几乎所有的Spark Streaming调优文档都会提及批处理时间的调整，在StreamingCon ...
分类：
其他 时间：
2020-08-03 23:42:49
收藏：
0 评论：
0 赞：
0 阅读：
90
(目录) 背景 在正常的工作中，我们经常遇到从消息队列中接收一天的数据量，并对其进行排序的场景。那么，我们通常会想到最经典的十大经典排序算法。确实，这些算法都可以满足我们的场景需要，，但如果我们要求接收消息过程中，实时进行排序呢？这些算法显然都不能满足需求，它们都是在接收到所有数据后，再统一排序。所 ...
分类：
编程语言 时间：
2020-08-03 23:42:23
收藏：
0 评论：
0 赞：
0 阅读：
91
使用的开发工具为VS2010，简单操作如下： 首先创建项目，整体为单页面应用 在App.xaml中指明启动初始页面 <Application x:Class="Calcluator.App" xmlns="http://schemas.microsoft.com/winfx/2006/xaml/pr ...
分类：
Windows开发 时间：
2020-08-03 23:42:11
收藏：
0 评论：
0 赞：
0 阅读：
113
第一场是朝鲜出题 1004 Distinct Sub-palindromes 跟榜开的这题，一开始猜是26的n次方，直接交一发wa了, 后来和队友想了半天，想到了abcabcabc，答案就是n<=3时是26的n次方, else ans = 26*25*24 1005 Fibonacci Sum 每个 ...
分类：
其他 时间：
2020-08-03 23:41:58
收藏：
0 评论：
0 赞：
0 阅读：
85
1.说明 在有些系统中，为了节省内存资源、保证数据内容的一致性，对某些类要求只能创建一个实例，这就是所谓的单例模式。 2.特点 单例类只有一个实例对象； 该单例对象必须由单例类自行创建； 单例类对外提供一个访问该单例的全局访问点； 一：单例模式 1.结构 2.懒汉式程序 该模式的特点是类加载时没有生 ...
分类：
其他 时间：
2020-08-03 23:41:43
收藏：
0 评论：
0 赞：
0 阅读：
83
#一、前言 首先，我们知道javascript是一门单线程的非阻塞的脚本语言，这是由其最初的用途来决定的：与浏览器交互。 单线程则意味着，javascript代码在执行时，都只有一个主线程来处理所有的任务。而非阻塞则是当代码需要进行一项异步任务时（无法立即返回结果，需要花一定时间才能返回的任务，如I ...
分类：
编程语言 时间：
2020-08-03 23:41:21
收藏：
0 评论：
0 赞：
0 阅读：
100
Description Farmer John knows that an intellectually satisfied cow is a happy cow who will give more milk. He has arranged a brainy activity for cows ...
分类：
其他 时间：
2020-08-03 23:41:06
收藏：
0 评论：
0 赞：
0 阅读：
102
#一、排序算法介绍 排序也称排序算法(Sort Algorithm),排序是将一组数据，依指定的顺序进行排列的过程。 ###排序的分类: ●内部排序: ?指将需要处理的所有数据都加载到内部存储器中进行排序。 ●外部排序法: ?数据量过大，无法全部加载到内存中，需要借助外部存储进行排序。 #二、算法的 ...
分类：
编程语言 时间：
2020-08-03 23:40:48
收藏：
0 评论：
0 赞：
0 阅读：
103
为避免全局扫描，跨数据库时，尽量派生子表关联；如示列有查询数据1.8K左右，进行如下查询： 方法一： SELECT A.times,A.aid,A.asn,A.pn,A.code,B.barcode FROM [10].TEST.dbo.TBL_A A LEFT JOIN [20].TEST.dbo ...
分类：
数据库技术 时间：
2020-08-03 23:40:33
收藏：
0 评论：
0 赞：
0 阅读：
122
IPV4日益枯竭,IPV6越来越多的被人们所熟知,笔者搜集大量资料,整理出此篇与IPV6相关的核心技术,并结合自己日常工作的接触,总结此文,纯干货分享!
分类：
其他 时间：
2020-08-03 23:39:47
收藏：
0 评论：
0 赞：
0 阅读：
93
liunx-文件系统详解
分类：
其他 时间：
2020-08-03 23:38:30
收藏：
0 评论：
0 赞：
0 阅读：
99
开发高并发系统时有三把利器用来保护系统：缓存、降级和限流。API网关作为所有请求的入口，请求量大，我们可以通过对并发访问的请求进行限速来保护系统的可用性。常用的限流算法比如有令牌桶算法，漏桶算法，计数器算法等。在Zuul中我们可以自己去实现限流的功能（Zuul中如何限流在我的书《SpringCloud微服务-全栈技术与案例解析》中有详细讲解），SpringCloudGateway的出现本身就是用来
分类：
编程语言 时间：
2020-08-03 23:38:19
收藏：
0 评论：
0 赞：
0 阅读：
114
第一部分：准备篇101SpringCloud与微服务概述101.1传统的单体老项目101.1.1单体应用101.1.2改进单体应用的架构101.1.3向微服务靠拢111.2什么是微服务121.2.1微服务介绍121.2.2使用微服务架构的好处121.2.3使用微服务架构的害处131.2.4重构前的准备工作131.3什么是SpringCloud141.3.1SpringCloud介绍141.3.2S
分类：
编程语言 时间：
2020-08-03 23:38:05
收藏：
0 评论：
0 赞：
0 阅读：
99
前面我们对SpringCloudGateway进行了一个入门的学习，具体文章可以查看《SpringCloudGateway网关尝鲜》进行学习。网关负责转发工作，那么它需要知道后端的服务信息，今天我们来学习下SpringCloudGateway整合Eureka的操作，实现服务转发功能。在之前的基础上添加eureka-client的依赖：<dependency><groupId>
分类：
编程语言 时间：
2020-08-03 23:37:51
收藏：
0 评论：
0 赞：
0 阅读：
103
16年的这个时候，跟着自己的想法开发了一个技术网站，取名为‘猿天地’。寓意是程序猿的天地，开发者的网站。网站域名也是程序猿天地的缩写cxytiandi.com。上线之后就开始了写文章的旅程，以前没有写文章的习惯，这个网站的出现让我养成了坚持写文章，积累工作中遇到问题的习惯。很多时候，不是我们做不到，而是我们不想做，一个字概括就是懒。当你想做一件事，必须得有一个推动你前进的东西，猿天地则成了推动我前
分类：
其他 时间：
2020-08-03 23:37:34
收藏：
0 评论：
0 赞：
0 阅读：
90
Gateway介绍SpringCloudGateway是Spring官方基于Spring5.0，SpringBoot2.0和ProjectReactor等技术开发的网关，SpringCloudGateway旨在为微服务架构提供一种简单而有效的统一的API路由管理方式。SpringCloudGateway作为SpringCloud生态系中的网关，目标是替代NetflixZUUL，其不仅提供统一的路由
分类：
编程语言 时间：
2020-08-03 23:37:13
收藏：
0 评论：
0 赞：
0 阅读：
95
首先我们封装一个Http请求的工具类，用HttpURLConnection实现，当然你也可以用HttpClient,或者直接用Jsoup来请求（下面会讲到Jsoup）。工具类实现比较简单，就一个get方法，读取请求地址的响应内容，这边我们用来抓取网页的内容，这边没有用代理，在真正的抓取过程中，当你大量请求某个网站的时候，对方会有一系列的策略来禁用你的请求，这个时候代理就排上用场了，通过代理设置不同
分类：
编程语言 时间：
2020-08-03 23:36:51
收藏：
0 评论：
0 赞：
0 阅读：
96
长按二维码，关注我们现在越来越多的公司开始拥抱SpringCloud了，很多Java方向的同学也开始积极的学习SpringCloud，其实这边还有一个问题就是说：虽然大家学了Eureka，Ribbon，Hystrix，Zuul，Feign等等，但是要运用到实际的项目中去还是有些难度的。微服务难就难在服务的拆分上，框架只是工具，很多人都会用，服务拆分，服务之间的关系这些都是在拆分时候需要考虑的事情。
分类：
编程语言 时间：
2020-08-03 23:36:33
收藏：
0 评论：
0 赞：
0 阅读：
99
赠书活动火热进行中，赶快参与吧！详情请查看《聊聊Akka》今天有个朋友咨询我一个问题，截图如下：qq.pngqq.png在忙完了自己的事情后，我也简单的看了下，然后写了一个Filter来实现这位朋友说的功能，其实就是想记录请求的参数信息，下面我把涉及到的请求都打印了一遍，当然日志格式你可以自定义。输出日志的FilterpublicclassDebugRequestextendsZuulFilter
分类：
编程语言 时间：
2020-08-03 23:36:19
收藏：
0 评论：
0 赞：
0 阅读：
95
前面我们大致的聊了下如何保证各个微服务之前调用的认证问题SpringCloud中如何保证各个微服务之间调用的安全性SpringCloud中如何保证各个微服务之间调用的安全性(下篇)原理是通过每个微服务请求之前都从认证服务获取认证之后的token,然后将token放入到请求头中带过去，这样被调用方通过验证token来判断是否合法请求。我们也在zuul中通过前置过滤器来统一设置token,其实还漏掉了
分类：
编程语言 时间：
2020-08-03 23:36:05
收藏：
0 评论：
0 赞：
0 阅读：
124
