一、爬虫基本原理 1. 什么是爬虫？ 爬取数据 2. 什么是互联网？ 由一堆网络设备，把一台台的计算机互联到一起 3. 互联网建立的目的 数据的传递与分享 4. 什么是数据？ 例如：电商平台的商品信息 链家、自如的房源信息 股票证券投资信息（雪球网，东方财富） 12306的票务信息 5. 什么是上网 ...
分类：
其他 时间：
2019-07-01 15:04:00
收藏：
0 评论：
0 赞：
0 阅读：
93
本系列博客是LeetCode的刷题笔记。给定一个数组，它的第 i 个元素是一支给定股票第 i 天的价格。最多只允许完成一笔交易（即买入和卖出一支股票），设计一个算法来计算你所能获取的最大利润。注意不能在买入股票前卖出股票。 ...
分类：
其他 时间：
2019-07-01 15:03:00
收藏：
0 评论：
0 赞：
0 阅读：
88
将nmon上传到服务器： 使用secureCRT连接服务器，连上后再打开文件à连接SFTP标签，如下图所示： 在SFTP下，在linux命令前加l表示是对本地客户端进行操作，不加l表示是对linux服务器进行操作。 进行上传和下载前需要先把本地客户端和服务器两边的路径设置好，首先在服务器端使用命令找 ...
分类：
其他 时间：
2019-07-01 15:02:36
收藏：
0 评论：
0 赞：
0 阅读：
119
大部分的ETL或者数据迁移项目不可避免的会从源系统中抽取很多源表的数据到目标数据库中，少则几十张表，多则成百上千，这些表的抽取规则往往比较简单，只需要从源表中增量或者全量的抽取原始数据到目标数据库中，不需要做过多的清洗和转换，也就是ELT模式中的EL操作，这部分没什么技术含量但是重复工作量比较大，因... ...
分类：
其他 时间：
2019-07-01 15:02:04
收藏：
0 评论：
0 赞：
0 阅读：
113
https://spotbugs.readthedocs.io/en/latest/bugDescriptions.html https://xvik.github.io/gradle-quality-plugin/3.0.0/guide/config/ https://github.com/dag ...
分类：
其他 时间：
2019-07-01 15:01:38
收藏：
0 评论：
0 赞：
0 阅读：
114
除了RDB持久化功能之外，Redis还提供了AOF（Append Only File）持久化功能（记录保存数据库状态）。 与RD持久化通过保存数据库中的键值对来记录数据库状态不同，AOF是通过保存Redis服务器所执行的写命令来记录数据库状态的。 如图所示： 举例：在redis客户端执行一下三条命令 ...
分类：
其他 时间：
2019-07-01 15:01:17
收藏：
0 评论：
0 赞：
0 阅读：
88
刚来公司实习发现公司的前端使用的是vue，之前根本就没有听说过。然后一上来就需要看代码，but but 就是没有文档什么的东西， 就需要自己去研读，我就想去运行其中的前端和后端联调起来方便理解，结果在配置和运行中出现了很多挫折，我就想写一下方便 大家不去采坑，直接运行好 一、在IDEA中配置vue插 ...
分类：
其他 时间：
2019-07-01 15:00:32
收藏：
0 评论：
0 赞：
0 阅读：
94
将数据捕获到文件，便于以后进行分析和绘制图形。 捕获数据到文件，只要运行带 -f 标志的 nmon 命令。执行nmon –f ***后，nmon 将转为后台运行。 # ./nmon –f -s 30 –c 100 -s是采样频率，隔多长时间收集一次，这里指定的是30秒一次； -c是采样次数，一共要收 ...
分类：
其他 时间：
2019-07-01 15:00:06
收藏：
0 评论：
0 赞：
0 阅读：
107
大数据涉猎点——大数据集群监控之二
分类：
其他 时间：
2019-07-01 14:28:08
收藏：
0 评论：
0 赞：
0 阅读：
115
摘要：Heroku的问题让我们意识到，在负载均衡测试时发现问题并妥善解决的成功经验有没有？于是，挖掘出“淘宝在双十一压测OB时发现存在严重的随机访问导致负载不均问题，并通过加权算法妥善解决”的成功案例，也就是本文。在CSDN云计算频道日前所做的文章《响应高达6秒用户揭露Heroku私自修改路由造成高支出》中，网友们认为这是“因随机调度+Rails的单线程处理导致延迟增加的负载均衡失败的案例”。但在
分类：
其他 时间：
2019-07-01 14:27:22
收藏：
0 评论：
0 赞：
0 阅读：
93
生产中Hive常用技巧
分类：
其他 时间：
2019-07-01 14:26:42
收藏：
0 评论：
0 赞：
0 阅读：
115
numpy数据转成Tensor小Demoimportnumpyasnpimporttensorflowastftemp_np=np.zeros((3,3))print(type(temp_np))#<class‘numpy.ndarray‘>tensor_temp=tf.convert_to_tensor(temp_np)#<class‘tensorflow.python.fra
分类：
其他 时间：
2019-07-01 14:26:00
收藏：
0 评论：
0 赞：
0 阅读：
103
对于2015年才出现的SD-WAN，一直处在“一个名词，各自表述”的尴尬中。但由于其在当前的网络圈太火爆的缘故，已经到了“脚踢×××，拳打路由器”的地步，各路厂商纷纷易帜，不管有的没的，都言必称自己的家当就是SD-WAN，以至于各位看官也不清楚谁是谁非，只能袖手旁观，看个热闹。趁着Abloomy在市场上发布自研的SD-WAN产品之际，我对SD-WAN见诸于媒体文章的概念讨论进行了整理，试图给出有价
分类：
其他 时间：
2019-07-01 14:24:30
收藏：
0 评论：
0 赞：
0 阅读：
98
目录：?什么是公共ip地址？?私有IP与公共IP地址?公共IP地址范围?如何查找您的公共IP地址?动态ip?隐藏您的公共IP地址什么是公共ip地址？公共IP地址是您的家庭或企业路由器从ISP接收的IP地址。任何可公开访问的网络硬件都需要公共IP地址，例如家庭路由器以及托管网站的服务器。公共IP地址是插入公共互联网的所有设备的不同之处。每个访问互联网的设备都使用唯一的IP地址。实际上，公共IP地址有
分类：
其他 时间：
2019-07-01 14:23:52
收藏：
0 评论：
0 赞：
0 阅读：
109
Excel是表格处理工具，可以实现输入，统计，可视化呈现等功能的表格。软件界面：#先把坑占了，不用提前指定具体值input_2=tf.placeholder(tf.float32)#比如每个batchoutput_op=tf.multiply(input_1,input_2)withtf.Session()assess:sess.ru
分类：
其他 时间：
2019-07-01 14:23:17
收藏：
0 评论：
0 赞：
0 阅读：
85
不管是开发、测试、运维，每个技术人员心里都有一个成为技术大牛的梦，毕竟“梦想总是要有的，万一实现了呢”！正是对技术梦的追求，促使我们不断地努力和提升自己。然而“梦想是美好的，现实却是残酷的”，很多同学在实际工作后就会发现，梦想是成为大牛，但做的事情看起来跟大牛都不沾边，例如：程序员说“天天写业务代码还加班，如何才能成为技术大牛”测试说“每天都有执行不完的测试用例”运维说“扛机器接网线敲shell命
分类：
其他 时间：
2019-07-01 14:22:56
收藏：
0 评论：
0 赞：
0 阅读：
83
alertmanager+webhook发报警邮件（使用587端口）：webhook安装：gogetgithub.com/prometheus/alertmanager/examples/webhook启动webhook（默认端口为TCP5001）：go/bin/webhookwebhookmail.py下载网址（需要手动复制其内容）：https://github.com/youerning/bl
分类：
Web开发 时间：
2019-07-01 14:22:30
收藏：
0 评论：
0 赞：
0 阅读：
147
人生中的第一篇博客，也不知道以后会不会没眼看(捂脸)Linux的主流操作系统：CentOS，Ubuntu，Android。所有的Linux操作系统都是由Linux内核+GNU工具组成的。一般来说我们使用的Linux内核版本都比较旧，因为较旧的版本更加稳定。Linux内核版本由3部分组成(主版本号、次版本号、末版本号)。然后常用的GUN工具有bash、vim等。目前市面上流行的Linux发行版有三大
分类：
系统服务 时间：
2019-07-01 14:22:14
收藏：
0 评论：
0 赞：
0 阅读：
101
一、常见Linux的发行版有哪些？并描述不同发行版之间的联系与区别Linux发行版=Linux内核+商业软件linux的发行版：RedHat、Fedora、suse、红旗、debian、Ubuntu、centos不同发行版之间的联系和区别：RedHat：是redhat自己的发行的企业版，是redhat的一个重要节点。Fedore：是一款基于linux的操作系统，也是一组维持计算机正常运行的软件集合
分类：
其他 时间：
2019-07-01 14:21:32
收藏：
0 评论：
0 赞：
0 阅读：
94
