爬虫学习 12.scrapy框架之递归解析和post请求 今日概要 递归爬取解析多页页面数据 scrapy核心组件工作流程 scrapy的post请求发送 今日详情 1.递归爬取解析多页页面数据 \ 需求：将糗事百科所有页码的作者和段子内容数据进行爬取切持久化存储 \ 需求分析：每一个页面对应一个u ...
分类：
其他 时间：
2020-01-10 19:32:31
收藏：
0 评论：
0 赞：
0 阅读：
66
正则 字符组 元字符 量词 贪婪匹配与非贪婪 转义符 re模块 findall search re其他方法 re分组命名 ...
分类：
其他 时间：
2020-01-10 19:31:46
收藏：
0 评论：
0 赞：
0 阅读：
54
1.价格格式化 export function moneyFilter(val){ if(!val||val==0){ return "0.00" } val = Math.floor(Number(val)*100+0.500001) let decimalStr = val%100 if(dec ...
分类：
Web开发 时间：
2020-01-10 19:31:24
收藏：
0 评论：
0 赞：
0 阅读：
89
CSS 段落/换行/缩进 1.盒模型 box-sizing: content-box|border-box|inherit;content-box（默认） ： 实际宽度/高度 = width/height（元素内容大小） + padding + border border-box： width/he ...
分类：
Web开发 时间：
2020-01-10 19:31:04
收藏：
0 评论：
0 赞：
0 阅读：
59
一、提升requests模块的爬取效率 1、多线程和多进程(不建议使用) 2、线程池或进程池(适当使用) 3、单线程+异步协程(爬虫推荐使用 二、爬取某视频到本地 import re import time import random import requests from lxml import ...
分类：
其他 时间：
2020-01-10 19:30:46
收藏：
0 评论：
0 赞：
0 阅读：
82
中心化的工作流 优势 首先它让每个开发者都有自己的本地的完整项目副本。隔离的环境使得每个开发都的工作独立于项目的其它修改 —— 他们可以在自己的本地仓库中添加提交，完全无视上游的开发，直到需要的时候。 其次，它让你接触到了 Git 分支和合并模型。Git 分支被设计为故障安全的机制，用来在仓库之间整 ...
分类：
其他 时间：
2020-01-10 19:29:53
收藏：
0 评论：
0 赞：
0 阅读：
55
lvs基础 lvs基础原理及实现 Linux Cluster: Cluster:计算机集合，为解决某个特定问题组合起来形成的单个系统 LB：Load Balancing,负载均衡 HA： High Availiablity,高可用 HP：High Performance,高性能 lvs集群的类型： ...
分类：
其他 时间：
2020-01-10 19:29:35
收藏：
0 评论：
0 赞：
0 阅读：
79
由于前段时间一直比较忙，所以没有及时更新学习进度，接下来我会慢慢补上。 数学建模中的常见问题 美国数学建模竞赛（Mathematical Contest in Modeling,MCM）从1985年开始一直发展至今。中国大学生数学建模竞赛开展也有20余年，已逐渐成熟起来。下面我们通过历年赛题来了解到 ...
分类：
其他 时间：
2020-01-10 19:29:00
收藏：
0 评论：
0 赞：
0 阅读：
57
快捷键的使用： 1 执行(run) alt+r 2 提示补全 (Class Name Completion) alt+/ 3 单行注释 ctrl + / 4 多行注释 ctrl + shift + / 5 向下复制一行 (Duplicate Lines) ctrl+alt+down 6 删除一行或选 ...
分类：
其他 时间：
2020-01-10 19:28:43
收藏：
0 评论：
0 赞：
0 阅读：
76
问题建模 系统建模 结构建模 黑盒白盒 已知未知 输入、输出、目标 分析（分解）、综合 抽象描述 所有的思维问题根结与语言问题 主谓宾定状补 问题的流（结构）+参与方 ...
分类：
其他 时间：
2020-01-10 19:28:26
收藏：
0 评论：
0 赞：
0 阅读：
74
1.auto关键字 auto即C语言中的局部变量的默认属性 auto表明将被修饰的变量存储在栈中 编译器默认所有的局部变量都是auto的 2.register关键字 register关键字指明将局部变量存储于寄存器中 register只请求寄存器变量，但不一定成功 register变量的必须是CPU ...
分类：
编程语言 时间：
2020-01-10 19:28:04
收藏：
0 评论：
0 赞：
0 阅读：
78
spark-submit 任务提交 spark-submit \--class sparksql.Oracle_Sqs_Hive \--master yarn \--deploy-mode cluster \/home/spark/333.jar 几个重要的参数说明: (1)executor_cor ...
分类：
其他 时间：
2020-01-10 19:27:22
收藏：
0 评论：
0 赞：
0 阅读：
60
引言 在我们React组件开发中，当一个父组件的想要往自己的子孙组件传值的时候，可以使用 属性，但是其每一个子组件，都要向下传递数据，这样造成的数据的耦合性，所以在 React 官方文档中 提供了 特性来解决，这个问题。 父子组件之间的通信 我们先看一下React中，父子组件通信的机制，父子组件的通 ...
分类：
其他 时间：
2020-01-10 19:27:03
收藏：
0 评论：
0 赞：
0 阅读：
78
题目： 开发一个简单错误记录功能小模块，能够记录出错的代码所在的文件名称和行号。 处理： 1、 记录最多8条错误记录，循环记录，对相同的错误记录（净文件名称和行号完全匹配）只记录一条，错误计数增加； 2、 超过16个字符的文件名称，只记录文件的最后有效16个字符； 3、 输入的文件可能带路径，记录文 ...
分类：
编程语言 时间：
2020-01-10 19:26:46
收藏：
0 评论：
0 赞：
0 阅读：
329
打开微信就不用管了： - 自动打开未读消息 - 自动滑动屏幕检测红包 - 自动跳过无效红包 基于Auto JS，apk版本4.01： - 大多数动作均基于控件 - 极个别点击基于动态抓取的坐标 - 这就意味着不限机型或屏幕尺寸 使用说明： - 安装auto.js apk - 导入js脚本 - 在au ...
分类：
微信 时间：
2020-01-10 19:26:27
收藏：
0 评论：
0 赞：
0 阅读：
87
音乐播放完毕后，执行某个方法 视频同样的道理 ...
分类：
编程语言 时间：
2020-01-10 19:25:42
收藏：
0 评论：
0 赞：
0 阅读：
970
export function example(caseA, caseB) { let data = '' // if else 写法示例 // 比较繁琐,还容易出错 if (caseA 'A') { if (caseB 'a') data = '结果1' if (caseB 'b') data = ...
分类：
其他 时间：
2020-01-10 19:25:20
收藏：
0 评论：
0 赞：
0 阅读：
103
在合并分支的时候，希望将多次提交合并成一个，然后再 cherry pick 到主分支。 合并分支 develop 分支做开发，可能会进行多次提交，但是在发布或者进行 PR 的时候，我们只希望看到一次提交。这个时候，我们需要进行 之后进行合并。 这个时候，看到的是一上对 COMMIT 信息的提示 第一 ...
分类：
其他 时间：
2020-01-10 19:24:58
收藏：
0 评论：
0 赞：
0 阅读：
75
安装 https://github.com/alibaba/canal/releases/tag/canal-1.1.4 ...
分类：
其他 时间：
2020-01-10 19:24:42
收藏：
0 评论：
0 赞：
0 阅读：
126
<!DOCTYPE html> <html lang="zh"> <head> <meta charset="UTF-8" /> <meta name="viewport" content="width=device-width, initial-scale=1.0" /> <meta http-e ...
分类：
其他 时间：
2020-01-10 19:24:17
收藏：
0 评论：
0 赞：
0 阅读：
63
