本篇将要介绍的是从一个用户开始,通过抓关注列表和粉丝列表,实现用户的详细信息抓取并将抓取到的结果存储到MongoDB。1环境需求基础环境沿用之前的环境,只是增加了MongoDB(非关系型数据库)和PyMongo(Python的MongoDB连接库),默认我认为大家都已经安装好并启动了MongoDB服务。项目创建、爬虫创建、禁用ROBOTSTXT_OBEY设置略(可以参考上一篇)2测试爬虫效果我这里
分类:
数据库技术 时间:
2018-02-26 11:03:09
收藏:
0 评论:
0 赞:
0 阅读:
233
H5,原生js 图片压缩
分类:
Web开发 时间:
2018-02-26 11:02:37
收藏:
0 评论:
0 赞:
0 阅读:
228
编写YAML结构空格表示项目“-”表示,列表健值对“:”表示,字典缩进2个空格,不能用tabecho-e"[\t]"tabecho-e‘\t‘|od-An-tx1------------>090a09->\t->tab0a->\n->enterecho-e""|od-An-tx1-------->200a2
分类:
其他 时间:
2018-02-26 11:02:13
收藏:
0 评论:
0 赞:
0 阅读:
222
一、yum软件包管理器?1、yum的作用??YUM:YellowdogUpdateModifier,rpm的前端程序,可解决软件包相关依赖性,可在多个库之间定位软件包,up2date的替代工具。??yumrepository:(yum资源库)以.repo结尾的yum库文件中存储了众多rpm包,以及包的相关的元数据文件(放置于特定目录repodata下)??yum库文件中支持的文件的服务器:???h
分类:
其他 时间:
2018-02-26 11:02:02
收藏:
0 评论:
0 赞:
0 阅读:
219
初识Spring接触过Java开发的小伙伴们,应该都或多或少听说过Spring框架(Spring框架通常指SpringFramework),而且大部分的公司都是使用着Spring全家桶框架。之所以说是全家桶,是因为现在Spring系列的框架很多,常见的例如SpringBoot、SpringMVC、SpringCloud、SpringSecurity等等。但是学习Spring系列的框架,我们都是先从
分类:
编程语言 时间:
2018-02-26 11:01:47
收藏:
0 评论:
0 赞:
0 阅读:
158
我们知道git是分布式的版本库,也就是本地仓库里面包含了开发的所用内容,每个人都是本地版本库的主人,包括历史记录、文件内容。即使没有和远程代码库交换依旧可以提交内容到本地仓库,然后gitpush到远程仓库。可以使用git$commit--help查看每个命令的html帮助文档,例如gitinit--help一.创建本地仓库gitinit可以在本地创建一个空的本地仓库。其常用命令行如下,gitini
分类:
其他 时间:
2018-02-26 11:01:26
收藏:
0 评论:
0 赞:
0 阅读:
239
查看是否支持SSLldd`whichvsftpd`查看是否调用这个库:libssl.so例如:[root@centos6~]#ldd`whichvsftpd`linux-vdso.so.1=>(0x00007fff482e6000)"libssl.so.10=>/usr/lib64/libssl.so.10(0x00007f9c95521000)"#就是这个libwrap.so.0=&
分类:
其他 时间:
2018-02-26 11:01:14
收藏:
0 评论:
0 赞:
0 阅读:
163
一、什么是线程 在传统操作系统中,每个进程有一个地址空间,而且默认就有一个控制线程。线程就是一条流水线工作的过程,一条流水线必须属于一个车间,一个车间的工作过程是一个进程。车间负责把资源整合到一起,是一个资源单位,而一个车间内至少有一个流水线流水线的工作需要电源,电源就相当于cpu。所以,进程只是用来把资源集中到一起(进程只是一个资源单位,或者说资源集合),而线程才是cpu上的执行单位。多线程(
分类:
编程语言 时间:
2018-02-26 11:01:04
收藏:
0 评论:
0 赞:
0 阅读:
168
FTP服务是由vsftpd包提供的不再由xinetd服务管理用户认证配置文件:/etc/pam.d/vsftpd服务脚本:centos7:/usr/lib/systemd/system/vsftpd.servicecentos6:/etc/rc.d/init.d/vsftpd主配置文件:/etc/vsftpd/vsftpd.conf格式:option=value"注意:=前后不要有空格&
分类:
其他 时间:
2018-02-26 11:00:53
收藏:
0 评论:
0 赞:
0 阅读:
232
随着Internet与网络的迅速发展并逐步走进人们的家庭,使消费电子、计算机、通信(3C)一体化趋势日趋明显,嵌入式系统也成为研究与应用的热点。嵌入式实时Linux操作系统以价格低廉、功能强大又易于移植而正在被广泛采用,成为新兴的力量,当然,有眼光的人早已经看出其中的发展和前景。如今随着WAP手机、PDA、机顶盒、及DVD/VCD播放机已经迅速普及,用户对这些手持式设备的GUI提出了更高的要求,希
分类:
系统服务 时间:
2018-02-26 11:00:42
收藏:
0 评论:
0 赞:
0 阅读:
234
FTP:FileTransferProtocol基于C/S结构双通道协议:分为数据传输通道,命令传输通道数据传输格式:(默认)二进制,和文本FTP传输数据时分为两种模式:从服务器角度来看主动模式:即服务器主动连接客户端命令传输通道打开的端口:客户端端口:随机端口服务器端口:tcp21数据传输通道打开的端口:客户端端口:命令端口+1服务器端口:tcp20被动模式:即客户端主动连接服务器端命令传输通道
分类:
其他 时间:
2018-02-26 11:00:24
收藏:
0 评论:
0 赞:
0 阅读:
221
RAID廉价磁盘冗余阵列(Redundant Array of Inexpensive Disks)RAID 包含一组或者一个集合甚至一个阵列。使用一组磁盘结合驱动器组成 RAID 阵列或 RAID 集。将至少两个磁盘连接到一个 RAID 控制器,而成为一个逻辑卷,也可以将多个驱动器放在一个组中。一组磁盘只能使用一个 RAID 级别。使用 RAID 可以提高服务器的性能。不同 RAID 的级别,性
分类:
其他 时间:
2018-02-26 11:00:14
收藏:
0 评论:
0 赞:
0 阅读:
238
十七周一次课(2月9日)20.20告警系统主脚本创建目录[root@qingyun-01~]#cd/usr/local/sbin/#进入到/usr/local/sbin/目录下[root@qingyun-01sbin]#mkdirmon#创建子目录[root@qingyun-01sbin]#cdmon[root@qingyun-01mon]#mkdirbinconfshareslogmail#创建
分类:
其他 时间:
2018-02-26 11:00:04
收藏:
0 评论:
0 赞:
0 阅读:
152
Redhat 5.8更換centos Yum源
分类:
其他 时间:
2018-02-26 10:59:55
收藏:
0 评论:
0 赞:
0 阅读:
158
Linux核心秘籍Linux系统严格区分大小写Linux一切皆文件Linux命令之间需要空格网络运维课程大纲Windows网络技术(思科、华为)Linux1.计算机由硬件和软件组成硬件:看得见,摸得着(显示器/键盘/鼠标/机箱/主板/cpu/内存/硬盘...)软件:系统软件windows/Linux/unix应用软件qq/360/office/...2.计算机分类个人计算机几乎99%以上安装的是W
分类:
系统服务 时间:
2018-02-26 10:59:37
收藏:
0 评论:
0 赞:
0 阅读:
227
假设一个团队有一个项目经理,两个开发人员协作开发一个项目:第一步:由项目经理创建项目1.在服务端新建仓库用于存放项目。2.在myeclipse中创建项目:选中项目右键->team->share project->svn->使用已有资源库位置->选择要保存项目的仓库 3.选中项目右键->team->提交 则可以将项目提交到仓库。 第二步
分类:
其他 时间:
2018-02-26 10:59:26
收藏:
0 评论:
0 赞:
0 阅读:
175
ls命令: 用来显示目标列表,在Linux中是使用率较高的命令。ls命令的输出信息可以进行彩色加亮显示,以分区不同类型的文件。语法: ls [选项] [文件名...]常用选项: -a:列出目录中所有文件,包括以“.”开头的隐藏文件。 &nb
分类:
系统服务 时间:
2018-02-26 10:58:50
收藏:
0 评论:
0 赞:
0 阅读:
160
centos7修改主机名
分类:
系统服务 时间:
2018-02-26 10:58:40
收藏:
0 评论:
0 赞:
0 阅读:
159
豆子公司的无线系统是思科的WLC和AP,用了大概4年多没升级过软件了。最近总公司扫描漏洞,发了一份警告信给我们大概是XXIP有若干漏洞等等,其中漏洞最多的就是WLC。好吧,是时候升级一下了。首先看看当前的AP型号和WLC,找到他们最高兼容的版本,下载之后,就可以准备安装了。具体步骤1.官网下载CodeImage,同时准备一个tftp的服务器2.登录http和ssh3.准备下载安装CodeImage
分类:
其他 时间:
2018-02-26 10:58:23
收藏:
0 评论:
0 赞:
0 阅读:
312
haproxy负载均衡
分类:
其他 时间:
2018-02-26 10:58:04
收藏:
0 评论:
0 赞:
0 阅读:
217