没有合适的资源?快使用搜索试试~ 我知道了~
python爬虫修改版.pdf
需积分: 18 84 下载量 192 浏览量
2019-07-09
15:59:36
上传
评论 5
收藏 12.6MB PDF 举报
温馨提示
第一章 爬虫和数据。 第二章 Requests 模块。 第三章 正则表达式。 第四章 XPATH 提取数据。 第五章 动态 HTML 处理。 第六章 多线程爬虫实现。 第七章:Scrapy 框架初步。 第八章:增量爬虫。 第九章:验证码识别。 第十章 MongoDB 数据库。 第十一章 爬虫项目。 第十二章:Redis 数据库。 第十三章:分布式爬虫 Scrapy-redis 框架。 第十四章:Python 爬虫监控,自定义爬虫。 第十五章:项目实战,考核、爬虫流程。 附录
资源详情
资源评论
资源推荐
1
目 录
第
一
章 爬
虫和数
据
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
1
.1 为
什
么
要
做
爬
虫
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
1
.2 爬
虫
是
什
么
..........................................................................................................................
1
1.3 爬虫阶段学习内容
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
2
1.
4
通
用
爬
虫
和
聚焦爬
虫
..........................................................................................................
2
1
.
5
H
T
T
P
和
H
T
T
P
S
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
4
第
二
章
R
e
q
u
e
s
t
s
模
块
..
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
..
.
.
.
.
.
1
3
2.1 Req
u
e
s
t
s
简
介
-
-
让
H
T
T
P
服
务
人
类
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
13
2
.
2
R
e
q
u
e
s
ts g
e
t
请
求
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
3
2.2
.
1
案
例
1
:
爬
取
百
度产品网
页
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
..
1
3
2
.
2
.
2
案
例
2
:爬取新浪新
闻
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
1
4
2
.
2.3 案例 3
:
批
量
爬
取
百
度
贴
吧
.
.
.
.
.
.
.
.
.
.......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
5
2
.
2
.
4
案
例
4
:
爬
取
百
度
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
7
2.3 requests post 请求
...............................................................................................................
17
2
.
3
.
1
案例 5
:
重
写
百
度
翻
译
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
1
8
2
.
3
.
2 案例
6
:
浅
尝
有
道
词
典
翻
译
..
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
1
9
2
.
3
.
3
案例 7
:
深
入
有
道
翻
译
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
2
2
2
.
4
登
录
页
面
信
息
爬
取
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
2
7
2
.
4
.
1
c
o
o
k
i
e
和
s
e
s
s
i
o
n
基
础
知
识
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
2
7
2
.
4
.
2
案
例
8
:
人
人
网
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
3
0
2
.
5
代
理
设
置
............................................................................................................................
3
2
2
.
6
任
务
:
股
吧
信
息与高德
地
图
天
气
信
息
爬
取
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
3
3
第
三
章
正
则
表
达
式
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
3
4
3
.
1
页
面
解
析
和
数
据
提
取
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
3
4
3
.
2
为
什
么
要
学
正
则
表
达
式
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
3
4
3
.
3
基
础
正
则
表
达
式
语
法
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
3
4
3.3.
1
r
e
模
块
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
35
3.3
.
2
贪
婪
模
式
与
非
贪
婪
模
式
...
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
4
3
3
.
3
.
3
案
例 9:郎朗渔
家
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
.....
.
.
错
误
!
未
定
义
书
签
。
3
.
3
.
4
案
例
1
0
:
猫
眼
电
影
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
4
4
第
四
章
X
P
A
T
H
提
取
数
据
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
4
8
4
.
1
X
M
L
简
介
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
4
8
4
.
2
X
M
L
的
节
点
关
系
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
4
9
4
.
3
X
P
A
T
H
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
5
0
4
.
3
.
1
什
么
是 XPath
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
5
0
https://blog.csdn.net/qq_44670803
2
4
.3
.
2 X
P
at
h
开发
工
具
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
5
0
4
.
4
l
x
m
l
模
块
..
..
.
..
.
.
.
.
.
..
..
.
..
.
.
.
..
...
.
.
.
.
.
.
.
..
...
.
.
.
.
.
.
.
..
...
..
.
..
.
.
.
.
.
..
..
.
..
.
.
.
.
.
..
..
.
..
.
.
.
..
...
.
.
.
.
.
.
.
..
...
.
.
.
.
.
.
.
..
.
..
..
.
..
.
.
.
.
.
..
.
54
4
.4
.
1 l
x
m
l
简
介
与
安
装
.
.
..
.
.
.
..
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
..
.
.
.
..
.
..
.
.
.
.
.
.
.
..
.
..
.
.
.
.
.
.
.
..
.
..
.
.
.
..
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
..
.
.
.
..
.
.
54
4.4.2 lxml 初步使用
.........................................................................................................
54
4
.4.
3
l
x
m
l
文
件
读
取
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
5
5
4.4.4 案例 11:糗事百科
................................................................................................
60
4
.
4
.
5
案
例
12:
扇
贝
p
y
t
h
o
n
词
汇
表(x
p
a
t
h
应
用
)
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
.
6
0
4
.
5
正
则
与
X
p
a
t
h
综
合
应用案
例
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
..
.
.
.
..
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
..
.
.
.
..
.
.
.
.
.
.
6
1
4
.
5.
1
案
例
1
3
:
获
取
网
易
云音
乐
的
所
有
歌
手
姓
名
...
.
.
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
...
.
.
.
6
1
4
.
5
.2
案
例
1
4
:
获
取
淘
宝
商
品
信
息
(
图
片
,
描
述
,
价
格
)
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
6
3
第
五
章
动
态
H
T
M
L
处
理
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
6
5
5
.
1
爬
虫
与
反
爬
虫
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
6
5
5
.
2 HT
M
L
介
绍
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
...
.
.
6
6
5
.
3
S
e
l
e
n
i
u
m
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
67
5
.
3
.
1
S
e
l
e
n
i
u
m
简
介
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
6
7
5
.
3
.
2
P
h
a
n
t
o
m
J
S
简
介
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
6
8
5
.
3
.3 案例 15
:
百
度
(
S
e
l
e
n
i
u
m
+
P
h
a
n
t
o
m 快速入门)
..........................................
6
8
5
.
3
.
4
案例 1
6
:
豆
瓣
读
书
(
加
密
数
据获取
)
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
...
.
.
.
7
2
5
.
4
任务
:
案
例
1
7
爬
取
链
家
房
屋
信
息
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
6
8
第
六
章
多
线
程爬
虫
实
现
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
7
5
6
.
1
程
序
,
进
程
,
线程
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
7
5
6
.
2
单
线
程
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
7
5
6
.
3
多
线
程
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
7
6
6
.
4
多
线程和多进程
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
8
5
6
.
5
多线程开发
中
遇
到
的
问
题
.....
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
85
6
.
6
单
线
程
和
多
线
程
爬
虫
案
例
:
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
9
0
6
.
6
.
1
案
例
1
9
:
单
线
程
下
载
腾
讯
招
聘
网
页
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
9
0
6
.
6
.
2
案
例
2
0
:
多
线
程
下
载
腾
讯
招
聘
网
页
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
9
1
第
七
章
:
S
c
r
a
p
y
框
架
初
步
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
9
7
7.1
S
c
r
a
p
y
简
介
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
...
.
.
.
9
7
7
.
2
S
c
r
a
p
y 架构图
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
.....
.
.
.
9
7
7
.
3
S
c
r
a
p
y
安
装
介
绍
.
.
.
.
.
.
.....
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
9
9
7
.
4
S
c
r
a
p
y
源
码
分
析
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
0
2
7
.
4
.
1
S
p
i
d
e
r
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
0
2
7
.
4
.
2
P
a
r
s
e
(
)
方
法
的
工
作
机
制
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
0
3
7
.
4
.
3
L
o
g
g
i
n
g
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
0
3
7
.
5
S
c
r
a
p
y
创
建爬虫项
目
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
.....
.
.
.
.
.
.
1
0
4
https://blog.csdn.net/qq_44670803
3
7
.5
.
1 案
例
21
:
Bo
s
s
直
聘
.............................................................................................
1
0
5
7
.
5
.
2
案
例
2
2
:
腾
讯
招
聘
网
自
动
翻
页
采
集
.
.
.
..
..
.
..
.
.
.
.
.
..
..
.
..
.
.
.
..
...
.
.
.
.
.
.
.
..
...
.
.
.
.
.
.
.
..
...
..
.
..
.
.
.
.
.
.
1
0
5
7
.
5
.3
案
例 2
3
:
腾
讯
招
聘
网
分页
采
集及
详
情
采
集
(
深
入
)
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
1
1
1
7.6 Scrapy 实战
.......................................................................................................................
114
7
.
6
.
1
案例 24
:
淘
车
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
114
7
.
6
.
2
案
例
2
5
:
华
夏
基
金
(
寻
找
最
优
秀
的
基
金
产
品
)
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
1
8
第
八
章
:
增
量
爬
虫
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
1
19
第
九
章
:
验
证
码
识
别
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
..
12
0
9
.
1
机
器
视
觉
.
.
.
.
...
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
1
2
0
9
.
2 O
R
C
库
概
述
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
2
0
9
.
2.1 Tes
s
e
r
a
c
t
.
.
.
.
.
.
.
.
.
.
.
.
.......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
...
120
9
.
2
.
2
处
理
给
规
范
的
文
字
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
2
2
第
十
章
M
o
ngo
D
B
数
据
库
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
1
2
5
1
0
.
1
N
o
S
Q
L
简介
....
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
1
2
5
1
0
.
2
M
o
n
g
o
D
B
简
介
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
2
6
1
0
.
3
M
o
n
g
o
D
B
基础操作
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
3
0
1
0
.
3
.
1
M
o
n
g
o
D
B 概念解析
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
13
0
1
0
.
3
.
2
Mon
g
o
D
B
创
建
数
据
库
(
us
e
d
a
t
a
b
a
s
e
_na
m
e
)
与
删
除
数
据
库
...
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
1
3
3
1
0
.
3
.
3
M
o
ng
o
D
B
创
建
集
合
与
删
除
集
合
.
.
...
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
1
3
4
1
0
.
3
.
4
M
o
n
g
o
D
B
插
入
文
档
(
d
b
.
c
o
l
l
ec
t
i
o
n
.
i
n
s
e
r
t/
s
a
v
e
(
d
o
c
)
)
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
1
3
6
1
0
.
3
.
5
M
o
n
g
o
D
B
更
新
文
档
(
d
b
.
c
o
l
.
u
pd
a
t
e
/
s
a
v
e
(
d
o
c
)
)
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
1
3
7
1
0
.
3
.
6
M
o
n
g
o
D
B
删
除
文
档
(
d
b
.
c
o
l
.
r
e
m
o
v
e
(
)
)
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
4
0
1
0
.
3
.
7
M
o
n
g
o
D
B
查
询
文
档
(
cb.
c
o
l
.
f
i
n
d
(
)
)
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
142
1
0
.
3
.
8
M
o
n
g
o
D
B
L
imit、S
k
i
p
、
s
o
r
t
、
c
o
u
n
t
方
法
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.....
14
9
1
0
.
3
.
9
M
o
n
g
o
D
B
聚
合
(
d
b
.
c
o
l
.
a
ggrega
t
e
(
)
)
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
5
0
1
0
.
3
.
1
0
M
o
n
g
o
D
B
索
引
(
d
b
.
c
o
l
.
e
n
s
u
r
e
I
n
d
e
x
(
)
)
(
选
讲
)
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
5
3
1
0
.
4
P
y
t
h
o
n
访
问
M
o
n
g
o
D
B
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
5
4
第
十
一
章
爬
虫
项
目
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
5
6
1
1
.
1
R
e
d
i
s
数
据
库
初
步
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
5
6
1
1.
1
.
1
R
e
d
i
s
环
境
配置
.
.
...
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
15
6
11.
1
.
2
R
e
d
i
s
数
据
结
构
之列表
.
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
1
5
7
1
1
.
1
.
3
p
y
t
h
o
n
操
作
r
e
d
i
s
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
.....
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
1
5
7
1
1
.
2
案
例
1
8
:
链
家
租
房
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
5
8
第
十
二
章
:
R
e
d
i
s
数
据
库
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
6
4
1
2
.
1
、
R
e
d
i
s
简
介
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
6
4
1
2
.
2
常
用
命
令
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
6
4
1
2
.
3
R
e
d
i
s
的
数
据
类型
..
.
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
.....
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
.
.
.
.
.
....
.
.
.
.
.
.
.
1
6
8
https://blog.csdn.net/qq_44670803
4
1
2.
4
Re
d
is
高
级实
用
特
性
.......................................................................................................
17
2
1
2
.
4
.
1
R
e
d
i
s
安
全
.
.
..
..
.
..
.
.
.
.
.
..
..
.
..
.
.
.
..
...
.
.
.
.
.
.
.
..
...
.
.
.
.
.
.
.
..
...
..
.
..
.
.
.
.
.
..
..
.
..
.
.
.
.
.
..
..
.
..
.
.
.
..
...
.
.
.
.
.
.
.
..
...
.
.
.
.
.
172
12
.
4
.
2 R
e
d
i
s
主
从
复
制
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
..
.
.
.
.
.
.
.
..
.
..
.
.
.
.
.
.
.
..
.
..
.
.
.
..
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
..
.
.
.
..
.
..
.
.
.
.
.
.
.
..
.
..
.
.
.
.
.
.
1
7
3
1
2
.
4
.
3
R
e
d
i
s
事
务
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
7
4
1
2
.
4
.
4 Re
d
i
s
乐
观
锁
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
1
7
4
1
2
.
4
.
5
R
e
d
i
s
持
久
化
机
制
(
通
过
修
改
配
置
文
件
做
设
置
)
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
7
4
1
2
.4.
6
R
e
d
i
s
发
布
订
阅
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
1
7
5
1
2
.
4
.
7
R
e
d
is
配
置
虚
拟
内
存
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
..
.
.
.
..
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
..
.
.
.
..
.
.
.
1
7
6
1
2
.
5
P
y
th
o
n
访
问
R
e
d
i
s
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
.
1
7
6
第
十
三
章
:
分
布
式
爬
虫
S
c
r
a
p
y
-
r
e
d
i
s
框
架
...................................................................................
1
78
1
3
.
1
分
布
式
爬
虫
简
介
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
1
7
8
1
3
.
1
.
1
为
什
么
要
用
分
布
式
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
7
8
1
3
.
1
.
2
S
c
r
apy
和
S
c
r
a
p
y
-
r
edis
的
区
别
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
1
7
8
1
3
.
1
.
3
S
c
rapy-r
e
d
i
s
架
构
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
1
7
8
1
3
.
1
.
4
总
结
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
8
0
1
3
.
2
编
写
分
布
式爬虫代码(
初
步
使
用
)
............................................................................
181
1
3
.
2
.
1
源
码
分
析
参
考
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
8
1
13
.
3
从
零
搭
建
R
e
d
is-
S
c
r
a
p
y
分
布
式
爬虫
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
.
.
.
.
.
...
.
.
.
.
2
0
1
1
3
.
3
.
1
S
c
r
a
py
-
R
e
d
i
s
分
布
式
策
略
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
2
01
1
3
.
3
.
2
安
装
R
e
d
i
s
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
2
0
2
1
3
.
3
.
3
修改
配
置
文
件
re
d
i
s
.
c
o
n
f
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
2
0
2
1
3
.
3
.
4
测
试
S
l
a
v
e
端
远
程
连
接
M
a
s
t
e
r
端
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
2
0
2
1
3
.
3
.
5
R
e
d
i
s
数据库
桌
面
管
理
工
具
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
..
.
2
0
3
第十四章
:
P
y
t
h
o
n
爬
虫
监
控
,
自
定
义
爬
虫
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
2
0
4
1
4
.
1
P
y
t
h
o
n
邮
件监控(
S
M
T
P
)
...
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
......
.
.
.
.
.
.
.
.
.
.
.
.
.
.
2
0
4
1
4
.
1
.
1
S
M
T
P
简
介
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
2
0
4
1
4
.
1
.
2
邮
件
监
控
五
个
步
骤
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
2
0
5
1
4
.
1
.
3
邮
件
监
控
发
送
(
代
码
)
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
2
0
5
第
十
五
章
:
项
目
实
战
,
考
核
、
爬
虫
流
程
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
2
0
8
https://blog.csdn.net/qq_44670803
1
第一章 爬虫和数据
1.1
为什么要做爬虫
首
先
请
问
:
都
说
现在是
"
大
数
据
时
代
",那
数
据
从
何
而
来
?
1
)
企
业
产
生
的
用
户
数
据
:
百
度
指
数
:
h
t
t
p
:
/
/
i
n
d
e
x
.
b
aidu.c
o
m
/
阿
里
指
数
:
h
t
t
p
s
:
/
/
a
l
i
z
s
.
t
a
o
b
a
o
.
c
o
m
/
T
B
I
腾
讯
浏览指
数
:
h
t
t
p
:
/
/
tbi
.
t
e
n
c
e
n
t
.
c
om/
新
浪
微
博
指
数
:
h
t
t
p
:
/
/
d
a
ta.wei
b
o
.
c
o
m
/
i
n
d
e
x
2)数据平台购买数据:
数
据
堂
:
h
t
t
p
:
/
/
w
w
w
.
datata
n
g
.
c
o
m
/
a
b
o
u
t
/
a
b
o
u
t
-us.ht
m
l
国
云
数
据
市
场
:
h
t
t
p
:
/
/
w
w
w.mooj
n
n
.
c
o
m
/
d
a
t
a
-
m
a
r
k
e
t
/
贵
阳
大
数
据
交易所
:
h
t
t
p
:
/
/
t
rad
e
.
g
b
d
e
x
.
c
om/t
r
a
d
e
.
w
e
b
/
ind
e
x
.
j
s
p
3
)
政
府
/
机
构
公
开
的
数
据
:
中
华
人
民
共
和
国
国
家
统
计
局
数
据
:
h
t
t
p
:
//
d
a
t
a
.
s
t
a
t
s
.g
o
v
.
c
n
/
i
n
d
e
x.
h
t
m
世
界银
行
公
开
数
据
:
h
t
t
p
:/
/
d
a
t
a
.
w
o
r
l
d
b
a
n
k
.
o
r
g
.
c
n
/
联
合
国
数
据
:
h
t
t
p
:
/
/
d
a
t
a
.
u
n
.
o
r
g
/
纳斯达克:http://www.nasdaq.com/zh
4
)
数
据
管
理
咨
询
公
司
:
麦
肯
锡
:htt
p
:
/
/
w
w
w
.
m
c
k
i
nsey
.
c
o
m
.
c
n
/
埃
森
哲
:
h
t
t
p
s
:
/
/
w
w
w
.
a
c
c
e
n
t
u
r
e
.
c
o
m
/
c
n
-
z
h
/
艾
瑞
咨
询
:
h
t
t
p
:
/
/
w
w
w
.
i
r
e
s
e
a
r
c
h
.
c
o
m
.
c
n
/
5
)
爬
取
网
络
数
据
:
如
果
需
要
的
数
据
市
场
上
没
有
,
或
者
不
愿
意
购
买
,
那
么
可
以
选
择
招
/
做
一
名
爬
虫
工
程
师
,
自
己动手丰
衣
足
食
。
拉
勾
网
P
y
t
h
o
n
爬
虫
职
位
:
h
t
t
p
s
://
w
w
w
.
l
a
g
o
u
.co
m
/
j
o
b
s
/
l
i
st_p
y
t
h
o
n
%
E
7
%
88%
A
C
%
E
8
%
9
9
%
AB
1
.
2
爬
虫
是
什
么
百
度
百
科
:
网
络
爬
虫
网
络
爬
虫
是
一
种
按
照
一
定
的规则,
自
动
地
抓
取
万
维
网
信
息
的
程
序或者脚
本
。
https://blog.csdn.net/qq_44670803
剩余227页未读,继续阅读
酱汁儿999
- 粉丝: 52
- 资源: 9
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
最新资源
资源上传下载、课程学习等过程中有任何疑问或建议,欢迎提出宝贵意见哦~我们会及时处理!
点击此处反馈
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功
评论0