# 05-WebCrawlers
网络爬虫（Web Crawlers）学习笔记。
----------
### 内容说明：
#### 1、Scrapy文件夹：
web抓取框架Scrapy学习笔记。
#### 2、其他：
+ 01-URL.py：用Python抓取指定URL页面。
+ 02-BFS.py：使用队列来实现爬虫的广度优先搜索(BFS)算法。
+ 03-Chrome.py：伪装浏览器来访问网站。
+ 04-Login.py：模拟用户登录（以登录 CSDN 网站为例）。
+ 05-tieba.py：爬取百度贴吧的HTML网页到本地。
+ 06-JDprice.py：爬虫获取京东的商品价格，并把爬取结果保存至Excel。
+ 07-BaiduLenovo.py：百度搜索框联想词的获取。
+ 08-IdentifyingCode.py：读取验证码图片。
+ 09-downPicture.py：爬取某个网页上的所有图片资源。
+ 10-zhihuLogin.py：知乎网的登录。
+ 11-CSDNBlogList.py：根据用户名，获取该用户的CSDN的博客列表。
+ 12-ChromeCookie.py：在Python中使用Chrome浏览器已有的Cookies发起HTTP请求。
+ 13-CookieDeciphering.py：Chrome 33+浏览器 Cookies encrypted_value 解密。
+ 14-ChromePassword.py：获取Chrome浏览器已保存的账号和密码。
+ 15-ZhihuAnswerList.py：获取某个用户的知乎回答列表及赞同数（静态网页爬虫）。
+ 16-selenium.py：动态爬虫工具 selenium 的安装与使用（通过控制浏览器实现）。
+ 17-Phantomjs.py：动态爬虫工具 Phantomjs 的安装与使用（通过JS渲染实现）。
+ 18-WeiboAnalbum.py：爬取新浪微博某个用户的头像相册（通过分析API JSON）。
+ 19-BeautifulSoup.py：Beautiful Soup 学习笔记(python3中的爬虫匹配神器)。
+ 20-DoubanMovieTop250.py：爬取豆瓣评分最高的250部电影(使用Beautiful Soup)。
+ 21-DoubanMovieTypeTop.py：按类别爬取豆瓣评分最高的电影(使用Beautiful Soup)。
+ 22-PyQuery.py：Python中PyQuery库的使用总结。
+ 23-C315Check.py：根据物流防伪码，查询所购商品是否正品。
Python 网络爬虫（Web Crawlers）学习笔记。.zip
需积分: 5 74 浏览量
2024-02-21
12:57:15
上传
评论
收藏 44KB ZIP 举报
Python 网络爬虫（Web Crawlers）学习笔记。.zip （39个子文件） 
kwan1117 
23-C315Check.py 3KB 07-BaiduLenovo.py 2KB 13-CookieDeciphering.py 901B 09-downPicture.py 1KB .gitattributes 378B 02-BFS.py 4KB 08-IdentifyingCode.py 697B 11-CSDNBlogList.py 6KB 06-JDprice.py 4KB 05-tieba.py 3KB 17-Phantomjs.py 298B 21-DoubanMovieTypeTop.py 3KB 20-DoubanMovieTop250.py 4KB ChromeCookies.py 2KB 24-FilesDownload.py 1KB 01-URL.py 1KB 15-ZhihuAnswerList.py 3KB 16-selenium.py 2KB .gitignore 660B 12-ChromeCookie1.py 2KB 18-WeiboAnalbum.py 2KB 14-ChromePassword.py 1KB __pycache__ ChromeCookies.cpython-34.pyc 2KB 10-zhihuLogin.py 3KB README.md 2KB 22-PyQuery.py 5KB 03-Chrome.py 6KB Scrapy 
00-Scrapy安装.txt 1KB tutorial tutorial __init__.py 0B items.py.tmpl 293B settings.py.tmpl 3KB spiders __init__.py 161B pipelines.py.tmpl 294B scrapy.cfg 274B 02-Scrapy创建项目.txt 576B 01-Scrapy安装失败解决方案.txt 2KB 04-Login.py 4KB 19-BeautifulSoup.py 7KB 12-ChromeCookie2.py 2KB资源评论
