python爬虫实例，快速入门
需积分: 4 36 浏览量
2023-04-13
20:49:20
上传
评论
收藏 16KB DOCX 举报
涉及主要知识点:
web 是如何交互的
requests 库的 get、post 函数的应用
response 对象的相关函数，属性
python 文件的打开，保存
代码中给出了注释，并且可以直接运行哦
如何安装 requests 库(安装好 python 的朋友可以直接参考，没有的，建议先装
一哈 python 环境)
windows 用户，Linux 用户几乎一样:
打开 cmd 输入以下命令即可，如果 python 的环境在 C 盘的目录，会提示权限不
够，只需以管理员方式运行 cmd 窗口
pip install -i https://pypi.tuna.tsinghua.edu.cn/simple requests
Linux 用户类似(ubantu 为例): 权限不够的话在命令前加入 sudo 即可
sudo pip install -
i https://pypi.tuna.tsinghua.edu.cn/simple requests
1.爬取强大的 BD 页面，打印页面信息
# 第一个爬虫示例,爬取百度页面
import requests #导入爬虫的库，不然调用不了爬虫的函数
response = requests.get("http://www.baidu.com") #生成一个 response 对
象
response.encoding = response.apparent_encoding #设置编码格式
print("状态码:"+ str( response.status_code ) ) #打印状态码
print(response.text)#输出爬取的信息
2.常用方法之 get 方法实例，下面还有传参实例
# 第二个 get 方法实例
import requests #先导入爬虫的库，不然调用不了爬虫的函数
response = requests.get("http://httpbin.org/get") #get 方法
print( response.status_code ) #状态码
print( response.text )
3. 常用方法之 post 方法实例，下面还有传参实例
# 第三个 post 方法实例
import requests #先导入爬虫的库，不然调用不了爬虫的函数
response = requests.post("http://httpbin.org/post") #post 方法访问
print( response.status_code ) #状态码
print( response.text )
资源评论
