python爬取招聘网信息并保存为csv文件
需积分: 0 184 浏览量
2023-04-02
19:11:37
上传
评论 9
收藏 18KB DOCX 举报
python 爬取招聘网信息并保存为 csv 文件
我们以猎聘网为例
一、打开网站查找信息
进入后搜索想要爬取的岗位信息，右键选择 “检查” 进入开发者界面
点击右上角的 network，选择 doc
然后点击图中的搜索按钮，输入想要爬取的岗位名称，然后刷新页面，选择搜索下边的第二
个
这个时候我们看到有我们需要的 url，从中也可知网站的请求方式为 get 请求，我们也得用 get
请求！
部分代码解析：
1、导入模块
import parsel
import requests
import csv
1
2
3
2、用 url 放我们的网址
url = 'https://www.liepin.com/zhaopin/'
1
3、定义 data 放我们的参数
这个是网页中 payload 的参数，也就是 url 中问号后面的参数
data = {
'inputFrom': 'www_index',
'workYearCode': '0',
'key': 'python',
'scene': 'input',
'ckId': 'kfpt1emhvkrshc9o4h2xquxd74pfihmb',
}
1
2
3
4
5
资源评论
福尔摩星儿
- 粉丝: 0
- 资源: 229
最新资源
- date0425111111111111111111111
- 包含贪心算法的定义及python代码部分实现
- 自动驾驶-状态估计和定位之扩展卡尔曼滤波.pdf
- csdn之x-ca-key,x-ca-nonce,x-ca-signature与x-ca-signature-headers探索
- 基于TM1620数码显示芯片STM32单片机驱动程序软件源代码.zip
- 【tomcat6使用redis配置session共享】
- 包含杨辉三角的说明及java代码实现
- FDN371N-NL-VB一款SOT23封装N-Channel场效应MOS管
- AutomotiveSPICE-V4.0 中文版
- Java实现杨辉三角的生成和打印代码示例.md
资源上传下载、课程学习等过程中有任何疑问或建议，欢迎提出宝贵意见哦~我们会及时处理！
点击此处反馈
