Python爬取某招聘网站信息并保存excle
2星 需积分: 0 21 浏览量
2023-03-15
20:56:34
上传
评论
收藏 18KB DOCX 举报 
Python 爬取某招聘网站的招聘信息
具体需求为：
输入关键字后，爬取招聘信息中的招聘职位，招聘要求，招聘公司、月薪和公司福利。并将
爬取结果保存为 excle。
代码示例：
# 导入需要的模块
import scrapy
from scrapy.crawler import CrawlerProcess
from scrapy.utils.project import get_project_settings
import pandas as pd
# 定义一个 Item 类，用来存储爬取的数据
class JobItem(scrapy.Item):
# 招聘职位
title = scrapy.Field()
# 招聘要求
requirement = scrapy.Field()
# 招聘公司
company = scrapy.Field()
# 月薪
salary = scrapy.Field()
# 公司福利
welfare = scrapy.Field()
# 定义一个 Spider 类，用来编写爬虫逻辑
class BossSpider(scrapy.Spider):
# 爬虫名称，必须唯一
name = "boss"
# 允许的域名，限制爬虫只爬取该域名下的网页
allowed_domains = ["zhipin.com"]
# 起始的 URL 列表，爬虫会从这些 URL 开始抓取数据
start_urls = []
def __init__(self, keyword=None, *args, **kwargs):
super(BossSpider, self).__init__(*args, **kwargs)
资源评论
2301_778666392023-06-06为什么运行不出来岗位信息结果呐，只显示了几行英文，没有出来代码信息
Colt666
- 粉丝: 26
- 资源: 23
最新资源
- 2022年各城市PM2.5, PM10, SO2, NO2等环境空气质量数据
- Golang：通过Gin框架+Redis+责任链，实现一个简单的钉钉机器人，进行消息处理 ps:多应用版
- 2021年各城市PM2.5, PM10, SO2, NO2等环境空气质量数据
- CORRUPT.navicat150-premium-cs-x64.exe
- centos7 ssh 升级至 9.6p1
- DriverMax Pro .exe
- PHP端通过modbus协议跟第三方设备进行数据通信
- navicat安装包亲测可用
- 算法部署-使用OpenVINO部署MobileStyleGAN轻量化高保真图像合成算法-项目源码-优质项目实战.zip
- 基于java实现远程采集华为逆变器使用modbus tcp协议进行通讯的设备数据
资源上传下载、课程学习等过程中有任何疑问或建议，欢迎提出宝贵意见哦~我们会及时处理！
点击此处反馈
