没有合适的资源?快使用搜索试试~ 我知道了~
OLX_Scraper:使用Scrapy + MongoDB的OLX Scraper。 它将最近发布的有关请求产品的广告报废并转...
共20个文件
pyc:7个
py:7个
png:2个
需积分: 9 0 下载量 122 浏览量
2021-02-03
11:15:13
上传
评论
收藏 123KB ZIP 举报
温馨提示
OLX_Scraper 使用Scrapy + MongoDB的OLX Scraper。 它将最近发布的有关请求产品的广告报废,然后转储到NOSQL MONGODB。 注意:此存储库不再维护。 屏幕截图 关于 Scrapy程序,用于刮擦有关产品的最新广告并将其存储在MONGODB数据库中。 有关要搜索产品的所有信息都在args.py中 返回命令后更改值 用法 为了正确使用,首先安装selenium和parsel.Open Command Line并输入以下命令 pip install pymongo Configure these Settings in settings.py ITEM_PIPELINES = { 'olx_scraper.pipelines.MongoDBPipeline': 300, } MONGODB_SERVER = "localhost" (can be changed) MONGODB_PORT = 27017(Set Whatever port mongodb is running on your system) MONGODB_DB = "
资源推荐
资源详情
资源评论
收起资源包目录
OLX_Scraper-master.zip (20个子文件)
OLX_Scraper-master
MONGODB.PNG 96KB
olx_scraper
olx_scraper
settings.py 3KB
pipelines.py 641B
middlewares.py 2KB
items.py 208B
__pycache__
items.cpython-36.pyc 314B
pipelines.cpython-36.pyc 836B
args.cpython-36.pyc 345B
__init__.cpython-36.pyc 132B
settings.cpython-36.pyc 383B
spiders
__init__.py 161B
scrape_olx.py 4KB
__pycache__
__init__.cpython-36.pyc 140B
scrape_olx.cpython-36.pyc 3KB
scrapy.cfg 266B
args.py 202B
ARGS.PNG 24KB
LICENSE 11KB
README.md 1KB
.gitignore 1KB
共 20 条
- 1
资源评论
刘霏霏
- 粉丝: 35
- 资源: 4717
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
最新资源
资源上传下载、课程学习等过程中有任何疑问或建议,欢迎提出宝贵意见哦~我们会及时处理!
点击此处反馈
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功