没有合适的资源?快使用搜索试试~ 我知道了~
scraper:刮板模板
共24个文件
py:16个
pep8:1个
txt:1个
需积分: 9 0 下载量 99 浏览量
2021-06-26
00:36:56
上传
评论
收藏 26KB ZIP 举报
温馨提示
爬虫说明 如果您有任何问题,请联系@Anfernee Chang GTalk: Skype: anfernee-chang 产品数据库架构 您必须仔细阅读 - 我们在 items.py 中定义了产品项目,请按照它。 验证 请运行你的蜘蛛并确保它在发送之前通过scraper/pipelines/validation.py 。 在发送之前,请确保蜘蛛不会因“scrapy crawl spider”而引发任何错误。 任何未经检查就发送的蜘蛛将导致“惩罚”! 笔记 请遵循PEP8风格。 请使用'pasre_product'作为A产品的解析方法,如果可以,请不要传入任何元数据。 请在蜘蛛类变量“xpaths”字典中添加节点的 XPath。 我们将使用这些信息来检查您的蜘蛛。 如果页面没有 XPath 到任何必填字段的数据,请引发 ValueError('XXX!') 。 请使用“
资源推荐
资源详情
资源评论
收起资源包目录
scraper-master.zip (24个子文件)
scraper-master
pylintrc 11KB
.gitignore 420B
requirements.txt 541B
.pep8 29B
ci.sh 279B
scraper
middlewares.py 570B
spiders
ozbinoculars.py 12KB
__init__.py 161B
dealsdirectold.py 10KB
globaldirectshop.py 3KB
harveynormanold.py 16KB
testgithub.py 0B
__init__.py 0B
utils
env.py 2KB
__init__.py 0B
pipelines
validation.py 3KB
items_rq.py 2KB
__init__.py 0B
settings.py 1KB
items.py 3KB
scrapyd_settings_example.py 1KB
README.md 2KB
scrapy.cfg 244B
.env-example 34B
共 24 条
- 1
资源评论
蓝色山脉
- 粉丝: 17
- 资源: 4613
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功