没有合适的资源?快使用搜索试试~ 我知道了~
JavLibraryCrawler
共17个文件
py:10个
cfg:1个
txt:1个
5星 · 超过95%的资源 需积分: 50 3 下载量 126 浏览量
2021-06-07
10:19:58
上传
评论 1
收藏 12KB ZIP 举报
温馨提示
JavLibraryCrawler 该项目允许您从 javLibrary 中抓取所有电影。 它抓取以下项目: 标题 指定 图书馆网站的网址 类别清单 发布日期 期间 演员 封面图片网址 封面图片哈希值 它还会在本地下载封面图片并生成相应的图,您可以在设置中配置图片。 可以在找到图像设置教程。 ##安装 安装 pip。 安装scrapy。 安装依赖: pip install -r requirements.txt ##Run 这个项目包含两种爬虫: 评分最高的电影(best_rated_spider) 所有电影(actor_spider) 要启动爬虫,请运行:仅抓取评分最高的电影(500 部电影): scrapy crawl best_rated_spider 或者抓取库中的所有电影(> 150000部电影,所有封面图片的部分约为16 GB)。 scrapy cr
资源推荐
资源详情
资源评论
收起资源包目录
JavLibraryCrawler-master.zip (17个子文件)
JavLibraryCrawler-master
scrapy.cfg 272B
javLibraryCrawl
pipelines.py.old 2KB
pipelines.py 4KB
spiders
new_releases.py 2KB
actor.py 2KB
__init__.py 161B
best_rated.py 2KB
most_wanted.py 2KB
new_entries.py 2KB
result 0B
items.py 581B
__init__.py 0B
settings.py 996B
requirements.txt 57B
src
images
empty 0B
.gitignore 729B
README.md 1KB
共 17 条
- 1
鑨鑨
- 粉丝: 30
- 资源: 4653
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
最新资源
资源上传下载、课程学习等过程中有任何疑问或建议,欢迎提出宝贵意见哦~我们会及时处理!
点击此处反馈
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功
- 1
- 2
前往页