没有合适的资源?快使用搜索试试~ 我知道了~
web-scraper:负责数据挖掘的微服务(URL->处理后的信息)
共12个文件
js:5个
json:2个
lock:1个
需积分: 9 0 下载量 82 浏览量
2021-04-30
08:19:26
上传
评论
收藏 45KB ZIP 举报
温馨提示
Web刮板 它负责在后台使用Google chrome headless进行网页抓取。 要求 Node.js> 8.x或docker计算机 运行API 手动的 git clone git@github.com:digestoo/web-scraper.git cd web-scraper npm install PORT=8080 npm start 使用npm运行API后,您可以使用其他环境变量: PROXY_URL代理网址,格式为 EXECUTABLE_PATH自定义Google chrome的路径(您可以在chrome://version找到它) USER_DATA_DIR用户配置文件的路径 SLOW_MO将操作减慢指定的毫秒数 HEADLESS=false模式运行服务器 USER_AGENT全局用户代理 PORT 如果您在本地计算机上运行时遇到任何问题-此页面-> 可能会
资源推荐
资源详情
资源评论
收起资源包目录
web-scraper-master.zip (12个子文件)
web-scraper-master
yarn.lock 58KB
server.js 2KB
Dockerfile 1KB
.circleci
config.yml 987B
test
indexSpec.js 2KB
serverSpec.js 3KB
README.md 1KB
lib.js 1KB
.gitignore 884B
index.js 141B
package-lock.json 80KB
package.json 925B
共 12 条
- 1
资源评论
EngleSEN
- 粉丝: 48
- 资源: 4502
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功