没有合适的资源?快使用搜索试试~ 我知道了~
scrapetition:用Haskell编写的Web刮板
共45个文件
hs:26个
sql:4个
sh:3个
需积分: 5 0 下载量 146 浏览量
2021-05-22
16:06:52
上传
评论
收藏 93KB ZIP 举报
温馨提示
刮擦 Scrapetition是用Haskell编写的一种类型安全但灵活的Web刮板。 可以通过html scraper或json parsers轻松扩展它。 抓取的项目存储在SQLite3或SQL数据库中。 现在有刮板 从任意网页中抓取URL(链接):存储HTTP状态和编码。 对上的文章的评论 我还为 , 和编写了刮板模块。 安装 Scrapetition用编程语言编写。 为了安装它,需要Haskell的构建工具 。 至少对于构建命令行程序而言,需要和头文件。 可以在没有这些数据库引擎的情况下构建该库。 安装Haskell工具堆栈后,请克隆该存储库,并在克隆的存储库的根目录中执行以下命令: stack build stack install 运行这些命令将花费几分钟,因为Stack需要从Web上下载大量库并进行编译。 用法 Scrapetition是一种命令行工具。 这是它的
资源推荐
资源详情
资源评论
收起资源包目录
scrapetition-master.zip (45个子文件)
scrapetition-master
.gitignore 108B
notes.org 1KB
stack.yaml 2KB
README.md 7KB
utils
abfragen-pg.org 9KB
repairxml.sed 74B
answers.sql 438B
dumptxts.sh 353B
threads.sql 526B
dumphtml.sh 3KB
subthread.sh 1KB
cooccurence.sql 441B
threadview.sql 1KB
abfragen-sqlite.org 5KB
Setup.hs 46B
test
examples
zeit.de.article.html 160KB
Spec.hs 518B
Test
Network
Scrapetition
SqlInjection.hs 2KB
Utils.hs 6KB
Scrapers
Generic.hs 2KB
ZeitDe.hs 5KB
Sql.hs 10KB
Encoding.hs 807B
ChangeLog.md 52B
LICENSE 11KB
app
Main.hs 9KB
scrapetition.cabal 3KB
src
Network
Scrapetition
Comment.hs 5KB
Utils.hs 5KB
Setup.hs 797B
App.hs 4KB
Dispatcher.hs 1KB
Vote.hs 3KB
User.hs 3KB
Item.hs 1KB
Env.hs 1KB
URL.hs 3KB
Logging.hs 317B
Scrapers
Generic.hs 3KB
ZeitDe.hs 14KB
Article.hs 4KB
Sql.hs 5KB
AppType.hs 340B
Encoding.hs 2KB
package.yaml 2KB
共 45 条
- 1
资源评论
秦风明
- 粉丝: 34
- 资源: 4731
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
最新资源
- 微信小程序版的小米商城Lite.zip
- 微信小程序瀑布流组件.zip
- 微信小程序接口工具包,耗费服务器,耗费开发后台,开箱即用,轻松开发小程序.zip
- 微信小程序拼音导航.zip
- 微信小程序手势解锁(Dom实现,避免小程序Canvas卡顿问题),基于原生小程序.zip
- 微信小程序所有API promise化,支持await、支持请求列队、支持拦截小程序所有API.zip
- 微信小程序录音播放录音demo.zip
- 基于CMSIS-DAP协议的ESP8266/ESP32无线调试器设计源码
- 基于Python和JavaScript的swdz_crawls思维定制爬虫设计源码
- 基于Java和Kotlin的RxTool设计源码同步自Gitee
资源上传下载、课程学习等过程中有任何疑问或建议,欢迎提出宝贵意见哦~我们会及时处理!
点击此处反馈
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功