vinbud-scraper:爬取冰岛国营酒类商店的产品信息

Vinbud 刮刀 爬取冰岛国有酒类商店的产品信息。 需要 PhantomJS 2.0 才能运行。 以前的版本将不起作用。 它输出两个 JSON 文件， products-no-metadata.json和products-metadata.json 。 前者是抓取产品列表的结果，后者是抓取每个单独的产品页面的结果。 不用说，后者更详细，大约需要 1 小时才能完成。 抓取产品列表只需要几分钟。 要运行它，您的路径上需要 phantomjs。 npm install phantomjs src/main.js 选项 要获取完整的元数据抓取，您需要使用可选的--with-metadata参数运行它。 --level [debug|trace]设置日志级别。 --include-type在元数据抓取中包含股票类型信息。 测试 使用 mocha 执行测试。 要执行测试，请运行np