AppSpider:爬取市场上的app

AppSpider 爬取市面上的一些App，包括包名，大小，名字，版本号，大分类，细分类，下载地址，应用市场，市场中应用唯一ID 功能模块： 爬虫模块：采用Gecco完成 持久化模块：前期采用MySQL数据库，后期上线采用Oracle 测试模块：采用Junit完成测试 日志模块：采用log4j完成日志记录 调度模块：暂时未定 管理模块，目前准备采用控制台的方式 问题 华为的appId不太对ac6829897ec3484a8f0efb881420d361 爬虫的初始URL [ { " // " : "应用宝" , " url " : " https://android.myapp.com/myapp/index.htm " }, { " // " : "华为影音娱乐" , " url " : " https://web-drcn.hispace.