基于基于python的百度迁徙迁入、迁出数据爬取(爬虫大数据)(附代码)的百度迁徙迁入、迁出数据爬取(爬虫大数据)(附代码)
简介简介
百度迁徙 :http://qianxi.baidu.com
不多逼逼,相关的自己了解。趁这几天比较好抓取数据,需要的数据就赶紧抓抓抓。
效果展示效果展示
不着急看代码,先给你们看一波效果图,各位看官看完效果图看看是不是自己需要的再看代码。
我是把获得的数据存成一个xls格式,因为csv换列不太方便(我不会)所以我选择了xls。这张图里表是我的家乡泉州一月、二月一共两个月的迁出数据,左边第一列是全国所有城市
的编码(身份证前6位,这也和爬取百度迁徙url要求的编码一样),左边第二列是全国所有城市的名称,第一行是日期。为什么我要把表弄成这样呢?因为我要把表丢进GIS里做可视
化(后面有可视化的图),又懒得改,所以这样方便一点,直接丢进去就可以了。
然后为了让各位看官看到像百度迁徙网站那样的前一百名排序,我就特地点了排序截了一张图(1月1日排序)如下。(这两个是同一个表)
前面说要展示的可视化,我选的好像是泉州的1月9日的迁出。随手一截。
评论0