《相见你》短评分析
前几天,女朋友一直在追想见你这个台剧,然后去豆瓣搜了一下,看到了评分竟然高达9.2分
想想我以前做的那些分析,所以就做一个简单的数据分析来分析一下想见你这部电视剧
爬取短评和评分
其实豆瓣作为爬虫新手联系已经够无奈了,后来豆瓣从根源上避免爬虫,在豆瓣短评上只会显示500条短评
这里可以看到短评有14多万条,但是你不断下一页就可以发现,最多只会显示到500条,而我觉得非常的无奈,然后就去找了时光网、猫眼等等的影评,但是最多也就是凑齐了1600多条影评和评论,下面只演示一下在豆瓣的爬虫
import requests
from lxml import etree
impor