# 新浪微博数据分析网站
#### 原理
- 使用django+scrapy搭建,可对微博、评论及粉丝数据进行抓取
- 爬虫调度使用scrapyd提供的api
- 数据化展示使用echart.js
- 数据存储在redis数据库
- ajax轮询，画图结果实时展示在前端
#### 使用
所有数据的抓取都需要提供cookie(手机端或电脑端)，如下所示
- 单人微博数据分析结果（输入手机端cookie）和用户id(注意这个id不是用户名，而是微博主页url的最后一串字母或数字)
- 单条微博转发时间分析结果，极坐标角度代表分钟，半径代表小时
- 个人粉丝分布图（颜色越深的地方粉丝越多）
- 个人人际关系网，以自己为中心，按关注扩展三层
基于django和scrapy的新浪数据分析网站.zip
需积分: 5 162 浏览量
2023-09-28
22:50:22
上传
评论
收藏 1.18MB ZIP 举报
基于django和scrapy的新浪数据分析网站.zip （74个子文件） 
seusina-master 
db.sqlite3 12KB .gitattributes 65B templates 
result_sina2.html 6KB fans.html 1KB result_sina3.html 6KB result_sina.html 4KB personalweibo.html 2KB index.html 3KB result_sina1.html 6KB singleweibo.html 1KB socialmap.html 1KB .idea seusina.iml 1KB workspace.xml 57KB misc.xml 260B inspectionProfiles profiles_settings.xml 228B modules.xml 266B manage.py 250B img 
3.png 152KB 1.png 115KB 5.png 24KB 4.png 200KB 2.png 110KB rizhi 0B seuspider __init__.py 0B tests.py 60B admin.py 63B migrations __init__.py 0B 0001_initial.py 3KB __pycache__ 0001_initial.cpython-36.pyc 2KB __init__.cpython-36.pyc 126B apps.py 93B models.py 2KB __pycache__ admin.cpython-36.pyc 156B views.cpython-36.pyc 6KB __init__.cpython-36.pyc 115B models.cpython-36.pyc 2KB views.py 5KB test.py 2KB static js bootstrap.js 66KB npm.js 484B bootstrap.min.js 35KB bootstrap3.0.3.min.js 27KB echarts.min.js 468KB jquery.min.js 99KB img 
2.jpg 4KB
loading.gif 67KB logo.png 3KB 1.png 58KB tab1-2.png 58KB 3.jpg 4KB 4.jpg 4KB css style.css 1KB bootstrap.min.css 115KB bootstrap-theme.css.map 42KB bootstrap-theme.css 22KB bootstrap.css.map 372KB bootstrap.css 138KB bootstrap-theme.min.css 19KB fonts 
glyphicons-halflings-regular.svg 106KB glyphicons-halflings-regular.ttf 44KB glyphicons-halflings-regular.woff 23KB glyphicons-halflings-regular.eot 20KB glyphicons-halflings-regular.woff2 18KB test.html 454B README.md 1KB seusina __init__.py 0B wsgi.py 391B urls.py 1KB settings.py 3KB __pycache__ urls.cpython-36.pyc 2KB settings.cpython-36.pyc 2KB __init__.cpython-36.pyc 113B wsgi.cpython-36.pyc 516B uwsgi.ini 385B资源评论
