# Background
该项目是数据科学导论作业,根据课程学习内容对bilibili部分信息进行爬取、处理、分析、展示。本项目仅为学术研究。
# Install
项目主要使用python撰写,所需python包均会导出在代码目录下requirements.txt中。安装所需包请使用
$ pip install -r requirements.txt
在爬虫部分`./codes/crawl-preprocess-storage/crawl`使用docker部署了python和mysql服务,
并在程序中设置了定时任务。为了运行crawl部分代码,请安装docker和docker-compose
[windows docker 安装教程](https://www.runoob.com/docker/windows-docker-install.html)
[Mac docker 安装教程](https://www.runoob.com/docker/macos-docker-install.html)
安装toolbox后已经自带docker-compose,如果没有docker-compose需要自行安装
具体使用见crawl文件夹下`README.md`
没有合适的资源?快使用搜索试试~ 我知道了~
温馨提示
1、该资源内项目代码经过严格调试,下载即用确保可以运行! 2、该资源适合计算机相关专业(如计科、人工智能、大数据、数学、电子信息等)正在做课程设计、期末大作业和毕设项目的学生、或者相关技术学习者作为学习资料参考使用。 3、该资源包括全部源码,需要具备一定基础才能看懂并调试代码。 1、该资源内项目代码经过严格调试,下载即用确保可以运行! 2、该资源适合计算机相关专业(如计科、人工智能、大数据、数学、电子信息等)正在做课程设计、期末大作业和毕设项目的学生、或者相关技术学习者作为学习资料参考使用。 3、该资源包括全部源码,需要具备一定基础才能看懂并调试代码。 bilibili爬虫+数据分析实践源码+项目说明(包含信息爬虫,LSTM时间序列预测,Pytorch机器学习分析,tensor board可视化).zip
资源推荐
资源详情
资源评论
收起资源包目录
bilibili爬虫+数据分析实践源码+项目说明(包含信息爬虫,LSTM时间序列预测,机器学习分析,可视化).zip (473个子文件)
binlog.000012 12.66MB
events.out.tfevents.1592401330.21217184e101 14KB
auto.cnf 56B
slow_log.CSM 35B
general_log.CSM 35B
vresult.csv 5.6MB
vresult.csv 5.6MB
2020061723191592435983_loss_log.csv 14KB
general_log.CSV 0B
slow_log.CSV 0B
events.out.tfevents.1592401205.d5ef3755b71b 0B
dockerfile 238B
.gitignore 50B
ib_buffer_pool 5KB
ib_logfile0 48MB
ib_logfile1 48MB
mysql.ibd 29MB
aid_tag.ibd 10MB
vinfo.ibd 9MB
vresult.ibd 9MB
userinfo.ibd 304KB
follower.ibd 256KB
aid_hotword.ibd 240KB
ip_table.ibd 112KB
hotword.ibd 112KB
sys_config.ibd 112KB
ibdata1 12MB
ibtmp1 12MB
binlog.index 320B
Main.ipynb 6KB
Main-checkpoint.ipynb 4KB
fontlist-v310.json 25KB
events.out.tfevents.1592382308.HyacinthdeMacBook-Pro.local 86B
events.out.tfevents.1592383393.HyacinthdeMacBook-Pro.local 0B
localtime 556B
README.md 863B
README.md 789B
ca-key.pem 2KB
server-key.pem 2KB
client-key.pem 2KB
private_key.pem 2KB
ca.pem 1KB
client-cert.pem 1KB
server-cert.pem 1KB
public_key.pem 452B
2020061723051592435156_292_params.pkl 541KB
2020061715261592407606_54_params.pkl 541KB
2020061719211592421706_177_params.pkl 541KB
2020061720151592424934_205_params.pkl 541KB
2020061714291592404174_24_params.pkl 541KB
2020061716581592413099_102_params.pkl 541KB
2020061722301592433014_274_params.pkl 541KB
2020061722181592432300_268_params.pkl 541KB
2020061717471592416070_128_params.pkl 541KB
2020061721541592430883_256_params.pkl 541KB
2020061718061592417209_138_params.pkl 541KB
2020061717211592414476_114_params.pkl 541KB
2020061720381592426326_217_params.pkl 541KB
2020061721441592430295_251_params.pkl 541KB
2020061721561592431001_257_params.pkl 541KB
2020061717441592415842_126_params.pkl 541KB
2020061716291592411372_87_params.pkl 541KB
2020061720231592425396_209_params.pkl 541KB
2020061716371592411830_91_params.pkl 541KB
2020061720321592425978_214_params.pkl 541KB
2020061716211592410912_83_params.pkl 541KB
2020061716001592409651_72_params.pkl 541KB
2020061714451592405100_32_params.pkl 541KB
2020061719441592423089_189_params.pkl 541KB
2020061714311592404290_25_params.pkl 541KB
2020061717151592414133_111_params.pkl 541KB
2020061721111592428310_234_params.pkl 541KB
2020061715361592408174_59_params.pkl 541KB
2020061722281592432895_273_params.pkl 541KB
2020061719401592422857_187_params.pkl 541KB
2020061713491592401770_3_params.pkl 541KB
2020061714521592405554_36_params.pkl 541KB
2020061721351592429707_246_params.pkl 541KB
2020061717591592416752_134_params.pkl 541KB
2020061720501592427026_223_params.pkl 541KB
2020061714191592403597_19_params.pkl 541KB
2020061718201592418017_145_params.pkl 541KB
2020061721231592429013_240_params.pkl 541KB
2020061718121592417556_141_params.pkl 541KB
2020061720071592424475_201_params.pkl 541KB
2020061719271592422053_180_params.pkl 541KB
2020061721091592428193_233_params.pkl 541KB
2020061722421592433728_280_params.pkl 541KB
2020061722441592433846_281_params.pkl 541KB
2020061721331592429590_245_params.pkl 541KB
2020061717001592413214_103_params.pkl 541KB
2020061722001592431239_259_params.pkl 541KB
2020061716541592412869_100_params.pkl 541KB
2020061716271592411257_86_params.pkl 541KB
2020061718351592418940_153_params.pkl 541KB
2020061720001592424014_197_params.pkl 541KB
2020061716231592411027_84_params.pkl 541KB
2020061719121592421127_172_params.pkl 541KB
2020061722041592431476_261_params.pkl 541KB
2020061723091592435393_294_params.pkl 541KB
共 473 条
- 1
- 2
- 3
- 4
- 5
资源评论
- Taoie98982024-04-08资源使用价值高,内容详实,给了我很多新想法,感谢大佬分享~
辣椒种子
- 粉丝: 3444
- 资源: 5723
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功