2016/10/11 用Java实现网易云音乐爬虫 - David教你学Java Web开发 - 知乎专栏

https://zhuanlan.zhihu.com/p/22698051 3/17

我们最终需要爬取的数据在歌曲页面中，该页面里包含了歌曲的名称以及歌曲的评论数量。

另外，我们还需要尽可能多的获取歌曲页面，这些信息我们可以从前面6种类型的页面拿到。

其中，歌单列表以及歌单页面结构最简单，歌单列表直接分页就可以拿到。因此，我们选择歌

单页面作为我们的初始页面，然后歌单列表--歌单--歌曲一路爬下去即可。

设计数据模型

通过上述分析，我们可以知道我们要做两件事情，一是爬取页面歌单列表--歌单--歌曲，二是将

最终的结果存储起来。因此，我们只需要两个对象，一个用来存储页面相关的信息，url、页面

类型、是否被爬过（html和title作为临时数据存储），另外一个用来存储歌曲相关信息，url、歌

曲名，评论数。因此，model类如下：

public class WebPage {

public enum PageType {

song, playlist, playlists;

}

public enum Status {

crawled, uncrawl;

}

private String url;

private String title;

private PageType type;

private Status status;

private String html;

...

}

public class Song {

private String url;

private String title;

private Long commentCount;

...

}

用Java实现网易云音乐爬虫1

评论0

网易云音乐爬虫

网易云音乐C#爬虫

python爬虫，爬取网易云音乐评论

网易音乐评论爬虫

Flutter实现的仿网易云音乐项目

使用Java的WebCollector爬虫框架采集网易云音乐5亿首歌.zip

java实现在线抓取网易云用户信息

基于SpringBoot+HtmlClient+Jsoup实现java爬取网易云音乐.zip

基于scrapy的网易云音乐爬虫，爬取用户关系文档详细+资料齐全.zip

网易云音乐歌曲评论java爬虫.zip

网易云音乐爬虫-Python 大作业

Java爬虫爬取网易汽车车型库

qml 实现网易云音乐ui界面

Qt实现网易云音乐进度条效果

一个获取网易云音乐歌手、专辑、歌曲、评论、歌词等数据的Python爬虫.zip

网易客户端内容爬虫.rar

基于Scrapy框架的网易云音乐及评论爬虫文档详细+资料齐全.zip

Python项目-实例-26 爬取网易云音乐评论.zip

Java安卓仿QQ源码-awesome-netease-cloudmusic:仿网易云音乐开源系列汇总

基于React 实现的仿网易云音乐PC端

网易云音乐全部评论爬虫

基于网易云音乐API实现PC端音乐网站

用vue实现的myMusic网易云音乐

Vuejs仿网易云音乐实现听歌及搜索功能

花前月下网易云等级代挂多功能助手程序v1.2.zip

cloudMusicspider:网易云音乐

基于webmagic框架实现的文娱类分布式爬虫.zip

阿里云javasdk源码-crawler:爬虫学习

最新资源