Python对QQ音乐进行爬取并进行数据分析
三方包引入
使用到了以下包:
- 爬虫 scrapy
- 网络测试 requests
- 数据分析 numpy和pandas
- 绘图 matplotlib和wordcloud
pip install scrapy pip install requests pip install numpy pip install pandas pip install matplotlib pip install wordcloud
爬取数据
打开QQ音乐网页版的分类歌单界面,乍一看,一分析网页源码,看到下图:
那么看来它就是使用动态填充的,那么它肯定就调用了接口,请求数据,那么就去找,在检查里的network中找啊找,最终找到了它:
然后写上代码,经过调试,终于成功了。
最后我把它保存成一个csv文件,通过播放量排序,截取前20,得到了下图
分析数据
对于这个数据的处理,就用到了numpy和pandas以及matplotlib。经过分析得出下图结果:
播放次数分析
标签分析
关注后私信【音乐源码】获取github地址
相关推荐
茄肥猫的窝 2020-10-29
kkbb 2020-10-27
gallon00 2020-10-16
flyfor0 2020-11-16
aiwozhiai 2020-10-06
HashData0 2020-09-18
GooTal 2020-09-16
qiujiahao 2020-09-15
Dimples 2020-09-15
qiujiahao 2020-09-11
wangquannuaa 2020-08-30
逍遥友 2020-08-21
nxcjh 2020-08-17
CodeAsWind 2020-08-17
BMUranus 2020-08-16
zlfing 2020-08-16
wordmhg 2020-08-16
Cocainebai 2020-08-15
子昊的茶会 2020-08-04