Python爬虫实战之对B站排行榜前100作品的名称及地址获取

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了Python爬虫实战之对B站排行榜前100作品的名称及地址获取，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含1026字，纯文字阅读大概需要2分钟。

内容图文

怎么将小破站的每日实时排行榜作品及地址爬取下来？

打开B站，点击B站作品排行榜进入排行榜

鼠标右击检查源码，找到作品对应的源码位置，此时我们知道作品在代码的相应大致位置。

PS：如有需要Python学习资料的小伙伴可以加点击下方链接自行获取

python免费学习资料以及群交流解答点击即可加入

接着在Pycharm里导入requests、BeautifulSoup

import requests
from bs4 import BeautifulSoup
12

因为作品对应的大致位置在div块（class= ‘info’），因此用find_all查找所有作品的此位置。

url = 'https://www.bilibili.com/v/popular/rank/all'
res = requests.get(url)	# B站不用获取headers伪装头
name_list = []	
b_list = BeautifulSoup(res.text, 'lxml').find_all('div', class_='info')
print(b_list)

123456

此时，得到了info中的源代码

我们需要的作品和地址也在其中，所以需要第二次获取，设置变量q对代码进行遍历。用一开始创建的空列表name_list接收，设置kind放地址href。

for q in b_list:
    name_list.append(q.a.text)
    kind = q.find('a')
123

最后，进行排序展示。

for i, x in enumerate(name_list):
    print(i+1, x+"\t"+'地址：'+kind['href']+'\n')
12

爬取成功！顺序依次为序号+作品名称+地址。

 

内容总结

以上是互联网集市为您收集整理的Python爬虫实战之对B站排行榜前100作品的名称及地址获取全部内容，希望文章能够帮你解决Python爬虫实战之对B站排行榜前100作品的名称及地址获取所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

---