Python爬虫新手入门教学(十六):爬取好看视频小视频
内容导读
互联网集市收集整理的这篇技术教程文章主要介绍了Python爬虫新手入门教学(十六):爬取好看视频小视频,小编现在分享给大家,供广大互联网技能从业者学习和参考。文章包含1983字,纯文字阅读大概需要3分钟。
内容图文
![Python爬虫新手入门教学(十六):爬取好看视频小视频](/upload/InfoBanner/zyjiaocheng/606/e485e94d767e4c48bc10d216995c6bd3.jpg)
前言
本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,如有问题请及时联系我们以作处理。
Python爬虫、数据分析、网站开发等案例教程视频免费在线观看
https://space.bilibili.com/523606542
前文内容
Python爬虫新手入门教学(八):爬取论坛文章保存成PDF
基本开发环境
- Python 3.6
- Pycharm
相关模块的使用
import os
import requests
安装Python并添加到环境变量,pip安装需要的相关模块即可。
一、确定需求
爬取搞笑趣味栏目的视频内容。
二、网站数据分析
首先需要明确一点,好看视频网站加载方式是懒加载的方式,需要你下滑网页才会加载出新的内容
加载出来的内容里面有音频播放地址以及标题。
内容比较简单,看代码就行
import os
import requests
url = 'https://haokan.baidu.com/videoui/api/videorec?tab=gaoxiao&act=pcFeed&pd=pc&num=20&shuaxin_id=1612592171486'
headers = {
'user-agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.138 Safari/537.36'
}
response = requests.get(url=url, headers=headers)
json_data = response.json()
videos = json_data['data']['response']['videos']
for index in videos:
title = index['title']
play_url = index['play_url']
video_content = requests.get(url=play_url, headers=headers).content
path = 'video\\'
if not os.path.exists(path):
os.mkdir(path)
with open(path + title + '.mp4', mode='wb') as f:
f.write(video_content)
print('正在保存:', title)
内容总结
以上是互联网集市为您收集整理的Python爬虫新手入门教学(十六):爬取好看视频小视频全部内容,希望文章能够帮你解决Python爬虫新手入门教学(十六):爬取好看视频小视频所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错,欢迎将互联网集市网站推荐给程序员好友。
内容备注
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 gblab@vip.qq.com 举报,一经查实,本站将立刻删除。
内容手机端
扫描二维码推送至手机访问。