在Node.js中爬取豆瓣数据（详细教程）

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了在Node.js中爬取豆瓣数据（详细教程），小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含1482字，纯文字阅读大概需要3分钟。

内容图文

这篇文章通过实例给大家详细分析了Node.js爬取豆瓣数据的过程以及具体方法步骤，有兴趣的朋友可以参考学习下。

一直自以为自己vue还可以，一直自以为webpack还可以，今天在慕课逛node的时候，才发现，自己还差的很远。众所周知，vue-cli基于webpack，而webpack基于node，对node不了解，谈什么了解webpack。所以就自己给自己出了一道题，爬取豆瓣数据，目前还处于初级阶段。今天就浅谈爬取到豆瓣的数据，再另一个页面用自己的方式展现，后续会跟进。

1、需要解决的问题

1. 搭建服务

2. 怎么处理爬到的数据

3. 怎么自动打开默认浏览器

2、搭建服务

搭建服务有好几种方式，一开始我用的http，但是http有个弊端就是不能解析https协议的url，所以就用了express，解析https协议的网址我用了request包，豆瓣的网址是https的，

今天爬取的是https://movie.douban.com/chart这个网址；如下图，我要获取的有三个部分，图片、电影名字、电影链接.

3、怎么处理爬到的数据

我们用request爬到的数据，怎么处理呢？cheerio包可以让我们像Jq那样处理爬到的html数据。

①、首先解析数据，取到爬取网页的html数据；

②、然后利用cheerio包操作爬到的数据，取到你想要的数据。

③、取到数据，创建html，输出到页面。如下图，我用的字符串拼接，办法有点笨，还没有找到更好的办法。

4、怎么自动打开默认浏览器

不知道你有没有看vue-cli中webpack的配置，自动打开浏览器，vue-cli用的opn包.

这个包用起来很方便，引入包，直接调用opn（url）即可；

5、展示

上面是我整理给大家的，希望今后会对大家有帮助。

相关文章：

javaScript实现鼠标在文字上悬浮时弹出悬浮层效果

使用Angular CLI进行单元测试和E2E测试的方法

使用Angular CLI进行Build(构建)和Serve详解

以上就是在Node.js中爬取豆瓣数据（详细教程）的详细内容，更多请关注Gxl网其它相关文章！

内容总结

以上是互联网集市为您收集整理的在Node.js中爬取豆瓣数据（详细教程）全部内容，希望文章能够帮你解决在Node.js中爬取豆瓣数据（详细教程）所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

---