爬虫常用库的安装
内容导读
互联网集市收集整理的这篇技术教程文章主要介绍了爬虫常用库的安装，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含1029字，纯文字阅读大概需要2分钟。
内容图文
请求库
解析库
存储库
工具库
请求库
urlib re python内置库
Requests pip3 install requests #pip2,pip-conda都是可以选择的
selenium pip3 install selenium
chromedriver
下载页面：https://sites.google.com/a/chromium.org/chromedriver/
下载解压后，将解压文件放入python\scripts目录下
测试
python下输入：
from selenium import webdriver
driver = webdriver.Chrome()
顺利打开了网页
driver.get(‘https://www.python.org‘) 就能打开python官网
phantomjs 静默浏览器 无界面浏览器
下载页：http://phantomjs.org/download.html
下载后解压，找个地方存放，进入bin目录，将该目录路径放入系统环境变量下。
进入交互控制台
python下输入
from selenium import webdriver
driver = webdriver.PhantomJS()
driver.get(‘https://www.python.org‘)
driver.page_source
网页解析库
lxml pip3 install lxml
BeautifulSoup pip3 install beautifulsoup4
pyquery pip3 install pyquery
语法同Jquery，pyquery文档 https://pythonhosted.org/pyquery/
存储库
pymysql pip3 install pymysql
pymongo pip3 install pymongo
redis pip3 install redis
工具库
flask web服务，代理设置 pip3 install flask
flask文档http://docs.jinkan.org/docs/flask/
django pip3 install django
jupyter pip3 install jupyter
原文：http://www.cnblogs.com/ttrrpp/p/6855656.html
内容总结
以上是互联网集市为您收集整理的爬虫常用库的安装全部内容，希望文章能够帮你解决爬虫常用库的安装所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。
内容备注
版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。
内容手机端
扫描二维码推送至手机访问。