Python3环境安装Scrapy爬虫框架过程及常见错误
内容导读
互联网集市收集整理的这篇技术教程文章主要介绍了Python3环境安装Scrapy爬虫框架过程及常见错误，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含2442字，纯文字阅读大概需要4分钟。
内容图文
这篇文章主要介绍了Python3环境安装Scrapy爬虫框架过程及常见错误 ,本文给大家介绍的非常不错，具有一定的参考借鉴价值，需要的朋友可以参考下
Windows
?安装lxml
最好的安装方式是通过wheel文件来安装，http://www.lfd.uci.edu/~gohlke/pythonlibs/，从该网站找到lxml的相关文件。假如是Python3.5版本，WIndows 64位系统，那就找到lxml?3.7.2?cp35?cp35m?win_amd64.whl 这个文件并下载，然后通过pip安装。
下载之后，运行如下命令安装：
pip3 install wheel
pip3 install lxml?3.7.2?cp35?cp35m?win_amd64.whl
即可完成lxml的安装，其他文件替换文件名即可。
?安装zope.interface
到官方网站https://pypi.python.org/pypi/zope.interface#downloads下载对应版本的wheel文件，然后pip安装。比如Python 3.5版本，Windows 64位系统，就下载zope.interface-4.3.3-cp35-cp35m-win_amd64.whl。
然后安装wheel文件即可，命令如下：
pip3 install zope.interface-4.3.3-cp35-cp35m-win_amd64.whl
其他版本替换文件名即可。
?安装pyOpenSSL
官方网站下载wheel文件，https://pypi.python.org/pypi/pyOpenSSL#downloads，如当前最新版本名称是pyOpenSSL-16.2.0-py2.py3-none-any.whl，下载后安装即可。
pip3 install pyOpenSSL-16.2.0-py2.py3-none-any.whl
?安装Twisted
同理，http://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted下载wheel文件，利用pip安装即可。
如Python 3.5版本，Windows 64位系统，下载
Twisted?17.1.0?cp35?cp35m?win_amd64.whl，然后pip安装。
pip3 install Twisted?17.1.0?cp35?cp35m?win_amd64.whl
?安装pywin32
从官方网站 https://sourceforge.net/projects/pywin32/files/pywin32/Build%20220/ 下载对应版本的安装包安装即可。
?安装Scrapy
最后安装Scrapy即可，依然使用pip，命令如下：
pip3 install Scrapy
ps：下面看下Python 3.6 安装scrapy报错 Python.h: 没有那个文件或目录
安装scrapy的时候报错，其实这个错误是一个间接，由其依赖引起。
如果你是Python2.X
sudo apt-get install python-dev
如果是python3.6 以下的
sudo apt-get install python3-dev
如果是Python3.6的
sudo apt-get install python3.6-dev
最后一个好变态,我一直在更新自己的Python3-dev 一直报错,最后猜一下竟然真的有Python3.6-dev…心累.
非常感谢你的阅读
大学的时候选择了自学python，工作了发现吃了计算机基础不好的亏，学历不行这是
没办法的事，只能后天弥补，于是在编码之外开启了自己的逆袭之路，不断的学习python核心知识，深
入的研习计算机基础知识，整理好了，我放在我们的Python学习扣qun：250933691，如果你也不甘平庸
，那就与我一起在编码之外，不断成长吧！
其实这里不仅有技术，更有那些技术之外的东西，比如，如
何做一个精致的程序员，而不是“屌丝”，程序员本身就是高贵的一种存在啊，难道不是吗？[点击加入
]想做你自己想成为高尚人，加油！
@本文来源于公众号：csdn2299，喜欢可以关注公众号 程序员学府
内容总结
以上是互联网集市为您收集整理的Python3环境安装Scrapy爬虫框架过程及常见错误全部内容，希望文章能够帮你解决Python3环境安装Scrapy爬虫框架过程及常见错误所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。
内容备注
版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。
内容手机端
扫描二维码推送至手机访问。