Python3.6安装Scrapy爬虫框架
- Windows10 64位系统安装Scrapy版本
- 安装lxml
- 安装zope.interface
- *安装pyOpenSSL
- 安装Twisted
- 安装pywin32
- 安装Scrapy
安装lxml
Python3.6版本,windows 10系统下,在(http://www.lfd.uci.edu/~gohlke/pythonlibs/)找到lxml‑3.8.0‑cp36‑cp36m‑win_amd64.whl,采用pip方式安装。
pip install lxml‑3.8.0‑cp36‑cp36m‑win_amd64.whl
安装zope.interface
在(https://pypi.python.org/pypi/zope.interface#downloads)下载zope.interface对应版本的wheel文件,然后pip安装,下载zope.interface-4.4.2-cp36-cp36m-win_amd64.whl
pip install zope.interface-4.4.2-cp36-cp36m-win_amd64.whl
安装pyOpenSSL
官方网站下载wheel文件,https://pypi.python.org/pypi/pyOpenSSL#downloads,如当前最新版本名称是pyOpenSSL-16.2.0-py2.py3-none-any.whl,下载后安装即可。
pip install pyOpenSSL-16.2.0-py2.py3-none-any.whl
安装Twisted
同理,http://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted下载wheel文件,利用pip安装即可。
如Python 3.6版本,Windows 64位系统,下载
Twisted‑17.5.0‑cp36‑cp36m‑win_amd64.whl,然后pip安装。
pip install Twisted‑17.5.0‑cp36‑cp36m‑win_amd64.whl
安装pywin32
从官方网站 https://sourceforge.net/projects/pywin32/files/pywin32/Build%20220/ 下载对应版本的安装包安装即可。
但是容易出现问题,就是在安装时会出现提示python3.6-32在注册表中不存在。首先根据(http://blog.csdn.net/u014680513/article/details/51005650)把Python写入注册表,在HKEY-CURRENT_USER–Software–Python–PythonCore–会发现3.6文件夹,把这个文件夹导出并重命名为3.6-32,然后导入注册表。就可以安装Pywin32了。
安装Scrapy
也是采用wheel形式安装Scrapy-1.4.0-py2.py3-none-any.whl
pip install Scrapy-1.4.0-py2.py3-none-any.whl