当前位置:首页 >> 脚本专栏

Windows 8.1 64bit下搭建 Scrapy 0.22 环境

我的Windows 8.1 环境

Windows 8.1 64bit下搭建 Scrapy 0.22 环境

1.下载安装Python 2.7.6

在Python官方网站中下载Python2.7.6的Windows安装包,根据默认配置安装到C:\Python27目录。
安装完成后在系统环境变量PATH中配置Python的环境变量。

Windows 8.1 64bit下搭建 Scrapy 0.22 环境

Windows 8.1 64bit下搭建 Scrapy 0.22 环境

测试Python是否安装成功,在命令提示符中输入python命令,出现以下提示表示Python2.7.6安装成功到主机。

Windows 8.1 64bit下搭建 Scrapy 0.22 环境

2.下载安装SetupTools 2.2

下载ez_setup.py到C:\Python27目录中。
在命令提示符中输入python ez_setup.py命令,会出现以下报错信息。

Windows 8.1 64bit下搭建 Scrapy 0.22 环境

需要修改C:\Python27\Lib\mimetypes.py文件,在import urllib下面添加代码:

reload(sys)
sys.setdefaultencoding('gbk')

如图

Windows 8.1 64bit下搭建 Scrapy 0.22 环境

出现下图所示的提示信息表示安装成功!

Windows 8.1 64bit下搭建 Scrapy 0.22 环境

3.下载安装Pip进入C:\Python27\Scripts目录,执行以下命令来进行Pip的安装。

easy_install.exe pip

出现以下提示表示安装成功,还可以使用pip -V命令来检查安装是否成功。

Windows 8.1 64bit下搭建 Scrapy 0.22 环境

 4.下载安装lxml下载lxml 3.2.5到本地,直接运行进行安装,注意指定Python所在的目录和安装目录。

Windows 8.1 64bit下搭建 Scrapy 0.22 环境

5.安装pywin32下载pywin32-218到本地,直接运行进行安装,注意指定Python所在的目录和安装目录。

Windows 8.1 64bit下搭建 Scrapy 0.22 环境

6.安装Twisted下载Twisted 13.2.0到本地,直接运行进行安装,注意指定Python所在的目录和安装目录。

Windows 8.1 64bit下搭建 Scrapy 0.22 环境

7.安装pyOpenSSL下载pyOpenSSL 0.13.1到本地,直接运行进行安装,注意指定Python所在的目录和安装目录。

Windows 8.1 64bit下搭建 Scrapy 0.22 环境

8.安装zope.interface下载zope.interface 4.1.0到本地并拷贝到C:\Python27\Scripts目录,在命令提示符中执行命令:

easy_install.exe zope.interface-4.1.0-py2.7-win-amd64.egg

出现以下提示信息表示安装成功!

Windows 8.1 64bit下搭建 Scrapy 0.22 环境

9.通过Pip安装一些Python库安装YAML for Python库

pip install pyYaml

  Windows 8.1 64bit下搭建 Scrapy 0.22 环境

安装requests库

pip install requests==2.2.1

Windows 8.1 64bit下搭建 Scrapy 0.22 环境

安装progressbar库

pip install progressbar

Windows 8.1 64bit下搭建 Scrapy 0.22 环境

10.验证一些依赖的库文件是否安装成功在命令提示符中输入python,进入python控制台,依次输入以下命令:

import lxmlimport twistedimport OpenSSLimport zope.interface

如果没有报错提示,则证明安装这些依赖库成功!

Windows 8.1 64bit下搭建 Scrapy 0.22 环境

11.最后安装Scrapy当前Scrapy的最新版本是0.22版,进入Scrapy官方网站下载最新版本的Scrapy 0.22到本地并解压到C:\Python27目录中。在命令提示符中进入Scrapy所在的目录,执行以下命令进行安装:

python setup.py install

如果没有报错,至此Scrapy就完成了全部的安装。