scrapy的安装过程在Linux RedHat上运行

Scrapy是一款非常成熟的爬虫框架，可以抓取网页数据并抽取结构化数据。（官方网站：www.scrapy.org）。

Requirements
Python 2.5, 2.6, 2.7 (3.x is not yet supported)
Twisted 2.5.0, 8.0 or above
w3lib
lxml or libxml2 (if using libxml2, version 2.6.28 or above is highly recommended)
simplejson (not required if using Python 2.6 or above)
pyopenssl (for HTTPS support. Optional, but highly recommended)

准备工作
操作系统：RHEL 5.9
Zlib版本：zlib-1.2.8
Python版本：Python-2.7
zope.interface版本：zope.interface-3.8.0
Twisted版本：Twisted-12.0.0
w3lib版本：w3lib-1.0
libxml2版本：libxml2-2.7.4
pyOpenSSL版本：pyOp