多语言展示
当前在线:1203今日阅读:2今日分享:38

Ubuntu14.04下如何安装Python爬虫框架Scrapy

小编现在正在学Python爬虫,一开始都是自己瞎鼓捣,经别人介绍,学习了Scrapy,现在终于领教了Scrapy的强大之处,但这个框架需要先在Ubuntu系统上安装。下面小编就分享一下自己是如何安装的。
工具/原料
1

安装Ubuntu14.04系统电脑一台

2

网络处于接通状态

方法/步骤
1

按照官方文档的说明,安装scrapy 需要以下程序或者库:(1)、Python 2.7(2)、lxml。 Most linux distributions ships PRepackaged versions of lxml. Otherwise refer tohttp://lxml.de/installation.html(3)、OpenSSL。 This comes preinstalled in all Operating systems except Windows (see Platform specific installation notes)(4)、pip or easy_install Python package managers我们安装的Ubuntu14.01系统都已经自带了前面3个,Python的版本为2.7.6。为了验证是否有安装,我们来查看一下。

2

打开终端,执行如下命令python, 接下来就是import lxml, import OpenSSL。如下图。如果import没有报错,说明系统已经自带了。

3

为了能够保证下面的安装能够成功。我们先执行:sudo apt-get install python-dev。如图:

4

再执行:sudo apt-get install libevent-dev。如图:

5

在这里说明一下,不安装上面两个可能会出现一些错误,导致在后面的工作无法进行。

6

接下来就是安装pip了,执行:apt-get install python-pip。如图:

7

最后,也就是最重要的,安装Scrapy。执行:pip install Scrapy,如图:

8

到这里就已经安装完成了。接下来就是使用这个框架了。

注意事项

pip是python的一个包管理工具,很多包斗都可以用这个来管理。

推荐信息