红联Linux门户
Linux帮助

Ubuntu14.04中安装Scrapy爬虫框架

发布时间:2015-10-07 09:59:24来源:linux网站作者:wang_san_shi

在Ubuntu14.04上安装Scrapy。


1、首先安装pip

$ sudo apt-get install python-pip python-dev build-essential
$ sudo pip install --upgrade pip
$ sudo pip install --upgrade virtualenv

2、使用pip安装Scrapy

pip --default-timeout=100 install scrapy

如果未添加timeout,则可能报错SSLError: The read operation timed out,而这通常是网络的原因。


3、测试安装是否成功

$ scrapy


Ubuntu 14.04 64bit上安装Scrapy:http://www.linuxdiyf.com/linux/13980.html

Ubuntu14.04下安装scrapy:http://www.linuxdiyf.com/linux/13816.html

如何在Ubuntu 14.04 LTS安装网络爬虫工具:Scrapy:http://www.linuxdiyf.com/linux/9985.html

CentOS 6.4安装搭建Scrapy 0.22环境:http://www.linuxdiyf.com/linux/13205.html