Scrapy 环境

在本章中，我们将讨论如何安装和设置 Scrapy。 Scrapy 必须与 Python 一起安装。

可以使用 pip 安装 Scrapy。要安装，请运行以下命令-

pip install Scrapy

windows

注意-Windows 操作系统不支持 Python 3、

第 1 步-从 Python 安装 Python 2.7 >

通过将以下路径添加到 PATH 来设置环境变量-

C:\Python27\;C:\Python27\Scripts\;

您可以使用以下命令检查 Python 版本-

python--version

第 2 步-安装 OpenSSL。

在您的环境变量中添加 C:\OpenSSL-Win32\bin。

注意-除 Windows 外，所有操作系统都预装了 OpenSSL。

第 3 步-安装 Visual C++ 2008 可再发行组件。

第 4 步-安装 pywin32、

第 5 步-安装 pip 适用于 2.7.9 之前的 Python 版本。

您可以使用以下命令检查 pip 版本-

pip--version

第 6 步-要安装 scrapy，请运行以下命令-

pip install Scrapy

如果您有 anaconda 或 miniconda 安装在您的机器上，运行以下命令使用 conda 安装 Scrapy-

conda install-c scrapinghub scrapy

Scrapinghub 公司支持适用于 Linux、Windows 和 OS X 的官方 conda 软件包。

注意-如果通过 pip 安装有问题，建议使用上述命令安装 Scrapy。

最新版本的 Python 预装在 Ubuntu 操作系统上。使用 Scrapinghub 提供的 Ubuntu 包 aptgettable。使用包-

第 1 步-您需要将用于签署 Scrapy 包的 GPG 密钥导入 APT 密钥环-

sudo apt-key adv--keyserver hkp://keyserver.ubuntu.com:80--recv 627220E7

第 2 步-接下来，使用以下命令创建/etc/apt/sources.list.d/scrapy.list 文件-

echo 'deb http://archive.scrapy.org/ubuntu scrapy main' | sudo tee 
/etc/apt/sources.list.d/scrapy.list

Step 3-更新包列表并安装scrapy-

sudo apt-get update && sudo apt-get install scrapy

您可以使用以下命令从 AUR Scrapy 包安装 Scrapy-

yaourt-S scrapy

使用以下命令安装 Xcode 命令行工具-

xcode-select--install

不要使用系统 Python，而是安装一个与系统其余部分不冲突的新更新版本。

第 1 步-安装 homebrew。

第 2 步-设置环境 PATH 变量以指定应在系统包之前使用自制软件包-

echo "export PATH = /usr/local/bin:/usr/local/sbin:$PATH" >> ~/.bashrc

第 3 步-为确保更改完成，使用以下命令重新加载 .bashrc-

source ~/.bashrc

第 4 步-接下来，使用以下命令安装 Python-

brew install python

第 5 步-使用以下命令安装 Scrapy-

pip install Scrapy

找工作要求35岁以下，35岁以上的程序员都干什么去了？

长久以来，一直有一个问题困扰着技术人——如何打破“程序员的35岁职业魔咒”，这一天迟早会到来，或早或晚。

昵称：邮箱：