当前位置: 首页 > 编程笔记 >

win10系统中安装scrapy-1.1

商正浩
2023-03-14
本文向大家介绍win10系统中安装scrapy-1.1,包括了win10系统中安装scrapy-1.1的使用技巧和注意事项,需要的朋友参考一下

0.环境说明

win10 64bit,电脑也是64bit的处理器,电脑装有vs2010 64bit,但是为了保险起见,只试验了32位的安装,等有时间了,再试下64位的安装。如无特殊说明,一切操作都是在windows命令行下执行的。电脑也需要联网,因为pip在安装包的时候,需要在线下载相关包。

1.安装python

我用的是win32-python-2.7.12,请切记用版本高于.10以上版本,因为我记得到装pip的时候,好像必须要.8以上版本。

然后是将相关环境变量配置到path路径中,不懂请谷歌,结果如下图黄色说明。

2.安装pip

点击https://pypi.python.org/pypi/pip 下载pip-6.1.1.tar.gz (md5, pgp)

解压后进行文件夹,执行:python setup.py install

3.安装lxml

lxml是一种使用 Python 编写的库,可以迅速、灵活地处理 XML。选择对应的Python版本安装。;

安装命令:pip install lxml

验证是否安装成功见下图:

4.安装zope.interface

pip install zope.interface

5.安装Twisted

Twisted是用Python实现的基于事件驱动的网络引擎框架,安装命令:

pip install twisted

我转的时候,遇到了问题:

error: Microsoft Visual C++ 9.0 is required (Unable to find vcvarsall.bat). Get it from http://aka.ms/vcpython27

解决办法如下:

Execute the following command based on the version of Visual Studio installed:

Visual Studio 2010 (VS10):SET VS90COMNTOOLS=%VS100COMNTOOLS%

Visual Studio 2012 (VS11):SET VS90COMNTOOLS=%VS110COMNTOOLS%

Visual Studio 2013 (VS12):SET VS90COMNTOOLS=%VS120COMNTOOLS%

Visual Studio 2015 (VS14):SET VS90COMNTOOLS=%VS140COMNTOOLS%

然后再重新执行:

pip install twisted

即可。

6.安装pyOpenSSL

pip install pyopenssl

7.安装win32py

提供win32api,点击 http://sourceforge.net/projects/pywin32/files/pywin32/下载

pywin32-220.win32-py2.1.exe,点击安装即可。

8.安装scrapy

pip install scrapy

9.测试scrapy是否可用:

安装完成,开始使用吧!

哈哈……

 类似资料:
  • 本文向大家介绍VMware workstation 14 pro上安装win10系统,包括了VMware workstation 14 pro上安装win10系统的使用技巧和注意事项,需要的朋友参考一下 本文介绍了如何在VMware workstation 14 pro上安装系统,供大家参考,具体内容如下 点击创建新的虚拟机 选择稍后安装系统,否则你会陷入无穷的简易安装等待中。 我这次安装的系统为

  • Termux 可以安装其他 Linux 发行版系统,核心用到的工具是 chroot ,所以我们得确保安装系统的时候 proot 这个包你是安装好的,然后因为操作系统店都有官方维护的脚本,所以安装起来甚至比我们前面配置的开发环境还要简单,下面来具体的介绍吧。 实用必备工具 有能力的朋友以下工具可以直接在 Google Play 商店里面下载,国光这里就简单列举搬运一下: 软件 下载地址 说明 VNC

  • 本文向大家介绍Win10 + Ubuntu 16.04双系统完美安装教程【详细】,包括了Win10 + Ubuntu 16.04双系统完美安装教程【详细】的使用技巧和注意事项,需要的朋友参考一下 务必记得备份自己的数据,数据无价!!! 电脑型号:Thinkpad E550 固态装了win10,机械硬盘打算装Ubuntu16.04 固态硬盘格式MBR,机械硬盘格式GPT 一、制作U启动盘 1、下载系

  • 本文向大家介绍64位Win10系统安装Mysql5.7.11的方法(案例详解),包括了64位Win10系统安装Mysql5.7.11的方法(案例详解)的使用技巧和注意事项,需要的朋友参考一下 最近在装了64位Win10系统的mac book笔记本上用mysql-installer-community-5.7.11.0安装Mysql5.7.11,在配置mysql server时老是卡住,报错。(在别

  • 本文向大家介绍win10系统下Anaconda3安装配置方法图文教程,包括了win10系统下Anaconda3安装配置方法图文教程的使用技巧和注意事项,需要的朋友参考一下 本文主要介绍在 windows 10 系统中安装 Anaconda3 的详细过程。 下载 Anaconda 官网下载地址 目前最新版本是 python 3.6,默认下载也是 Python 3.6, 我使用的是 Python 3.

  • 本文向大家介绍在Linux系统上安装Python的Scrapy框架的教程,包括了在Linux系统上安装Python的Scrapy框架的教程的使用技巧和注意事项,需要的朋友参考一下 这是一款提取网站数据的开源工具。Scrapy框架用Python开发而成,它使抓取工作又快又简单,且可扩展。我们已经在virtual box中创建一台虚拟机(VM)并且在上面安装了Ubuntu 14.04 LTS。 安装