怎样在pythonpath中安装scrapy

如题所述

安装python

根据自己的电脑是32位还是64位进行,选择适合的python版本,我们常用的是2.7版。安装python很简单,直接点下一步,下一步就行了,这里我就不做过多介绍,但是要注意的是要配置环境变量。如图所示,将python目录和python目录下的Scripts目录添加到系统环境变量的Path里。

如下图所示,测试python是否安装及环境变量配置成功。

安装pywin32
安装pywin32相当简单,首先是下载

根据自己的电脑进行选择,下载后,直接点下一步下一步就行了,很简单。
安装setuptools

在页面中找到

点击 ez_setup.py进入, 并将内容复制下来, 保存为本地的python脚本
接着切换到 ez_setup.py所在的目录下,在Windows的命令窗口CMD下运行命令
python ez_setup.py
我们使用如下命令来确定setuptools是否安装成功。

安装twisted
安装zope.interface

根据自己的电脑选择版本,下载。然后将下载的文件放到python中的Scripts目录下,利用easy_install安装
如下为我自己的执行命令:

安装pyopenssl

将其下载下来,安装方式,如下面的代码:

安装twisted

下载之后,直接点下一步下一步就行了。
安装lxml

根据自己的电脑选择自己的版本,下载后,点击下一步下一步就行了。
安装w3lib

下载完毕后将其解压到某一个目录下,如下图

在cmd中,到此目录下执行:

安装Scrapy

和前面安装w3lib类似安装Scrapy,下载解压。然后cmd运行。
Scrapy测试
温馨提示:内容为网友见解,仅供参考
无其他回答

pycharm怎么新建一个scrapy项目
由于scrapy是使用python语言编写的爬虫系统,因此它很自然是可以通过pip安装的。 在bash或者cmd中输入: pip install scrapy就可以安装scrapy了。然后等待scrapy将所有依赖包安装完成。查看scrapy版本,目前最新的版本是v1.4.0版本 安装virtualenv(可选)这里我还安装了virtualenv。virtualenv是一个提供独立的py...

windows 10 下怎么安装scrapy
1.下载安装python2.7.11 https:\/\/www.python.org\/ 2.安装完成之后,把安装路径和脚本路径添加到path中,譬如:C:\\Python27\\;C:\\Python27\\Scripts\\;3.安装pywin32,在下面的连接中下载最新版的pywin32 http:\/\/sourceforge.net\/projects\/pywin32\/files\/pywin32\/ 我在安装pywin32过程中遇到错误...

蜘蛛框架怎么下载安装
Scrapy的下载安装步骤如下:1、需要安装第三方库文件,lxml和Twisted。2、根据python的版本和位来下载相应的文件,否则安装不成功。3、下载好文件之后,在DOS命令下pip install 文件的位置\\文件名进行安装。4、安装完成就可以安装:pip install scrappy。5、还需要安装 win32(启动蜘蛛的时候会提示安装) ...

怎么在XP系统中安装Scrapy?XP系统安装Scrapy的方法
具体方法如下:1、去python官网下载python2.79版本,注意scrapy不支持python3.43,仅支持2.7。2、安装好后选择win+r进入dos,输入python--version,如果能运行会得到python现在的版本如图,说明python2.79安装成功。3、接下来pip--verion得到如图所示,说明也安装成功。4、我们输入pipinstallScrapy安装scra...

python安装scrapy,所需要安装的包都安装好了,但是在最后安装scrapy时...
简单的解决办法。如果scrapy对你很重要。重新安装一套python2.7然后从头安装scrapy,可以从pypi网站上下载。也可以从unofficial来源,一口气安装好的包。耐心的解决办法。把scrapy的源码拿过来,执行python setup.py install,遇到哪个包不好用,就替换掉。办法是将那个包的源代码拿过来,先删除site-packages...

Python3爬虫教程-Scapy详解
安装Scapy 可以通过命令行或在PyCharm中进行安装。在命令行中输入`pip install scapy`完成安装;在PyCharm中,选择`File->Setting->Python Interpreter`,然后在弹出的窗口中输入`pip install scapy`并执行。创建爬虫工程 创建工程后,根目录下将自动生成`helloworld`文件夹。进入该文件夹。编写Item类 Item...

虾爬子简单易学,快速上手
首先,我们需要打开一个Python环境,然后安装虾爬子的库。使用以下命令即可:pip install scrapy 安装完毕后,我们需要创建一个新的虾爬子项目。使用以下命令即可:scrapy startproject yourprojectname 接下来,我们需要创建一个爬虫。使用以下命令即可:scrapy genspider yourspidername yourdomain.com 在创建完...

pycharm如何运行scrapy
法一:Scrapy爬虫的运行需要到命令行下运行,在pychram中左下角有个Terminal,点开就可以在Pycharm下进入命令行,默认是在项目目录下的,要运行项目,需要进入下一层目录,使用cd TestDemo 进入下一层目录,然后用scrapy crawl 爬虫名 , 即可运行爬虫。如图:法二:在TestDemoSpider目录和scrapy.cfg同级...

Windows上面安装Python的scarpy框架
第一步:当然是安装python了,本人安装的是2.7.3版本;可以到python的官网下载然后双击运行,一路“下一步”即可完成安装。安装好后,将python的安装目录添加到系统变量中,这样才能够在控制台中输入python进入,如下图所示则说明安装python成功了 第二步:按照官网的提示,我们先安装pywin32,在这里点击...

Mac OS X安装 Scrapy
安装Scrapy 学习Python爬虫必须要使用的框架Scrapy,以下是安装教程 以及可能遇到的问题和解决办法.打开终端执行以下命令: sudo easy_install pip pip 和 easy_install 都是 Python 的框架管理命令,pip 是对 easy_install的升级。 安装成功后接着执行以下命令: sudo pip install Scrapy 如果...

相似回答