优草派  >   Python

python3中如何安装scrapy?超详细的方法来了

陈立鑫            来源:优草派

本篇文章小编给大家分享一个python3中安装scrapy的方法,如果有需求的小伙伴可以收藏本篇文章以便以后需要的时候更方便查阅。我们废话少说,直接往下看。

python3中如何安装scrapy?超详细的方法来了

python3安装scrapy的方法:1、使用“conda install scrapy”命令进行安装;2、先安装Twisted再利用“pip install scrapy”命令进行安装。

Scrapy框架是目前Python中最受欢迎的爬虫框架之一,那么我们今天就来具体了解一下Scrapy框架。

首先让我们来了解一下什么是Scrapy框架?

Scrapy是一个快速、高层次、轻量级的屏幕抓取和web抓取的python爬虫框架。

Scrapy的用途:

Scrapy用途非常广泛,主要用于抓取特定web站点的信息并从中提取特定结构的数据,除此之外,还可用于数据挖掘、监测、自动化测试、信息处理和历史片段(历史记录)打包等。

了解完Scrapy框架后,我们就来看看怎么安装和使用吧。

安装Scrapy方法有两种:

1.  如果你电脑上有Anaconda的话,可以使用这种方法。
windows+r  >>> cmd >>> 输入 conda install scrapy >>> 回车

2.第二种方法使用pip安装,不过你需要先下载Twisted插件。

下载地址:https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted

(1)点击下载地址,进入后按  ctrl+f ,搜索twisted,然后下载对应版本

cp27:表示python2.7版本    cp36:表示python3.6版本

win32:表示Windows32位操作系统

(2)下载完成后进入终端,输入pip install Twisted-18.7.0-cp36-cp36m-win32.whl

Twisted-18.7.0-cp36-cp36m-win32.whl:文件名(你下载哪个文件就输入哪个文件的文件名,要输入全部路径)

安装完成后再输入pip install scrapy,回车即可。

以上就是小编给大家带来的在python3中安装scrapy的方法,希望大家通过阅读小编的文章之后能够有所收获!如果大家觉得小编的文章不错的话,可以多多分享给有需要的人。 

【原创声明】凡注明“来源:优草派”的文章,系本站原创,任何单位或个人未经本站书面授权不得转载、链接、转贴或以其他方式复制发表。否则,本站将依法追究其法律责任。
TOP 10
  • 周排行
  • 月排行