windows下安装Scrapy及scrapy模块介绍

Posted sunian

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了windows下安装Scrapy及scrapy模块介绍相关的知识,希望对你有一定的参考价值。

一:安装wheel

   wheel介绍 

二:安装twisted

  twisted是由python编写的一款基于事件驱动的网络引擎,使用twisted模块将python的异步请求(异步模型介绍)成为可能且简单易用。Twisted介绍  

三:创建scrapy文件

   使用命令窗口进入目标目录后 使用命令 

 scrapy startproject  project_name

    工程目录结构如图

  技术分享图片

 

  

     四:启动爬虫程序

  

scrapy crawl first --nolog #启动时,不输出日志文件
scrapy crawl first #带有日志的输出

 

  

  

  

以上是关于windows下安装Scrapy及scrapy模块介绍的主要内容,如果未能解决你的问题,请参考以下文章

scrapy模块安及使用

windows下安装和使用scrapy

Windows安装Scrapy

爬虫框架Windows下Scrapy配置环境变量 & ‘scrapy‘不是内部或外部命令->问题解决

Scrapy安装的那些事

Scrapy的安装--------Windowslinuxmac等操作平台