Python2 爬虫 -- 初尝Scrapy框架

Posted 逆風的薔薇

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Python2 爬虫 -- 初尝Scrapy框架相关的知识,希望对你有一定的参考价值。

1、Scrapy简介

Scrapy是一个为了爬取网站数据,提取结构性数据而编写的应用框架。 可以应用在包括数据挖掘,信息处理或存储历史数据等一系列的程序中。
其最初是为了 页面抓取 (更确切来说, 网络抓取 )所设计的, 也可以应用在获取API所返回的数据(例如 Amazon Associates Web Services ) 或者通用的网络爬虫。

以上是关于Python2 爬虫 -- 初尝Scrapy框架的主要内容,如果未能解决你的问题,请参考以下文章

搭建Scrapy爬虫框架

Python Scrapy爬虫框架安装配置及实践

python爬虫入门-Scrapy的安装

使用Scrapy爬虫框架简单爬取图片并保存本地(妹子图)

Python爬虫开发第1篇Scrapy入门

python3下scrapy爬虫(第一卷:安装问题)