爬虫(scrapy第一篇)

Posted Sip

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了爬虫(scrapy第一篇)相关的知识,希望对你有一定的参考价值。

------------------------------------------------------------------------------------------------------------------------------

scrapy shell http://bj.ganji.com/fang1/chaoyang/

 

In [1]: response
Out[1]: <200 http://bj.ganji.com/fang1/chaoyang/>

In [2]: view(response)
Out[2]: True

In [26]: response.xpath(‘‘‘//*[@class="f-list-item "]/dl/dd[5]/div[1]/span[1]/text()‘‘‘).extract()

------------------------------------------------------------------------------------------------------------------------------

 

以上是关于爬虫(scrapy第一篇)的主要内容,如果未能解决你的问题,请参考以下文章

你懂Scrapy吗?Scrapy大型爬虫框架讲解

技术你懂Scrapy吗?Scrapy大型爬虫框架讲解

Python爬虫第一篇: 爬虫概述

python网络爬虫之使用scrapy自动爬取多个网页

第一篇 爬虫技术入门了解篇

爬虫系统