被一个无用的网站反爬到自闭--糗事百科

Posted changdasheng

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了被一个无用的网站反爬到自闭--糗事百科相关的知识,希望对你有一定的参考价值。

首先第一个问题:

  浏览器拿到的数据包和用requests模块拿到的数据不一样。

 

第二个问题:

  访问第二页,却给了第一页的数据。原来可以拿到

  可能是多次拿数据之后,他不封ip,只会给第一页。但是我用浏览器还是可以正常访问。

以上是关于被一个无用的网站反爬到自闭--糗事百科的主要内容,如果未能解决你的问题,请参考以下文章

Android实战——jsoup实现网络爬虫,糗事百科项目的起步

爬虫二:爬取糗事百科段子

糗事百科经典段子

au3抓取糗事百科网站

python 爬取糗事百科 gui小程序

python3 爬虫---爬取糗事百科