Scrapy爬虫requests
Posted 比尔足球数据分析
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Scrapy爬虫requests相关的知识,希望对你有一定的参考价值。
requests 模块
模块的由来: 浏览器可以浏览网站, 是由于浏览器发送了requests , 各种请求.打开一个网站可能有几十到几百个请求.
从而服务器端会反馈各种因应不同请求生成的数据. 我们浏览器再decode这些数据来显示在屏幕上.
requests, 就是Python一种用来伪装成模拟器的模块. 对对方的服务器作出各种请求, 从而得到我们所需要的数据.
从而, request可以实现和浏览器的各种互动, 比如伪装登陆, 爬虫数据.
以上是关于Scrapy爬虫requests的主要内容,如果未能解决你的问题,请参考以下文章