Python教程 | Requests的基本用法

Posted xxpythonxx

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Python教程 | Requests的基本用法相关的知识,希望对你有一定的参考价值。

下面我就给大家整理了Requests库的使用方法和细节。

什么是Requests

Requests是Python语言编写,基于urllib3,采用Apache2 Licensed开源协议的HTTP库。它比urllib更加方便,可以节约我们大量的工作,完全满足HTTP测试需求。是Python实现的简单易用的HTTP库。

安装也很简单:

pip install requests

Request的语法操作

1.实例引入

 

技术图片
 

2.各种请求方式

 

技术图片
 

请求

1.基本GET请求

 

技术图片
 


2.带参数的GET请求这个我们前面有使用过,也是最常用的方法。运行成功就可以看到网页的源码了。

 

技术图片
 

3.解析json传入参数只需要我们把数据生成一个字典,然后调用params参数,赋值给他就可以,是不是很方便。

 

技术图片
 

可以看出Requests的jaon解析和json的loads方法解析出来的结果是完全一样的。所以Requests可以很方便的解析json数据。

4.获取二进制数据

 

技术图片
 

运行成功我们可以看到content方法获取的图片页面源码是二进制数据,而text获取的则是字符串代码。显然获取图片这种二进制数据需要使用content方法。这样我们就保存了图片,我们可以在文件夹下看到这张图片。

5.添加headers

 

技术图片
 

 

技术图片
 

有些网页如果我们直接去请求的话,他会查看请求的对象是不是浏览器,如果没有浏览器信息就会禁止我们爬虫的访问,这个时候我们就要给爬虫加一个headers,加一个浏览器的user-agent信息。这样我们就可以正常访问了。如果有的伙伴不知道怎么得到User-Agent,可以打开浏览器的审查元素,找到network,随便点击一个链接就可以看到User-Agent的信息了。

6.基本POST请求

 

技术图片
 

一个POST必然是要有一个Form Data的表单提交的,我们只要把信息传给data参数就可以了。一个POST请求只需要调用post方法,是不是特别方便呢。如果不觉得方便的话,可以去参考urllib的使用方法。

响应

1.response属性

 

技术图片
 


2.状态码判断获取这些信息只需要简单的调用就可以实现了。

 

技术图片
 

好了,这篇文章我们了解了Requests库的基本语法操作,相信大家对Requests库的请求和响应已经很清楚了,大家完全可以抓取一些网页了。

以上是关于Python教程 | Requests的基本用法的主要内容,如果未能解决你的问题,请参考以下文章

Python爬虫编程思想(20):requests网络库的基本用法

Python爬虫--Requests 库用法大全

python中requests的用法

Python3网络爬虫实战-25requests:高级用法

python+requests——高级用法——处理cookie——重点

Python模块中requests模块的基本用法详解