python request使用详解

Posted 2021-02-27 yiwenrong

目录

• 一、总结说明
• 二、源码举例
• 三、问题
  • 1. json转字典，json格式入参问题
  • 2. 接口无法访问
  • 3. 发送个get/post失败

一、总结说明

1. 模拟postman访问接口，具体参照七、python接口开发（二）>>三、postman访问接口,本篇文章调用的接口，也是来自于接口开发的源码，阅读本篇文章最好先看下python接口是怎样开发的
2. 模拟get方式访问：res = requests.get(url,params=data,headers = headers)

第一种方式：res = requests.get(url, params=data, headers = headers)
第二种方式：res = requests.get(url, data=data, headers = headers)
注意:
1.url格式入参只支持第一种方式访问（params=data），json格式入参，只支持第二种方式（data=data）访问，
form-data格式入参可以使用第一种与第二种方式访问。
2.不管是那种格式的入参，data入参格式都是{“key”：“vaue”，“key1”：“vaue1"}，注意参数最好用 " 而不是 ‘ 。
3.如果是url与form-data入参，data参数必须为字典类型，如果json入参，data必须为字符类型，字典转字符方法如下：data =json.dumps(data,ensure_ascii=False)；
4.参数headers必须为字典类型，字符转字典方法如下：json.loads(headers)，判断是否是字典方法如：isinstance(data,dict)

3. 模拟post方式访问：

第一种方式：res = requests.post(url, params=data, headers = headers)
第二种方式：res = requests.post(url, data=data, headers = headers)
注意:
1.url格式入参只支持第一种方式访问（params=data），json格式入参，只支持第二种方式（data=data）访问，
form-data格式入参可以使用第一种与第二种方式访问。
2.不管是那种格式的入参，data入参格式都是{“key”：“vaue”，“key1”：“vaue1"}，注意参数最好用 " 而不是 ‘ 。
3.如果是url与form-data入参，data参数必须为字典类型，如果json入参，data必须为字符类型，字典转字符方法如下：data =json.dumps(data,ensure_ascii=False)；
4.参数headers必须为字典类型，字符转字典方法如下：json.loads(headers)，判断是否是字典方法如：isinstance(data,dict)

4. 常用响应方法

res.text：查看响应内容，返回的是Unicode格式的数据
res.content：查看响应内容，返回的字节流数据(主要用于存储图片)
res.url：查看完整访问url地址
res.encoding：查看响应头部字符编码
res.status_code：查看响应码

5. session与cookies

cookies操作步骤：
1.访问：res = requests.get(url) 
2.返回cookie对象：cookiejar = res.cookies 
3.转为字典：cookiedict = requests.utils.dict_from_cookiejar(cookiejar)
session操作步骤：
1. 创建session对象：ssion = requests.session()
2. 设置 headers：headers = {"key": "vaule"}
3. 设置登录入参：{"loginName":"sss", "userPass":"sss"} 
4. 发送附带用户名和密码的请求，并获取登录后的Cookie值，保存至sesion：ssion.post(url, data = data,headers=headers)
5. 直接访问需要登录的页面：ssion.get("https://www.sss.cn/preview/c_clg_web?d=233444")

6. ssl不验证

#https协议默认verify = True需要证书验证，verify = False表示不验证证书
res = requests.get(url,verify = False)

二、源码举例

#!/usr/bin/python3
# encoding:utf-8
‘‘‘
Created on 2020-04-21 08:20
@author: Administrator
‘‘‘
import requests
import json
from _ast import Try
from django.template.context_processors import request

class send():
    #1.get方式，无参数访问接口
    def send_get(self,url,data,headers = None):
        res = requests.get(url,params=data,headers = headers)
        return res
    #2.post方式，url格式入参访问接口
    def send_post_url(self,url,data,headers = None):
        res = requests.post(url, params=data, headers = headers)
        return res
    #3.post方式，form-data格式入参访问接口
    def send_post_fdata(self,url,data,headers = None):
        res = requests.post(url, params=data, headers = headers)
        return res
    #4.post方式，josn格式入参访问接口
    def send_post_json(self,url,data,headers = {‘content-type‘: ‘application/json‘}):
        json_data =json.dumps(data,ensure_ascii=False)
        #特别注意，当文件头是json时 ,发送post请求参数data=值，值必须是json（字符型）
        res = requests.post(url, data=json_data, headers = headers)
        return res
    def cookies(self,url):
        res = requests.get(url)
        #保存CookieJar对象:
        cookiejar = res.cookies
        #将Cookie转为字典：
        cookiedict = requests.utils.dict_from_cookiejar(cookiejar)
        return cookiedict
    def session(self):
        # 1. 创建session对象
        ssion = requests.session()
        # 2. 设置headers
        headers = {"User-Agent": "Mozilla/5.0 (Windows NT 6.2; WOW64; Trident/7.0; rv:11.0) like Gecko",
                   "Accept":"image/gif, image/jpeg, image/pjpeg, application/x-ms-application, application/xaml+xml, application/x-ms-xbap, */*",
                   "Accept-Language":"zh-Hans-CN,zh-Hans;q=0.5"}
        # 3. 设置登录入参
        data = {"loginName":"sss", "userPass":"sss"}  
        # 4. 发送附带用户名和密码的请求，并获取登录后的Cookie值，保存至sesion
        ssion.post("https://passport.sss.cn/login/login", data = data,headers=headers)
        # 5. 直接访问需要登录的页面
        res = ssion.get("https://www.sss.cn/preview/c_clg_web?d=233444")
        return res
    def ssl(self):
        #https协议默认verify = True需要证书验证，verify = False表示不验证证书
        res = requests.get("https://www.12306.cn/index/",verify = False)
        return res
if __name__ == ‘__main__‘:
    #1.get方式，无参数访问接口
    res1 = send().send_get(‘http://127.0.0.1:8888/index‘,{})
    print(‘1.get方式，无参数访问接口,返回值：‘)
    #响应内容json格式转字典
    print(res1.json())
    print(‘-------开始打印request常见响应方法内容---------------‘)
    print(‘查看响应内容，res.text 返回的是Unicode格式的数据‘)
    print(res1.text)
    print(‘查看响应内容，res.content返回的字节流数据(主要用于存储图片)‘)
    print(res1.content)
    print(‘查看完整url地址，res.url‘)
    print(res1.url)
    print(‘查看响应头部字符编码，res.encoding‘)
    print(res1.encoding)
    print(‘查看响应码，res.status_code‘)
    print(res1.status_code)
    print(‘-------结束打印request常见响应方法内容---------------‘)
    #2.post方式，url格式入参访问接口
    res2 = send().send_post_url(‘http://127.0.0.1:8888/article‘,{‘id‘:‘12589‘,‘token‘:‘ASDE23EEE9‘})
    print(‘2.post方式，url格式入参访问接口,返回值：‘)
    print(res2.json())
    #3.post方式，form-data格式入参访问接口
    res3 = send().send_post_fdata(‘http://127.0.0.1:8888/login‘,{‘usrname‘:‘test‘,‘pwd‘:‘123456‘})
    print(‘3.post方式，form-data格式入参访问接口,返回值：‘)
    print(res3.json())
    #4.post方式，josn格式入参访问接口
    res4 = send().send_post_json(‘http://127.0.0.1:8888/loginjosn‘,{"usrname": "test","pwd": "123456"})
    print(‘4.post方式，josn格式入参访问接口,返回值：‘)
    print(res4.json())
    res5 = send().cookies(‘http://www.baidu.com‘)
    print(‘5.访问百度打印colies,返回值：‘)
    print(res5)
    res6 = send().session()
    print(‘6.需要登录才可以看到资源，通过session可直接查看,返响应状态码：‘)
    print(res6.status_code)
    res7 = send().ssl()
    print(‘7.访问12306,设置不验证ssl,verify = False，返响应状态码：‘)
    print(res7.status_code)

运行结果

1.get方式，无参数访问接口,返回值：
{‘msg‘: ‘成功访问首页‘, ‘msg_code‘: 200}
-------开始打印request常见响应方法内容---------------
查看响应内容，res.text 返回的是Unicode格式的数据
{"msg": "成功访问首页", "msg_code": 200}
查看响应内容，res.content返回的字节流数据(主要用于存储图片)
b‘{"msg": "xe6x88x90xe5x8ax9fxe8xaexbfxe9x97xaexe9xa6x96xe9xa1xb5", "msg_code": 200}‘
查看完整url地址，res.url
http://127.0.0.1:8888/index
查看响应头部字符编码，res.encoding
utf-8
查看响应码，res.status_code
200
-------结束打印request常见响应方法内容---------------
2.post方式，url格式入参访问接口,返回值：
{‘msg‘: ‘成功访问文章‘, ‘msg_code‘: 200}
3.post方式，form-data格式入参访问接口,返回值：
{‘msg‘: ‘登录成功‘, ‘msg_code‘: 200}
4.post方式，josn格式入参访问接口,返回值：
{‘msg‘: ‘登录成功‘, ‘msg_code‘: 200}
5.访问百度打印colies,返回值：
{‘BDORZ‘: ‘27315‘}
6.需要登录才可以看到资源，通过session可直接查看,返回值：
200
D:pythonazlibsite-packagesurllib3connectionpool.py:997: InsecureRequestWarning: Unverified HTTPS request is being made to host ‘www.12306.cn‘. Adding certificate verification is strongly advised. See: https://urllib3.readthedocs.io/en/latest/advanced-usage.html#ssl-warnings
  warnings.warn(
7.访问12306,设置不验证ssl,verify = False，返响应状态码：
200

三、问题

1. json转字典，json格式入参问题

问题描述，发送get请求，响应内容转字典，如requests.get(url).json(),报错：json.decoder.JSONDecodeError: Expecting value: line 1 column 1 (char 0)
原因：
1.响应内容不是json{key:vaule}格式；
2.json格式入参，如res = requests.post(url, data=data, headers = headers)，入参data值为字典类型
3.字符转字典,字符个数不是key-value个数，或者key-vaule用的是单引号，如json.loads(‘key‘:‘value‘)
解决方案：
1.响应内容必须是json格式才可以调用josn转字典json()方法
2.json格式入参，如res = requests.post(url, data=data, headers = headers)，入参data值必须转换为字符类型
3.字符转字典，必须保证是key-vaule，并且参数引号必须用双引号，如json.loads("key":"value")

2. 接口无法访问

问题描述：发送get请求，requests.get(url)，报错如下：
requests.exceptions.ConnectionError: HTTPConnectionPool(host=‘127.0.0.1‘, port=8888): Max retries exceeded with url: /index (Caused by NewConnectionError(‘<urllib3.connection.HTTPConnection object at 0x0000025527634A00>: Failed to establish a new connection: [WinError 10061] 由于目标计算机积极拒绝，无法连接。‘))
原因：1.8888端口无法访问；2.接口服务未开启
解决方案：1.设置8888端口可访问；2.开启接口服务

3. 发送个get/post失败

问题描述：发送get：request.get("http://www.baidu.com")，报错如下：
AttributeError: ‘function‘ object has no attribute ‘get‘
原因：1.代码错误；2.变量名与系统（包括扩展库或者保留字）的重复
解决方法：本例是代码错误，request改为requests