requests库之自定义request

Posted HHello_World

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了requests库之自定义request相关的知识,希望对你有一定的参考价值。

 

阅读requests源码会有更清楚的理解。

tcp/ip的三次握手,使用requests每次请求会占用更多资源,使用session则可以重复使用一个request。

自定义requests:首先定义session(proxy,timeout,verify……),定义request(body,headers,author……)然后用prepare方法进行包装,最后用session使用send方法发出请求。

实例:

import json
import requests
from requests import exceptions

URL = https://api.github.com

#构建uri
def build_uri(endpoint):
    return /.join([URL,endpoint])

def hard_request():
    from requests import Request,Session
    #定义session
    s = Session()
    headers = {User-Agent:fake1.2.3}

    #定义request并进行包装
    req = Request(Get,build_uri(user/emails),auth=(imoocdemo,imoocdemo123),
        headers = headers)
    preped = req.prepare()
    print (preped.body)
    print (preped.headers)

    #使用session进行请求
    resp = s.send(preped,timeout=5)
    print(resp.status_code)
    print(resp.request.headers)
    print(resp.text)



if __name__==__main__:
    hard_request()

 

以上是关于requests库之自定义request的主要内容,如果未能解决你的问题,请参考以下文章

请求库之requests

请求库之requests模块

请求库之requests,selenium

JAVAWEB之自定义TAG开发

爬虫-请求库之request

第二篇:请求库之requests,selenium