使用requests处理cookie

Posted ttdevs

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了使用requests处理cookie相关的知识,希望对你有一定的参考价值。

0x00 需求

常见的 application/json 请求,如果token进行验证,我们可以在header或者body中直接添加,对于使用cookie进行验证的请求,虽然可以自己维护cookie,但是会比token麻烦很多。

之前的忘了请求都是使用python3的urllib进行,当处理cookie时,发现比较困难,因此着手另寻他法,这样就发现了requests。简单看了下,使用起来比urllib方便了好多,好多。不紧紧实现了手动添加cookie的需求,其他接口使用也是相当友好。有时间打算吧之前的代码重构一下。

下面简单介绍下requests的使用。

0x01 requests

Request

  • GET

    • 无参数

      >>> r = requests.get('https://api.github.com/events')`
    • url参数

      >>> payload = 'key1': 'value1', 'key2': 'value2'
      >>> r = requests.get('http://httpbin.org/get', params=payload)
      >>> print(r.url)
      http://httpbin.org/get?key2=value2&key1=value1

      输出:

      >>> print(r.url)
      http://httpbin.org/get?key2=value2&key1=value1
  • POST

    • form参数

      r = requests.post('http://httpbin.org/post', data = 'key':'value')
    • json参数

      >>> import json
      >>> url = 'https://api.github.com/some/endpoint'
      >>> payload = 'some': 'data'
      >>> r = requests.post(url, data=json.dumps(payload))
    • file

      TODO

  • Other:

    • PUT: r = requests.put('http://httpbin.org/put', data = 'key':'value')
    • DELETE: r = requests.delete('http://httpbin.org/delete')
    • HEAD: r = requests.head('http://httpbin.org/get')
    • OPTIONS: r = requests.options('http://httpbin.org/get')
  • HEADER

    >>> url = 'https://api.github.com/some/endpoint'
    >>> headers = 'user-agent': 'my-app/0.0.1'
    >>> r = requests.get(url, headers=headers)
  • COOKIES

    请求:

    >>> url = 'http://httpbin.org/cookies'
    >>> cookies = dict(cookies_are='working')
    >>> r = requests.get(url, cookies=cookies)

    请求的数据:

    GET /cookies HTTP/1.1
    Host: httpbin.org
    Connection: keep-alive
    User-Agent: python-requests/2.12.4
    Accept-Encoding: gzip, deflate
    Accept: */*
    Cookie: cookies_are=working

Response

>>> import requests
>>> response = requests.get('https://api.github.com/events')
  • response.url
  • response.encoding 编码
  • response.status_code 状态吗
  • response.headers headers
  • response.text 返回的文本
  • response.json() json
  • response.raw 原始数据
  • response.raise_for_status() 错误请求信息
  • response.cookies
  • response.history

总结

使用过urllib的话,来看requests你会发现简单好多,同时支持python2 和 python3。

参考

—— EOF ——

以上是关于使用requests处理cookie的主要内容,如果未能解决你的问题,请参考以下文章

Python爬虫编程思想(22):使用requests网络库上传文件处理Cookie和Session

Python中用requests处理cookies的3种方法

python+requests——高级用法——处理cookie——重点

requests模块高级操作

Urllib库基本使用详解(爬虫,urlopen,request,代理ip的使用,cookie解析,异常处理,URL深入解析)

python之requests模块-cookie