python爬虫基础,post提交方式复习
Posted 思辨
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了python爬虫基础,post提交方式复习相关的知识,希望对你有一定的参考价值。
#-*-coding:utf8-*-
#参考学习官方资料 http://docs.python-requests.org/zh_CN/latest/user/quickstart.html
#POST请求与POST的提交方式(比如post请求方式,application/json编码后的提交)
#application/x-www-form-urlencoded 以form表单的形式提交数据,这是最常见的一种
#application/json 以json串提交数据
#multipart/form-data:上传文件
#http://httpbin.org/post 用来测试request的网址
import requests
url=‘http://httpbin.org/post‘
d={‘key1‘:‘value‘,‘key2‘:‘value2‘}
response=requests.post(url,data=d)
print(response.text)
print(response.content)#二进制的响应方式
print(response.json())#json的响应方式
print(response.raise_for_status())#成功什么都不输出
print(response.status_code)
print(response.headers[‘Content-Type‘])
# print(response.request.url)
# print(response.url)
# print(response.headers)
#request上传文件的功能
#requests与cookies的联系
print(‘---------------------------------------------------------‘)
url2=‘http://httpbin.org/cookies‘
cookies=dict(cookies_are=‘working‘)
response2=requests.get(url2,cookies=cookies)
print(response.cookies)#cookie的返回对象为RequestsCookieJar,它的行为和字典类似,但接口更为完整,适合跨域名跨路径使用。
print(response2.text)
#你还可以把 Cookie Jar 传到 Requests 中
jar=requests.cookies.RequestsCookieJar()
jar.set(‘tasty_cookie‘,‘yum‘,domain=‘httpbin.org‘,path=‘/cookies‘)
jar.set(‘gross_cookie‘,‘blech‘,domain=‘httpbin.org‘,path=‘/elsewhere‘)
r=requests.get(url2,cookies=jar)
print(r.text)
#重定向与禁用重定向
re=requests.get(‘http://github.com‘) #Github 将所有的 HTTP 请求重定向到 HTTPS:
print(re.status_code,‘ ‘,re.url,‘ ‘,re.history)
#禁用重定向
print(‘---------------------------------------------------‘)
re=requests.head(‘http://github.com‘,allow_redirects=True)
print(r.url,‘ ‘,r.status_code,‘ ‘,r.history)
#使用HEAD启用重定向
re=requests.head(‘http://github.com‘,allow_redirects=True)
#requests高级用法
url3=‘http://www.yooc.me‘
res=requests.get(url3)
print(‘-------------------------------------------‘)
print(res.request.headers)
#高级用法 http://docs.python-requests.org/zh_CN/latest/user/advanced.html#advanced
以上是关于python爬虫基础,post提交方式复习的主要内容,如果未能解决你的问题,请参考以下文章