python爬虫基础,post提交方式复习

Posted 思辨

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了python爬虫基础,post提交方式复习相关的知识,希望对你有一定的参考价值。

#-*-coding:utf8-*-

#参考学习官方资料 http://docs.python-requests.org/zh_CN/latest/user/quickstart.html

#POST请求与POST的提交方式(比如post请求方式,application/json编码后的提交)
#application/x-www-form-urlencoded 以form表单的形式提交数据,这是最常见的一种
#application/json 以json串提交数据
#multipart/form-data:上传文件

#http://httpbin.org/post 用来测试request的网址

import requests
url=‘http://httpbin.org/post‘
d={‘key1‘:‘value‘,‘key2‘:‘value2‘}
response=requests.post(url,data=d)
print(response.text)
print(response.content)#二进制的响应方式
print(response.json())#json的响应方式
print(response.raise_for_status())#成功什么都不输出
print(response.status_code)
print(response.headers[‘Content-Type‘])
# print(response.request.url)
# print(response.url)
# print(response.headers)
#request上传文件的功能


#requests与cookies的联系
print(‘---------------------------------------------------------‘)
url2=‘http://httpbin.org/cookies‘
cookies=dict(cookies_are=‘working‘)
response2=requests.get(url2,cookies=cookies)
print(response.cookies)#cookie的返回对象为RequestsCookieJar,它的行为和字典类似,但接口更为完整,适合跨域名跨路径使用。
print(response2.text)

#你还可以把 Cookie Jar 传到 Requests 中
jar=requests.cookies.RequestsCookieJar()
jar.set(‘tasty_cookie‘,‘yum‘,domain=‘httpbin.org‘,path=‘/cookies‘)
jar.set(‘gross_cookie‘,‘blech‘,domain=‘httpbin.org‘,path=‘/elsewhere‘)
r=requests.get(url2,cookies=jar)
print(r.text)

#重定向与禁用重定向
re=requests.get(‘http://github.com‘) #Github 将所有的 HTTP 请求重定向到 HTTPS:
print(re.status_code,‘ ‘,re.url,‘ ‘,re.history)

#禁用重定向
print(‘---------------------------------------------------‘)
re=requests.head(‘http://github.com‘,allow_redirects=True)
print(r.url,‘ ‘,r.status_code,‘ ‘,r.history)
#使用HEAD启用重定向
re=requests.head(‘http://github.com‘,allow_redirects=True)


#requests高级用法
url3=‘http://www.yooc.me‘
res=requests.get(url3)
print(‘-------------------------------------------‘)
print(res.request.headers)

#高级用法 http://docs.python-requests.org/zh_CN/latest/user/advanced.html#advanced




























































以上是关于python爬虫基础,post提交方式复习的主要内容,如果未能解决你的问题,请参考以下文章

Python爬虫基础urllib2库的get与post方法

python爬虫基础详细教程

python爬虫:multipart/form-data格式的POST实体封装与提交

爬虫基础

python网络爬虫学习随笔

python 爬虫开发基础知识