python之urllib模块和requests模块

Posted Balllyh

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了python之urllib模块和requests模块相关的知识,希望对你有一定的参考价值。

一、urllib模块

python标准库自带的发送网络请求的模块。

# 用python怎么打开浏览器,发送接口请求
import urllib
from urllib.request import urlopen
from urllib.parse import urlencode
# url="http://www.nnzhp.cn/archives/527"
# res=urlopen(url).read()#返回的数据是二进制类型,怎么转换成字符串?,其实就是get请求
# print(res.decode())#encode()转换成二进制,decode()转换成字符串
# f=open(‘a.html‘,‘w‘,encoding=‘utf-8‘)#打开一个文件
# f.write(res.decode())#将网站上请求到的数据写入到文件中
# f.close()

url="http://api.nnzhp.cn/api/user/login"
data={"username":"niuhanyang","passwd":"aA123456"}
data=urlencode(data)#将参数拼接起来,username=niuhanyang&passwd=aA123456
res=urlopen(url,data.encode()).read()
print(res.decode())

import json
import jsonpath
# 从接口数据中获取某个字段值,从json文件中获取数据,loads()将字符串转换成字典类型
dict=json.loads(res.decode())
print(dict)
# print(dict[‘login_info‘][‘sign‘])
# print(jsonpath.jsonpath(dict,expr=‘$.[login_info].[sign]‘))
print(jsonpath.jsonpath(dict,expr=$..sign))#不管字典有多少层,获取到字典中的值

二、requests模块

requests模块是基于urllib模块开发,用于发送http请求。

 

import requests
#向接口发送请求,获取返回的数据
#get请求
# url="http://XXXX/api/user/stu_info"
# data={‘stu_name‘:‘lyh‘}
# res=requests.get(url,params=data,cookies={‘k1‘:‘v1‘,‘k2‘:‘v2‘},headers={‘kk1‘:‘vv1‘,‘kk2‘:‘vv2‘})
# print(res.text)

#post请求
url="XXX/api/user/login"
data={"username":"liuyihan","passwd":"aA123456"}
res=requests.post(url,params=data)
print(res.json())#返回的是一个字典
print(res.text)#返回的是一个字符串

url="XXX/api/file/file_upload"
res=requests.post(url,files={file:open(a.html,rb)})
print(res.json)

 

以上是关于python之urllib模块和requests模块的主要内容,如果未能解决你的问题,请参考以下文章

Python爬虫之urllib和requests哪个好用--urllib和requests的区别

Python 爬虫之urllib库,及urllib库的4个模块基本使用和了解

Python 爬虫之urllib库,及urllib库的4个模块基本使用和了解

python实战——网络爬虫之request

python之爬虫 Urllib库的基本使用

七urllib库