python 获取登录态网络数据并写入本地

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了python 获取登录态网络数据并写入本地相关的知识,希望对你有一定的参考价值。

# 先安装request框架:pip install requests

import requests

url = "http://www.test.html"
cookies = {"_gitlab_session":"a167f84b5e34c08b8d33db5a4ee94d92"}

res = requests.get(url, cookies=cookies)  #带入cookie参数,以获得登录态
content = res.content;  #数据类型为:byte
content = content.decode()  #转换为str
content = content.strip().replace("\n", "") #去除空格和换行

f = open('content.txt', 'w', encoding='utf-8')  #encoding要指定为'utf-8',不然会编码错误
f.write(content)
f.close()

以上是关于python 获取登录态网络数据并写入本地的主要内容,如果未能解决你的问题,请参考以下文章

如何用Python网络爬虫爬取网易云音乐歌词

一篇文章带你用Python网络爬虫实现网易云音乐歌词抓取

一篇文章带你用Python网络爬虫实现网易云音乐歌词抓取

23 网络数据在内核中流转

scrapy 爬取知乎问题答案 ,并异步写入数据库(mysql)

使用 Express 从本地主机获取数据/将数据写入本地主机