怎么修好并运行下面这个python爬虫,好像header里面参数过期了?

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了怎么修好并运行下面这个python爬虫,好像header里面参数过期了?相关的知识,希望对你有一定的参考价值。

https://txtpad.cn/pachong

如果是通过 cookie 饶过登录认证(是个好方法,因为很多情况下涉及参数加密),但是这种方式不好的地方就是 cookie 会过期,所以过期了以后需要手动更新里面的 cookie。比直接模拟登录稍微麻烦一点,短期使用以这种方式优先。模拟登录难度高些,当然效果好。追问

我在问怎么让它运行起来,不是在问这个脚本怎么样

参考技术A #直接新定义一个user-agent
#需要找到us.json文件,你去网上随便找就好了
from fake_useragent import UserAgent

#ua,使用本地的json文件
ua = UserAgent(path=r'***\ua.json')

headers = 'User-Agent': ua.random
print(headers)

headers1 = 'User-Agent': ua.random
print(headers1)

以上是关于怎么修好并运行下面这个python爬虫,好像header里面参数过期了?的主要内容,如果未能解决你的问题,请参考以下文章

python爬虫,用find_all()找到某一标签后,怎么获取下面数个同名子标签的内容

Python+url2爬虫技术

python中,进行爬虫抓取怎么样能够使用代理IP?

python爬虫怎么处理豆瓣网页异常请求

用爬虫爬1688产品时,爬虫怎么知道1688下一个商品网址是多少,并且自动输入网址抓取

Python简书爬虫