爬虫5 cookie的使用

Posted 2021-02-21 leafchen

简述：cookie, 用户登录某网站时的登录信息，记录本地浏览器中。在访问其它需要此用户的页面时，可以通过cookie信息来登录验证。

　　1. 爬虫直接使用cookie信息访问页面

"""cookie， 网页端存储用户登录信息等数据， 在其他页面需要时提供
    1. 直接使用浏览器中查到的cookie，进行验证
    2. 记录用户登录信息，使用登录信息来验证
"""

from urllib.request import Request, urlopen
from fake_useragent import UserAgent


# url = ‘https://account.cnblogs.com/signin‘
url = ‘https://home.cnblogs.com/u/leafchen/detail/‘
headers = {
    ‘User-Agent‘: UserAgent().chrome,
    ‘Cookie‘: ‘...‘
}
request = Request(url, headers=headers)
response = urlopen(request)
info = response.read()
print(info.decode())