python之HTTP处理模块urllib和urllib2

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了python之HTTP处理模块urllib和urllib2相关的知识,希望对你有一定的参考价值。

import urllib

import urllib2


murl = "http://zhpfbk.blog.51cto.com/"

UserAgent = "Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/56.0.2896.3 Safari/537.36"


req = urllib2.Request(murl)

req.add_header(‘User-Agent‘,‘Mozilla/5.0‘)

print req.get_method()

print req.get_full_url()

print req.get_host()


resp = urllib2.urlopen(req)

print resp.geturl()

print resp.read(50)

print resp.getcode()


本文出自 “Mask_X 博客” 博客,请务必保留此出处http://zhpfbk.blog.51cto.com/4757027/1886328

以上是关于python之HTTP处理模块urllib和urllib2的主要内容,如果未能解决你的问题,请参考以下文章

爬虫之Urllib

Python 爬虫之urllib库,及urllib库的4个模块基本使用和了解

Python 爬虫之urllib库,及urllib库的4个模块基本使用和了解

python之urllib模块和requests模块

七urllib库

python之爬虫 Urllib库的基本使用