使用urllib2打开网页的三种方法

Posted 2020-08-19 200六

#coding:utf-8
import urllib2
import cookielib

url="http://www.baidu.com"

print ‘方法 1‘

response1=urllib2.urlopen(url)
print response1.getcode()#验证打开网页是否成功，成功返回200
print len(response1.read())#打印读取网页长度


print‘方法 2‘
request=urllib2.Request(url)
request.add_header("user-agent","Mozilla/5.0")#伪装成浏览器
response2=urllib2.urlopen(request)
print response2.getcode()#验证打开网页是否成功，成功返回200
print len(response2.read())#打印读取网页长度


print ‘方法 3‘
cj=cookielib.CookieJar()
opener=urllib2.build_opener(urllib2.HTTPCookieProcessor(cj))
urllib2.install_opener(opener)
response3=urllib2.urlopen(url)
print response3.getcode()#验证打开网页是否成功，成功返回200
print cj
print len(response3.read())#打印读取网页长度