web crawling(plus4) pretend to be A web

Posted 兔子的尾巴_Mini

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了web crawling(plus4) pretend to be A web相关的知识,希望对你有一定的参考价值。

#Author:Mini
#!/usr/bin/env python
import urllib.request
url1="http://blog.sina.com.cn/s/blog_470071c90102x8jc.html"
headers=("User-Agent","Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/60.0.3112.90 Safari/537.36Query String Parametersview sourceview URL encoded")
opener=urllib.request.build_opener()
opener.add_handler=[headers]
data=opener.open(url1).read()
fh=open("E:/4.html","wb")
fh.write(data)
fh.close()










以上是关于web crawling(plus4) pretend to be A web的主要内容,如果未能解决你的问题,请参考以下文章

web crawling(plus5) crawling wechat

web crawling(plus5) news crawling and proxy

web crawling

web crawling(plus1)

web crawling(plus10)scrapy 4

web crawling(plus3) errors solution