python爬虫使用代理

Posted 渴望成为大佬的菜鸡

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了python爬虫使用代理相关的知识,希望对你有一定的参考价值。

from urllib import request

url = http://httpbin.org/ip

#使用代理
#1.使用ProxyHandler构建一个hander
handler = request.ProxyHandler({
"HTTP":"182.35.84.11:9999"
})
#2.使用上面的hander构建一个opener
opener = request.build_opener(handler)
#3.使用opener去发送一个请求
resp = opener.open(url)
print(resp.read())
http://httpbin.org/ip
访问该网址可以返回你的ip地址。

以上是关于python爬虫使用代理的主要内容,如果未能解决你的问题,请参考以下文章

Python爬虫实例代理的使用

python 爬虫 ip池怎么做

爬虫代理池源代码测试-Python3WebSpider

python爬虫——urllib使用代理

python 爬虫--同花顺-使用代理

python爬虫 - 代理ip正确使用方法