web crawling(plus1)

Posted 兔子的尾巴_Mini

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了web crawling(plus1)相关的知识,希望对你有一定的参考价值。

urllib.request.rechieve("www",filename="")

urllib.request.cleanup()

a=urllib.request.urlopen()   

a.info()

a.getcode()

a.geturl()

*******************************************

a=urllib.request.urlopen("https://www.galaxymacau.com/zh-hant/",timeout=200)
***********************************
for i in range(0,100):
try:
a=urllib.request.urlopen("https://www.galaxymacau.com/zh-hant/",timeout=1)
data1=a.read()
print(len(data1))
except Exception as e:
print("exception now:"+str(e))
**********************************
http request:












以上是关于web crawling(plus1)的主要内容,如果未能解决你的问题,请参考以下文章

web crawling(plus5) crawling wechat

web crawling(plus5) news crawling and proxy

web crawling

web crawling(plus10)scrapy 4

web crawling(plus3) errors solution

web crawling(plus7) scrapy1 commands)