爬虫初探之urllib.request

Posted 2020-08-20

-----------我是小白------------

urllib.request是python3自带的库（python3.x版本特有），我们用它来请求网页，并获取网页源码。

# 导入使用库
import urllib.request
url = "http://www.baidu.com"
# urlopen用来打开一个网页
data = urllib.request.urlopen(url)
# 这里的rend()是必须的，否则不能打印源码。
data = data.read()
print(data)




# 导入使用库
import urllib.request
# 创建使用函数
def html_read(url):
    # 打开URL且read否则无法打印源码，赋值给
    html = urllib.request.urlopen(url).read()
    # 打印源码
    print(html)
if __name__ == ‘__main__‘:
    # 调用html_read函数
    html_read("http://www.baidu.com")