python如何爬取单个网页数据，并将数据保存到相应文件当中

Posted 2022-07-18 weixin_ancenhw

网上爬虫的案例很多。本教程结合实际开发。设计一款比较容易上手的python爬虫案例。供大家学习参考使用。以下标注了整个代码制作的写作的过程及解释说明！

# 1、首先导入python所需要的类库文件：urlopen
from urllib.request import urlopen
# 2、导入codecs
import codecs
# 3、定义要爬虫的网址
url = "https://123.sogou.com/"
# 4、打开需要爬虫内容
resp = urlopen(url)

# codecs.open(filepath,method,encoding)
# filepath--文件路径
# method--打开方式，r为读，w为写，rw为读写
# encoding--文件的编码，中文文件使用utf-8
# 5、打开文件sougou文件，将其写入
f = codecs.open('sougou.html', 'w', 'utf-8')
f.write(resp.read().decode("utf-8"))

以上按钮代码复制粘贴到PyCharm 开发工具，即可编译使用！