爬虫,记录第一次爬虫

Posted sucanji

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了爬虫,记录第一次爬虫相关的知识,希望对你有一定的参考价值。

爬虫四步曲
# -指定url
# -发起请求
# -获取响应数据
# -持久化存储


#植入requests模块
import requests
#指定url
url=‘https://www.sogou.com/‘
#发起请求
response=requests.get(url=url)
#获取响应数据
page_text=response.text
#持久化存储
with open(‘sogou.html‘,‘w‘,encoding=‘UTF-8‘) as write_page:
write_page.write(page_text)
print(‘爬虫结束!!!‘)

以上是关于爬虫,记录第一次爬虫的主要内容,如果未能解决你的问题,请参考以下文章

记录一次爬虫报错:Message: Failed to decode response from marionette

记一次node爬虫经历,手把手教你爬虫

2020第一周学习记录

Python爬虫基础知识及前期准备

Python爬虫基础知识及前期准备

在线商城爬虫 带爬取记录 以11TREET 为例