Python爬虫之Scrapy框架系列——XXTop250电影所有信息同时存储到MySql数据库

Posted 2023-03-02 孤寒者

现在又不满足于只保存在本地txt文本了，所以来试试存储到数据库mysql里怎么搞呢？（首先，要准备好mysql数据库以及navicat数据库可视化管理工具）

目录：

• 分析：如何同时存储到本地txt文本以及mysql数据库里？
• • 1.1 新建管道完整代码：
  • 1.2 settings.py文件中连接mysql数据库的配置：
  • 1.3 settings.py文件中打开储存到Mysql数据库的管道：
  • 1.4 navicat创库建表：
  • 1.5 运行爬虫即可

分析：如何同时存储到本地txt文本以及mysql数据库里？

• 这就需要再新建一个管道，并开启这个管道（ settings里管道类名添加 ），最后，使用pymysql连接数据库。

示例代码：