mysql 我如何查询一批数据后,并更新这批数据

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了mysql 我如何查询一批数据后,并更新这批数据相关的知识,希望对你有一定的参考价值。

我软件从数据库中提取1万数据,提取出来的时候想对表里的数据置一个状态表示提取过了。可以用一句SQL语句完成吗?我想要的效果就是提取的同时这批数据就更新状态了

有时候我们会不小心对一个大表进行了 update,比如说写错了 where 条件......

此时,如果 kill 掉 update 线程,那回滚 undo log 需要不少时间。如果放置不管,也不知道 update 会持续多久。

那我们能知道 update 的进度么?



实验

我们先创建一个测试数据库:

快速创建一些数据:

连续执行同样的 SQL 数次,就可以快速构造千万级别的数据:

查看一下总的行数:

我们来释放一个大的 update:

然后另起一个 session,观察 performance_schema 中的信息:

可以看到,performance_schema 会列出当前 SQL 从引擎获取的行数。

等 SQL 结束后,我们看一下 update 从引擎总共获取了多少行:


可以看到该 update 从引擎总共获取的行数是表大小的两倍,那我们可以估算:update 的进度 = (rows_examined) / (2 * 表行数)

💡小贴士

information_schema.tables 中,提供了对表行数的估算,比起使用 select count(1) 的成本低很多,几乎可以忽略不计。

那么是不是所有的 update,从引擎中获取的行数都会是表大小的两倍呢?这个还是要分情况讨论的,上面的 SQL 更新了主键,如果只更新内容而不更新主键呢?我们来试验一下:

等待 update 结束,查看 row_examined,发现其刚好是表大小:

那我们怎么准确的这个倍数呢?

一种方法是靠经验:update 语句的 where 中会扫描多少行,是否修改主键,是否修改唯一键,以这些条件来估算系数。

另一种方法就是在同样结构的较小的表上试验一下,获取倍数。

这样,我们就能准确估算一个大型 update 的进度了。

参考技术A 在关系数据库里,每一个单独的SQL语句不管它是简单、复杂或复合的都只能执行一种操作。例如一个SQL语句它要不是选择查询、要不就是动作查询,不得是即为选择查询又是动作查询。另外,对于动作查询一个SQL语句只能操作一张表而且每次只能执行增、删、改其中之一种操作。这是数据库管理内部机制限定死的,它属于经过充分权衡后所做出的最佳安排,无法绕过。所有试图在一个SQL语句里实现即输出查询结果集又执行动作操作的努力都是徒劳的。
题主的这个要求只能通过两个SQL语句分步实现,即在执行选择查询后立即执行更新查询,单独一条SQL语句无解。
参考技术B update flag 参考技术C 一般的底层语言都可以,但是不建议这么做

以上是关于mysql 我如何查询一批数据后,并更新这批数据的主要内容,如果未能解决你的问题,请参考以下文章

MySQL 百万级/千万级表 全量更新

如何解决mysql 查询和更新速度慢

使用 ExtJS 4.1 保存一批记录时如何处理单个故障?

mysql 导入之ignore

mysql如何实现先查询后更新的sql语句

从 mysql 更新到 mysqli 后数据库查询中断