PHP MongoDB 驱动程序的游标如何缓冲结果集?

Posted

技术标签:

【中文标题】PHP MongoDB 驱动程序的游标如何缓冲结果集?【英文标题】:How does the PHP MongoDB Driver's Cursor buffer a result set? 【发布时间】:2011-08-19 11:30:18 【问题描述】:

查询mongodb时,它的游标如何处理内存中的结果集?游标是否一次检索与查询匹配的所有文档?还是一次检索 1 个文档?或者他们被缓冲了?还是有其他我不知道的解决方案?

如果是缓冲解决方案,它们如何存储在服务器/客户端上?客户端在本地保留了多少数据?

【问题讨论】:

内存 - 哪个内存,服务器还是客户端?游标从不检索文档,它是一个游标。缓冲 - 又在哪里?在客户端还是服务器上?还是您只对 php 的客户端感兴趣? 两者,真的。我想服务器必须将结果存储在某个地方。而且,也许我对游标的工作感到困惑——但游标确实充当了我对数据的“网关”,所以它必须从某个地方获取它,并且必须在某个地方存储它。我只是想了解/弄清楚数据的存储位置以及 PHP 客户端如何访问/缓冲它。 游标允许客户端浏览服务器上可用的结果集。所以你查询 500 个文档,服务器只需要说,这里是光标。客户表示感谢,然后使用光标导航到该集合中的某个位置。然后客户说:给我光标指向的文件。服务器说:好的,我知道那个光标,所以我可以给你文件。至少我是这么理解游标的。游标本身从不获取,但用于客户端和服务器之间的通信。 内部在这里:cursor.c 【参考方案1】:

MongoDB wire protocol 在发出查询时具有批量大小规范。

基本前提是客户端驱动程序发出带有numberToReturn 标志的查询。如果查询与numberToReturn 匹配,则只将那个数字返回给客户端。

因此,服务器有效地向客户端发送了一个“批次”。如果客户端在整个批次中循环,则客户端发出getmore 请求并接收下一批。同时,服务器不需要将所有结果加载到内存中,只需要满足客户端的请求即可。

PHP 驱动程序抽象出大部分这种复杂性。您对驱动程序所做的只是请求下一个项目,驱动程序将在适当的情况下处理getmore

在大小方面,您将获得 Max BSON 大小或numberToReturn 中的较小者。因此,如果文档太大,您可以点击 Max BSON size 以防止一次发送太多数据。

了解更多详情的最佳地点是the actual code。

【讨论】:

以上是关于PHP MongoDB 驱动程序的游标如何缓冲结果集?的主要内容,如果未能解决你的问题,请参考以下文章

mongoDB中级篇①游标cursor

mongodb3.2系统性学习——5游标 模糊查询 findAndModify函数

Oracle游标 CURSOR实例详解

MYSQL 游标学习及使用实例

MongoDB随笔

SQL Server学习笔记——游标