Google Pub/Sub 分区 ID

Posted

技术标签:

【中文标题】Google Pub/Sub 分区 ID【英文标题】:Google Pub/Sub Partition Id 【发布时间】:2017-09-07 01:22:58 【问题描述】:

在 Google Cloud Pub/Sub documentation 关于拉取交付中的负载平衡说:

多个订阅者可以对同一个“共享”进行拉取调用 订阅。 每个订阅者都会收到一部分 消息

我担心的是最后一个阶段。我可以决定划分主题的方式吗?换句话说,我可以决定子集的分组方式吗?

例如,在 Kinesis AWS 服务中,我可以决定流的分区键,在我的例子中是通过用户 ID,因此,消费者可以接收用户子集的所有消息,或者从其他角度来看,一个用户的所有消息都被同一个消费者消费。一个用户的消息流不会分布在不同的消费者之间。

我想使用 Google Pub/Sub 服务进行这种分区。这可能吗?

【问题讨论】:

【参考方案1】:

订阅者目前无法指定他们应该在 Google Cloud Pub/Sub 中接收消息的分区或密钥集,不。设置此分区的唯一方法是使用单独的主题。

【讨论】:

对单个 PubSub 主题的数据进行分片的惯用方式是什么?

以上是关于Google Pub/Sub 分区 ID的主要内容,如果未能解决你的问题,请参考以下文章

从 Google Pub/Sub 调用 Google App Engine 端点

访问 Google Cloud Storage 触发事件“Pub/Sub”?

将 BigQuery 表流式传输到 Google Pub/Sub

Google Pub/Sub Java 示例

带有推送消费者的 Google Pub/Sub

将 Angular 中的点击发送到 Google Pub/Sub