Pulsar 社区周报|2021-03-01~2021-03-07

Posted ApachePulsar

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Pulsar 社区周报|2021-03-01~2021-03-07相关的知识,希望对你有一定的参考价值。

Pulsar 周报由 StreamNative 翻译整理。 原文内容来自 StreamNative 官网 Pulsar 周报模块 https://streamnative.io/weekly。

本期编辑:Tango@StreamNative。

关于 Apache Pulsar

Apache Pulsar 是 Apache 软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储、多机房跨区域数据复制,具有强一致性、高吞吐、低延时及高可扩展性等流数据存储特性。
GitHub 地址:http://github.com/apache/pulsar/

导语

各位小伙伴们,Pulsar 社区周报更新来啦!

本次 Pulsar 社区周报,为大家呈现 Pulsar client、broker、Functions、transactions,、authentication 等内容,帮助社区小伙伴们掌握 Pulsar 项目及社区每周进展,也方便大家更好地参与到 Pulsar 社区中来!

感谢本周以下小伙伴为 Apache Pulsar 添砖加瓦(排名不分先后,看看你有没有上榜):

mauza、xiaotongwang1、eolivelli 、limingnihao 、rdhabalia、linlinnn、 aahmed-se、 murong00、Anonymitaet、315157973、MarvinCai、congbobo184、merlimat、lhotari、codelipenghui、BewareMyPower、fanjeff、patricklucas、golden-yang

接下来,一起看看 3 月 1 ~ 7 日有哪些值得你关注的进展吧!

本周亮点

broker:允许启用或禁用 cursor 指标。

https://github.com/apache/pul...

贡献者:@linlinnn

Transactions:在待处理的 ack 操作上新增 最低偏移量(low watermark)的处理。

https://github.com/apache/pul...

贡献者:@congbobo184

重要特性

  • 因为 PR 较多,仅列举较大 PR 进展,不包括当周全部动态


  • 下面 PR 均已合入 Pulsar 主分支

Common:优化 ConcurrentOpenHashMap,缩短读锁死的持续时间。

https://github.com/apache/pul...

贡献者:@merlimat

Utils:转储 pulsar-perf 的 JVM 信息。

https://github.com/apache/pul...

贡献者:@eolivelli

Broker:支持获取应用的 BlacklogQuota

https://github.com/apache/pul...

贡献者:@315157973

Broker:支持获取应用的 SubscriptionDispatchRate

https://github.com/apache/pul...

贡献者:@315157973

CI:在重试或继续执行下一测试之前,清除测试失败的状态。

https://github.com/apache/pul...

贡献者:@lhotari

C++ client:从 C++ 库中删除 gtest 文件。

https://github.com/apache/pul...

贡献者:@zymap

CI:添加 apache-rat check-in CI 测试。

https://github.com/apache/pul...

贡献者:@zymap

Build:从 Pulsar docker 镜像中删除 .deb包。

https://github.com/apache/pul...

贡献者:@merlimat

Build:将 pulsar-io-kafka-connect-adaptor 拆分为 JAR 和 NAR 模块。

https://github.com/apache/pul...

贡献者:@merlimat

Broker:将待处理的读订阅指标添加到 stats-internal。

https://github.com/apache/pul...

贡献者:@rdhabalia

Broker:为 PulsarService#getAdminClient 添加 NPE 检查。

https://github.com/apache/pul...

贡献者:@BewareMyPower

Build:启用详细的 Java 编译器告警。

https://github.com/apache/pul...

贡献者:@lhotari

Build:设置项目版本时,更新 terraform 文件中的 Pulsar 版本。

https://github.com/apache/pul...

贡献者:@zymap

Deployment:更新 Ansible 的部署配置中 Pulsar 的版本至 2.7.0。

https://github.com/apache/pul...

贡献者:@codelipenghui

CI:将集成测试命令重构为 run_integration_group.sh 脚本。

https://github.com/apache/pul...

贡献者:@lhotari

CI:使用 DiagnosticCommand JMX MBean 实现线程转储。

https://github.com/apache/pul...

贡献者:@lhotari

CI:通过仅涵盖选定的 connectors 来减小集成测试镜像的大小。

https://github.com/apache/pul...

贡献者:@merlimat

Go client:将 JWT-Go 版本更新为 v4。

https://github.com/apache/pul...

贡献者:@fanjeff

Broker:防止使用无效的 broker 或 proxy configuration 进行授权。

https://github.com/apache/pul...

贡献者:@lhotari

Broker:将 getWorkerService 方法更改为抛出 UnsupportedOperationException

https://github.com/apache/pul...

贡献者:@golden-yang

Broker:如果响应已经提交,则不添加 broker-address 标头。

https://github.com/apache/pul...

贡献者:@lhotari

Broker:验证 /offload 请求的参数。

https://github.com/apache/pul...

贡献者:@patricklucas

Transaction:对 End transaction 操作进行重试。

https://github.com/apache/pul...

贡献者:@congbobo184

重要 Bug 修复

  • 因修复内容较多,仅列举较重要修复内容,不包括本周全部动态


  • 下面修复均已合入 Pulsar 主分支

Broker:修复 2.7 分支上 Topic 为空时 hasMessageAvailable() 导致的错误。

https://github.com/apache/pul...

贡献者:@zymap

Broker:修复 2.7 分支上获取 topic 应用策略时未检查 topic 所有权的问题。

https://github.com/apache/pul...

贡献者:@315157973

Broker:修复主分支上获取 topic 应用策略时未检查 topic 所有权的问题。

https://github.com/apache/pul...

贡献者:@315157973

Broker:修复PersistentReplicator 中的 NPE 和线程安全问题。

https://github.com/apache/pul...

贡献者:@lhotari

Java client:修复 ClientCnx 中的 NPE。

https://github.com/apache/pul...

贡献者:@lhotari

Broker:修复如果达到最大订阅限制,consumer 无法使用较旧的订阅来消费消息的问题。

https://github.com/apache/pul...

贡献者:@315157973

Go client:修复 lookup service 中的 socket 泄漏的问题。

https://github.com/apache/pul...

贡献者:@freeznet

Transactions:修复 transaction 日志的追加同步问题。

https://github.com/apache/pul...

贡献者:@congbobo184

活动和新闻

  • [Pulsar Summit 北美峰会 2021:启动演讲征集!

](https://mp.weixin.qq.com/s?__...

  • TGIP:Pulsar 及其生态系统
  • TGIP-CN:Pulsar 及其生态系统
  • Webinar:: TiDB + Pulsar, Event Streaming Architecture in Action

博文阅读

  • Taking an In-Depth Look at How to Achieve Isolation in Pulsar
  • Apache BookKeeper 4.13.0发布
  • 腾讯加盟:Kafka-on-Pulsar 项目迎来 2 位腾讯 Maintainer!
  • 博文推荐|Pulsar 存储空间不释放的问题分析与解决方法
  • 译文|选择 Apache Pulsar 而非 Kafka 的 10 个理由
  • 脉冲星 2 月脉动 | Pulsar 的正月
  • Apache Pulsar PMC成员翟佳:Pulsar 2021 展望与规划

作为全球性开源项目,截至 2021 年 3 月 7 日,Apache Pulsar 已拥有 375 名贡献者、7.4K+ Star 、1.9K+ Fork 。正是由于分布在全球各地的社区开发者的贡献,才使得 Apache Pulsar 项目不断发展与前进。

让我们期待下一周的 Apache Pulsar 周报!

如果你也想为 Apache Pulsar 项目出一份力、成为我们的 Contributor,参考下面链接,来加入我们吧:

Apache Pulsar 官方贡献指南

以上是关于Pulsar 社区周报|2021-03-01~2021-03-07的主要内容,如果未能解决你的问题,请参考以下文章

Pulsar 社区周报|2021-01-18 ~ 2021-01-24

Pulsar 社区周报|2021-06-07~2021-06-13

云原生人物志 | Pulsar翟佳:社区的信任最重要

换个角度看Apache pulsar

KubeSphere 社区双周报 | OpenFunction 支持 Dapr 状态管理 | 2023.03.31-04.13

星际无限 | IPFS第120期周报,即将参加ETHDenver2021社区活动