Pulsar 社区周报｜2021-08/02 ～ 2021-08/08

原创

ApachePulsar 2022-01-23 11:02:27 ©著作权

文章标签 分布式 java docker kafka html 文章分类 代码人生

©著作权归作者所有：来自51CTO博客作者ApachePulsar的原创作品，请联系作者获取转载授权，否则将追究法律责任

关于 Apache Pulsar
Apache Pulsar 是 Apache 软件基金会顶级项目，是下一代云原生分布式消息流平台，集消息、存储、轻量化函数式计算为一体，采用计算与存储分离架构设计，支持多租户、持久化存储、多机房跨区域数据复制，具有强一致性、高吞吐、低延时及高可扩展性等流数据存储特性。GitHub 地址：http://github.com/apache/pulsar/

导语

各位小伙伴们，Pulsar 社区周报更新来啦！

本次 Pulsar 社区周报，为大家呈现 Pulsar client、broker、transactions 等内容，帮助社区小伙伴们掌握 Pulsar 项目及社区每周进展，也方便大家更好地参与到 Pulsar 社区中来！

感谢本周以下小伙伴为 Apache Pulsar 添砖加瓦（排名不分先后，看看你有没有上榜）：

@codelipenghui, @Sunny-Island, @gaoran10, @Demogorgon314, @Technoboy-, @frankxieke, @urfreespace, @lhotari, @315157973, @aloyszhang, @HugoPelletier, @MarvinCai, @massakam, @WJL3333, @equanz, @freeznet, @congbobo184, @goldstar611, @galrose, @tuteng, @wuzhanpeng,@liangyepianzhou

接下来，一起看看 2021 年 8 月 2 日 ~ 2021 年 8 月 8 日有哪些值得你关注的进展吧！

本周亮点

[Schema] 跨集群复制 Schema，给复制消息设置正确的 SchemaInfo，生产者 replicator 使用 AutoProduceByte Schema。

https://github.com/apache/pulsar/pull/11441

贡献者：codelipenghui

重要特性

•因为 PR 较多，仅列举较大 PR 进展，不包括当周全部动态•下面 PR 均已合入 Pulsar 主分支

[C++ Client] 简化了 C++ 客户端获取引用数的实现。https://github.com/apache/pulsar/pull/11535

贡献者：@Sunny-Island

[Python Client] Python schema 支持与 Record 配合的 Array ，Map 类型。https://github.com/apache/pulsar/pull/11530

贡献者：@gaoran10

[Broker] broker 增加额外的 servlet 支持。https://github.com/apache/pulsar/pull/11498

贡献者：@Demogorgon314

[Broker] 压缩 ManagedLedgerInfo。https://github.com/apache/pulsar/pull/11490

贡献者：@gaoran10

[Broker] 为命名空间指标项增加 AddEntryWithReplicasBytesRate。https://github.com/apache/pulsar/pull/11472

贡献者：@Technoboy-

[Broker] 管理员 Topic 统计增加 ledger 分层存储信息。https://github.com/apache/pulsar/pull/11465

贡献者：@frankxieke

[Broker] 跨集群复制 schema 信息。

https://github.com/apache/pulsar/pull/11441

贡献者：@codelipenghui

[Website][pulsar]: 自动化生成 pulsar 子命令 websocket 文档。https://github.com/apache/pulsar/pull/11364

贡献者：@urfreespace

[Website][pulsar]: 自动化生成 pulsar 子命令 discovery 文档。

https://github.com/apache/pulsar/pull/11358

贡献者：@urfreespace

[Website][pulsar]: 自动化生成子命令 initialize-cluster-metadata 文档。https://github.com/apache/pulsar/pull/11327

贡献者：@urfreespace

[Website][pulsar]: 自动化生成子命令 functions-worker 文档。

https://github.com/apache/pulsar/pull/11326

贡献者：@urfreespace

[Build] 将Ubuntu:20.04 做为基础镜像用来制作 Pulsar 容器镜像。https://github.com/apache/pulsar/pull/11026

贡献者：@lhotari

重要 Bug 修复

•因修复内容较多，仅列举较重要修复内容，不包括本周全部动态•下面修复均已合入 Pulsar 主分支

[Broker] 修复删除命名空间时所有 web 线程被卡住的问题。https://github.com/apache/pulsar/pull/11596

贡献者：@315157973

[Java Client] 避免为已配置的 reader 创建新的订阅名称。https://github.com/apache/pulsar/pull/11586

贡献者：@aloyszhang

[C++ Client] 修复 Base64 padding 的错误。https://github.com/apache/pulsar/pull/11578

贡献者：@BewareMyPower

[Broker] 引入回退设置来修复一些主题策略操作问题。https://github.com/apache/pulsar/pull/11560

贡献者：@codelipenghui

[Python Client] 增加 record 是否为 None 检查。

https://github.com/apache/pulsar/pull/11559

贡献者：@HugoPelletier

[C++/Python] 修复 CI 测试 bug.

https://github.com/apache/pulsar/pull/11557

贡献者：@BewareMyPower

[Broker] 修复当使用最早位置订阅主题时数据丢失的问题。https://github.com/apache/pulsar/pull/11547

贡献者：@codelipenghui

[Broker] 将 orElse 替换为 orElseGet。https://github.com/apache/pulsar/pull/11542

贡献者：@Technoboy-

[Broker] 修复基于时间 backlog 配额问题。https://github.com/apache/pulsar/pull/11509

贡献者：@MarvinCai

[Python Client] 修复忽略所需 key 参数的字段。

https://github.com/apache/pulsar/pull/11508

贡献者：@HugoPelletier

[WebSocket] 在禁用死信队列情况下让查询参数 NegativeAcryDeliveryDelay 生效。

https://github.com/apache/pulsar/pull/11495

贡献者：@massakam

[Java Client] 修复消费者监听响应没有队列大小的问题。

https://github.com/apache/pulsar/pull/11455

贡献者：@Technoboy-

[Broker] 完善 OffloadPolicysImplBuilder 缺少 OffloadPolicies.Builder 未实现的方法。

https://github.com/apache/pulsar/pull/11453

贡献者：@WJL3333

[Broker] 修复当 preciseTopicPublishRateLimiterEnable为true 时生产消息的问题。

https://github.com/apache/pulsar/pull/11442

贡献者：@lhotari

[Broker] 修复远端生产者已关闭时复制订阅无法复制新订阅的问题。https://github.com/apache/pulsar/pull/11382

贡献者：@equanz

[Broker] 使用二进制查找服务验证 GetTopicsOfNamespace。https://github.com/apache/pulsar/pull/11172

贡献者：@freeznet

[Broker] 修复使用 preciseTopicPublishRateLimiterEnable为true 时 set-publish-rate 的问题。

https://github.com/apache/pulsar/pull/10384

贡献者：@lhotari

活动和新闻

•[公告] 欢迎新的 Apache Pulsar PMC 成员，Enrico Olivelli、林琳和陈航！•[活动] 9月21日至23日：ApacheCon 2021[1]•[活动] 10月6日：Pulsar Summit 欧洲线上峰会[2]

本期周报翻译贡献者简介
段嘉 Janus，有十几年工作经验的大龄程序员，经历了很多业务项目，近几年回归纯技术工作，主要聚焦在云原生平台技术建设，以及传统非云原生中间件容器化，近期在调研 Pulsar，准备替换公司内部近 30 套零散的 Kafka 集群，目前参与一些社区文档的翻译工作，希望全面了解 Pulsar 社区并期待能贡献代码。

作为全球性开源项目，截至 2021 年 8 月 11 日，Apache Pulsar 已拥有 435 名贡献者、9.4K+ Star 、2.3K+ Fork 。正是由于分布在全球各地的社区开发者的贡献，才使得 Apache Pulsar 项目不断发展与前进。

让我们期待下一周的 Apache Pulsar 周报！

如果你也想为 Apache Pulsar 项目出一份力、成为我们的 Contributor，参考下面链接，来加入我们吧：

Apache Pulsar 官方贡献指南[3]

关于 Apache Pulsar
Apache Pulsar 是 Apache 软件基金会顶级项目，是下一代云原生分布式消息流平台，集消息、存储、轻量化函数式计算为一体，采用计算与存储分离架构设计，支持多租户、持久化存储、多机房跨区域数据复制，具有强一致性、高吞吐、低延时及高可扩展性等流数据存储特性。GitHub 地址：http://github.com/apache/pulsar/