Pulsar × Apache | 明天北京见！

于 2025-07-24 16:00:25 发布
阅读量116 收藏
点赞数
CC 4.0 BY-SA版权
文章标签： apache
原文链接：https://mp.weixin.qq.com/s?__biz=MzUyMjkzMjA1Ng==&mid=2247495451&idx=1&sn=1f1b43dd3857d8f45f0e4e7f97bfdbd1&chksm=f81286074a14416f91574d2344d8e967ca004ea280755b26a95fafbc20201dc2f7c26b87cce3&scene=126&sessionid=0

7 月 25 日至 27 日，作为 Apache 软件基金会（ASF）官方全球系列大会的 Community Over Code Asia 2025 即将在北京中关村国家自主创新示范区会议中心开幕！

Pulsar 社区目前还有部分赠票，感兴趣的朋友们欢迎联系 pulsarbot (微信号：pulsarbot) 获取。

本次大会设有 Messaging 专题，由 Apache Pulsar & Apache BookKeeper PMC member、谙流科技的联合创始人兼 CEO 翟佳，Apache RocketMQ  联合创始人& PMC member 林清山，中国移动云能力中心中间件和大数据领域技术专家胡宗棠联合出品。

Pulsar 社区成员将在 7 月 25 日下午为大家带来社区建设和发展的最新资讯和前沿实践分享。Apache Pulsar 也将以合作社区的身份参与本次活动，并设立了市集展位，欢迎大家来 12 号展位和我们接头～

Pulsar 议程一览

7月25日

  • 14:30-15:00 

    Mingze Han：Apache Pulsar 在腾讯云上的高可用性最佳实践 

  • 15:00-15:30 

    Zhangjian He：使用 Apache Pulsar 构建高可靠订阅和推送服务｜挑战与最佳实践

  • 16:15-16:45 

    Lin Lin：Apache Pulsar 在大规模分区环境下的指标收集实践

  • 16:45-17:15 

    卢世吉，Linlin Duan，Xiangying Meng：Apache Pulsar 在小红书公司线上场景的探索与实践

 参会指南

Community Over Code Asia 2025

图片

会议时间：2025 年 7 月 25 日至 27 日（周五 - 周日）09:30 - 17:45

会议地点：北京· 海淀区中关村国家自主创新示范区展示中心 - 会议中心

路线（推荐绿色出行）：

公交：至万泉河桥东站下车，步行 1.2 公里，约 17 分钟到达会场；

地铁：地铁 16 号线万泉河桥站下车，A 西北口出，步行 1.1 公里约 15 分钟/骑车约 6 分钟，到达会场；

打车/自驾：可直接定位导航至“中关村国家自主创新示范区-会议中心”，会议中心停车位有限，推荐绿色出行。

 大会云相册二维码

Community Over Code Asia 2025

图片

图片

实时更新大会照片动态

 签到入场

Community Over Code Asia 2025

图片

签到时间：7 月 25 日至 27 日 每天上午 8:30 开始签到

签到须知：

Community Over Code Asia 2025 采用售票制，所有参会者（含讲师及工作人员）皆需凭票扫码入场，请您确保在大会开始前已完成购票注册。

今年的大会为期 3 天，从 7 月 25 日至 7 月 27 日，各票种价格从 199 元至 1299 元不等，您可点击【阅读原文】至大会官网选购适合您的大会门票。

所有成功购票的用户皆会收到大会官方的报名成功邮件，如您未收到邮件，请尝试在垃圾邮件中寻找。报名成功的邮件中，附有您的专属电子门票二维码。您可以扫描邮件中的二维码，然后在百格活动微信公众号中找到大会电子门票。

微信端门票二维码获取方式：

微信搜索并关注微信公众号“百格活动”；

点击底部菜单栏，并选择【我的电子票】绑定您在报名系统中输入的手机号码，即可查看大会门票。

图片

图片

Apache Pulsar 作为一个高性能、分布式的发布-订阅消息系统，正在全球范围内获得越来越多的关注和应用。如果你对分布式系统、消息队列或流处理感兴趣，欢迎加入我们！

Github: 

https://github.com/apache/pulsar

图片

扫码添加pulsarbot，加入Pulsar社区交流群

最佳实践

互联网

腾讯BiFang | 腾讯云 | 微信 | 腾讯 | BIGO | 360 | 滴滴  | 腾讯互娱 | 腾讯游戏 | vivo | 科大讯飞 | 新浪微博 | 金山云 | STICORP | 雅虎日本 | Nutanix Beam | 智联招聘 

金融/计费

腾讯计费 | 平安证券 | 拉卡拉 | Qraft | 甜橙金融 

电商

Flipkart | 谊品生鲜 | Narvar | Iterable 

机器学习

腾讯Angel PowerFL

物联网

云兴科技智慧城市 | 科拓停车 | 华为云 | 清华大学能源互联网创新研究院 | 涂鸦智能

通信

江苏移动 | 移动云 

教育

网易有道 | 传智教育

推荐阅读

资料合集 | 实现原理 | BookKeeper储存架构解析 | Pulsar运维 | MQ设计精要 | Pulsar vs Kafka | 从RabbitMQ 到 Pulsar | 内存使用原理 | 从Kafka到Pulsar | 跨地域复制 | Spring + Pulsar | Doris + Pulsar | SpringBoot + Pulsar 

图片

ApachePulsar
关注
博客
Discord x Pulsar: 使用 Pulsar、Flink 和 Iceberg 搭建流式机器学习平台
08-15 694
得益于流批一体的设计（核心是 Pulsar 流与 Iceberg 表的融合）和模型内嵌于 Flink 作业的简化架构（模型仅是作业中的一个“小方块”），系统发生变更后，历史数据的回填速度极快，仅需 3-4 小时即可完成。：该方案显著简化了架构，减少了部署组件。模型部署采用ONNX格式，兼容XGBoost、PyTorch、TensorFlow等主流框架，其二进制文件可直接嵌入Flink作业运行，完全摒弃了传统独立的模型服务，这不仅大幅降低了系统复杂度和潜在错误，也使得开发调试更简单快速，显著提升了开发效率。
博客
技术文档 | Pulsar 中的消息保留、过期及积压机制解析（上）
08-13 973
由于不同Subscription的消费进度可能不同，有的较快，有的较慢，因此 Pulsar 对数据的删除是以该 Topic 中消费最慢的 Subscription 为基准，被它消费过后的数据才是可删除的。同样因为 Expiry 的二分查找机制，如果消息的时间戳是乱序的(在使用 Shared 模式的 Producer 的情况下，这很可能发生)， 可能会导致 Expiry 机制无法正确的移动游标，从而导致某些过期消息会被继续消费。正确的 Retention 策略应该是周期性的清理旧数据，
博客
技术文档 | Pulsar 存储计算分离架构设计之 Broker 无状态
08-10 38
而在Pulsar中，由于Broker是无状态的，任何一个Broker都可以接管发生故障的Broker的任务，无需进行数据同步和一致性检查，从而大大简化了故障恢复过程。同时，Broker通过缓存机制减少对BookKeeper集群的访问频率，提高消息处理的性能。综上所述，Pulsar的存储计算分离架构通过将存储和计算职责分离，实现了灵活的负载均衡、简化的故障恢复、易于扩展和维护以及高性能与可靠性等特点。Broker 无状态的核心体现，也是Pulsar的存储计算分离架构的核心体现之一，这里很重要，划重点！
博客
架构革命 | LinkedIn 也无法拯救的 Kafka：Pulsar 的存算分离成了终极答案？
08-08 825
其实根据根据真实调研，绝大多数用户的使用量，其 Topic 数都到不了百万级，对于几十万的 Topic，得益于 Pulsar 架构天然分散了压力，BookKeeper 同样在底层为元数据（如租户、命名空间、主题信息等）提供服务，并可横向扩展，绝大多数时候 Zookeeper 是胜任大数据量元数据管理工作的。Kafka 的元数据管理其实存在很严重的瓶颈。云服务的发展速度远超预期，从 2010 年的概念阶段到 2015 年的快速普及，再到今天的云原生时代，仅用了十余年时间就彻底重塑了整个IT基础设施。
博客
重大技术转向：LinkedIn 抛弃自家创造的 Kafka ，又重新造了个 Pulsar 的轮子？
08-05 725
Kafka 的扩展性和可操作性挑战正是 Pulsar 在设计之初就试图解决的问题。
博客
重大技术转向：LinkedIn 抛弃自家创造的 Kafka ，又重新造了个 Pulsar 的轮子？
08-01 580
同时，协调器还维护 Segment 的元数据，如 Segment 的副本集、Segment 的激活/封存/重新分配状态、Segment 的起始偏移和长度以及创建时间和封存时间。团队利用这种广播机制发布精简的全局集群状态信息，包括基本的主机信息、端口配置和集群中 Broker 的属性，以及 DS-RSM 哈希环的关键信息，如每个 vnode 的哈希边界范围、vnode 的领导者信息、当前任期和复制状态等。为实现高扩展性，它采用了数据和元数据分片技术，维持最小化的全局状态，并利用分散式的集群成员协议。
博客
谙流 ASP 社区版正式发布：一行命令轻松实现 Pulsar 集群管理
07-31 421
ASP 社区版是一款完全免费的 Pulsar 集群管理控制台，基于 Docker 构建，一行命令即可完成本地部署
博客
Apache Pulsar × AI Agent：智能系统消息基础架构初探​ ​
07-30 761
它能够主动理解目标、分解任务、调用工具（API）、与环境交互并持续优化。消息队列的核心优势——可靠、解耦、异步、缓冲——在 AI Agent 分布式、异构、高并发、长流程的生态中，价值不仅未被削弱，反而被显著放大，成为串联智能体的生命线。Apache Pulsar 是 Apache 软件基金会顶级项目，是下一代云原生分布式消息流平台，集消息、存储、轻量化函数式计算为一体，采用计算与存储分离架构设计，支持多租户、持久化存储、多机房跨区域数据复制，具有强一致性、高吞吐、低延时及高可扩展性等流数据存储特性。
博客
谙流 ASP 社区版正式发布：一行命令轻松实现 Pulsar 集群管理
07-30 57
实时监控各分区的详细状态和性能指标，包括消息入站、出站速率、存储大小等，协助运维人员精准定位性能瓶颈，快速解决数据不均衡问题，保障关键业务消息的稳定投递。未来，我们将继续立足开源，携手全球开发者，共同构建高可靠、高一致、高吞吐、高可用、高并发、低延迟的下一代消息流基础设施，让每一次数据流动都创造更多价值。：直观易用的策略配置界面，简化租户资源配额、存储策略、数据保留周期等相关配置过程，配置效率upup！：轻松接入并管理您已有的 Pulsar 集群，提供一站式的管理视图和流畅的操作体验。
博客
技术文档 | Apache Pulsar × AI Agent：智能系统消息基础架构初探
07-29 69
它能够主动理解目标、分解任务、调用工具（API）、与环境交互并持续优化。消息队列的核心优势——可靠、解耦、异步、缓冲——在 AI Agent 分布式、异构、高并发、长流程的生态中，价值不仅未被削弱，反而被显著放大，成为串联智能体的生命线。Apache Pulsar 是 Apache 软件基金会顶级项目，是下一代云原生分布式消息流平台，集消息、存储、轻量化函数式计算为一体，采用计算与存储分离架构设计，支持多租户、持久化存储、多机房跨区域数据复制，具有强一致性、高吞吐、低延时及高可扩展性等流数据存储特性。
博客
技术文档 | OpenAI 的 Kafka 演进之路与 Pulsar 迁移潜力
07-29 987
省流：直接选 Pulsar，存算分离、跨集群容灾、生产/消费高可用、端到端低延迟一步到位
博客
Community Over Code Asia 2025 主题演讲豪华阵容发布！
07-23 210
此前，刘宇成曾领导 Wayfair 的机器学习平台团队，负责扩展服务数百万客户的生产模型。上海开源信息技术协会副秘书长，对外经济贸易大学全球开源协作研究中心副主任，中国计算机学会开源发展委员会执委，开源社顾问、中国汽车工业协会开源顾问、北京智源人工智能研究院开源顾问、国科开源平台联合创始人，原中科院软件研究所 OpenHarmony 团队核心成员，原 OpenHarmony 项目创始生态负责人、教育负责人，原开放原子基金会业务发展部、教育培训部、行业研究部负责人，中国开源硬件和开源教育早期开拓者之一。
博客
技术文档 | OpenAI 的 Kafka 演进之路与 Pulsar 迁移潜力
07-23 979
基于 OpenAI 在 Confluent 技术演讲中披露的内容，本文将从 Kafka 在 OpenAI 中的使用场景出发，揭示业务暴涨后的所面临的痛点，并重点介绍 “Proxy代理层”架构（Prism + uForwarder）如何实现业务与基础设施的深度解耦、跨集群容灾无缝迁移等能力。连锁反应，局部故障可能演变为集群级雪崩（如Controller切换失败）单Kafka集群在运维时有非常多的弊端，例如扩分区扩容场景，会导致分区级别不用的情况，导致业务终端，带来集群不可用的风险。
博客
Pulsar 社区周报 | No.20250718
07-19 1043
improve][build]将 org.apache.commons:commons-lang3 从 3.17.0 升级到 3.18.0。[improve][pip]PIP-432：在 EncryptionContext 中添加 isEncrypted 字段。[improve][client]PIP-425：支持连接到多端点 serviceUrls 的下一个可用端点。[improve][pip]PIP-429：通过跳过有效载荷缓冲区解析来优化紧凑的最后条目的处理。
博客
公测邀请 | 再见，Pulsar Manager！你好，ASP 社区版！
07-17 868
基于这些原因，我们开发了 ASP 社区版（AscentStream Platform Community Edition），一个全新的、现代化的 Pulsar 管控平台，旨在完全取代 Pulsar Manager，为 Pulsar 用户提供更好的管理体验。在 Apache Pulsar 的生态系统中，Pulsar Manager 作为一个开源的管控工具，曾经帮助了无数开发者和运维人员管理他们的 Pulsar 集群。我们对复杂的配置做了整合优化，大大降低了配置错误的可能性，提高了配置效率，特别适合新手用户。
博客
技术文档 | 使用 Pulsar Functions 构建实时 AI Pipeline
07-15 699
Pulsar Functions 是基于 Apache Pulsar 的 Serverless 计算框架，它提供了一个方便而强大的解决方案，打破了传统机器学习工作流的局限性。我们的目标是构建一个通过 Pulsar Functions 实现的实时推理引擎，该引擎可以一次性或批量检索低延迟的推测信息。Pulsar Functions 有广阔的使用场景，本文将重点关注其灵活性，并探索它如何为需要实时推测和结果的机器学习 pipeline 提供解决方案。但独立实例的形式更便于我们在实时 AI 的场景下进行实践。
博客
Pulsar 社区周报 | No.20250711
07-11 1050
fix][broker]修复非持久主题的复制器总是出现“Producer send queue is full”的错误，如果设置了较小的配置值 replicationProducerQueueSize。[improve][broker]PIP427：将pulsar-admin默认的Mark-Delete速率与Broker配置对齐。[improve][broker][pip-431]PIP-431：在主题统计中添加创建时间戳和最后发布时间戳。一起看看本周有哪些重要更新吧~一起看看本周有哪些重要更新吧~
博客
技术文档 | 当 Agent 遇上 Pulsar：如何重构 A2A 协议，玩转事件驱动架构
07-08 89
通过 Pulsar ，我们成功地将 A2A 的通信底层从一个强绑定的 HTTP 实现，升级为了一个可插拔、事件驱动的架构。
博客
Pulsar 邀您关注 Community Over Code Asia 2025 Messaging 专题
07-08 93
本次演讲我们将重点讲解腾讯云上 Apache Pulsar 在高可用性方面的最佳实践，包括 Broker 集群和 Bookkeeper 集群的高可用性、Zookeeper 集群的高可用性以及跨集群的高可用性实践，希望能够为开发者提供一些参考。在腾讯云，我们开发了基于共享弹性流日志的稳健云 MQTT 解决方案。Senze Zhang 是一位资深的消息队列系统工程师，在高性能消息解决方案的设计、实现和优化方面拥有丰富的经验，参与部署过 RocketMQ、Kafka、MQTT 等多个业界领先的消息队列平台。
博客
Pulsar 社区周报 | No.20250704
07-04 991
improve][build]将 org.apache.commons.lang 替换为 org.apache.commons.lang3。[improve][client][pip]要求将 Java 17 作为 Pulsar Java 客户端 SDK 的最低版本。[improve][client][pip]要求将 Java 17 作为 Pulsar Java 客户端 SDK 的最低版本。[fix][proxy]通过替换 TopicName 为一个简单的转换方法来修复 proxy OOM 问题。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值