乐趣区

关于开放源代码:Pulsar-Summit-Asia-2020-场景案例论坛上多行业多场景

对于 Apache Pulsar

Apache Pulsar 是 Apache 软件基金会顶级我的项目,是下一代云原生分布式音讯流平台,集音讯、存储、轻量化函数式计算为一体,采纳计算与存储拆散架构设计,反对多租户、长久化存储、多机房跨区域数据复制,具备强一致性、高吞吐、低延时及高可扩展性等流数据存储个性。

以后已有泛滥国内外大型互联网和传统行业公司采纳 Apache Pulsar,案例散布在人工智能、金融、电信运营商、直播与短视频、物联网、批发与电子商务、在线教育等多个行业,如美国有线电视网络巨头 Comcast、Yahoo!、腾讯、中国电信、中国移动、BIGO、VIPKID 等。

对于 Pulsar Summit

Pulsar Summit 是由 StreamNative 组织的 Apache Pulsar 社区年度盛会,它将散布在世界各地的 Apache Pulsar 我的项目 Contributor、Commiter 和各企业 CTO/CIO、开发者、架构师、数据科学家,以及音讯和流计算社区的精英招集在一起。于此盛会,大家分享实践经验、交换想法、探讨对于 Pulsar 我的项目和社区的常识,切磋互动。

Pulsar Summit Asia 旨在汇集亚洲地区 Pulsar 开发者和贡献者,促成 Apache Pulsar 在亚洲地区的倒退。Pulsar Summit Asia 2020 将于 11 月 28-29 日以线上直播模式发展。


近期咱们将陆续对 Pulsar Summit Asia 2020 中英文专场及分论坛议题予以具体介绍,帮忙大家更好地理解行将到来的 Pulsar 社区盛会分享什么、有哪些亮点。

咱们曾经为大家介绍了主题演讲相干信息,明天持续带来 Pulsar Summit Asia 2020 场景案例论坛演讲详情,因本论坛内容较多,故分成 2 篇文章,明天是场景论坛演讲介绍上篇。

备注:上面演讲工夫及内容不能保障为最终版本,请关注 Pulsar Summit Asia 2020 官网获取最新动静 https://pulsar-summit.org/en/event/asia-2020。

助力构建本地即时批发和配送平台:Apache Pulsar 在达达团体的实际

张清华

在达达团体云平台基础架构任职,架构师,目前次要负责公司消息中间件。

万明明

在达达团体云平台基础架构任职,架构师,目前次要钻研方向:Apache Pulsar 在日志和流式解决的利用。

演讲工夫:11 月 28 日 1:30pm-2:10pm

演讲详情:

达达团体是中国当先的本地即时批发和配送平台,在撑持实时批发配送业务的根底技术架构中,对音讯零碎选型有着严格要求。随同着业务一直疾速倒退,原有的其余音讯平台遭逢到诸多瓶颈难以满足需要,比方 RabbitMQ 吞吐在流量顶峰时抖动异样十分不稳固,Kafka 在扩容时须要较高的人工操作老本等,因而 Apache Pulsar 凭借着优良的特色引起了咱们的留神。在引入 Apache Pulsar 的过程中,咱们从业务和日志两个场景对 Apache Pulsar 做了性能根底测试,并最终引入到正式线上环境。在本次分享中,咱们将分享 Apache Pulsar 在达达团体的落地实际,以及咱们后续针对 Apache Pulsar 的打算。

Apache Pulsar 在腾讯云的最佳实际与将来瞻望

林琳

腾讯云高级工程师,沉闷于开源社区,目前是 Apache Pulsar Contributor,专一于中间件畛域,在音讯队列和微服务方向具备丰盛的教训。在退出腾讯后,林琳始终负责 CKafka/CMQ/mPass 的后端设计于开发工作,目前致力于打造稳固、高效和可扩大的根底组件与服务。

演讲工夫:11 月 28 日 2:10pm-2:50pm

演讲详情:

当咱们在云上应用音讯零碎时遇到了诸多挑战,比方动静伸缩扩容、保护大量分区等等。在本次演讲中,我将分享在腾讯云如何利用 Apache Pulsar 解决上述问题。

分享纲要:

  1. 背景:云原生环境下,音讯零碎面临的新挑战
  2. Apache Pulsar 在腾讯云的实际

2.1 性能与一致性测试比照

2.2 平滑动静伸缩扩容

2.3 大量分区治理与反对

2.4 同城跨机房、两地三机房

  1. 总结与瞻望

借助 Apache Pulsar,涂鸦智能打造世界领先的 AI+IoT 平台

高天赐

2018 至今任职涂鸦智能,负责高级软件工程师;2017-2018 任职同城网络科技,负责软件工程师

演讲工夫:11 月 28 日 2:50pm-3:30pm

演讲详情:

涂鸦智能是世界领先的 AI+IoT 平台,在涂鸦智能音讯零碎架构中,在最上层接入了大量独立的设施,比方智能开关、智能投影仪等等,这些智能设施通过 MQTT 协定向音讯零碎报告音讯。在涂鸦智能旧的音讯零碎架构中,咱们遇到了很多痛点,比方 Kafka 主题数量增多的简单治理,以及 Kafka 保护和运维须要较高的人力老本和投入。鉴于 Apache Pulsar 的诸多个性,比方计算与存储拆散的架构、跨区域数据复制、低提早和高可扩展性等性能,咱们将音讯零碎迁徙到 Apache Pulsar 上来,解决了咱们长期以来架构和业务上面对的痛点。本次演讲,我将分享 Apache Pulsar 在涂鸦智能云开发平台上的利用和实际。

最早吃螃蟹的人:Apache Pulsar 在智联招聘的倒退历程、现状及瞻望

高顺利

智联招聘高级软件工程师

演讲工夫:11 月 28 日 3:30pm-4:10pm

演讲详情:

智联招聘是国内最早的一批 Apache Pulsar 落地企业,咱们从 RabbitMQ 迁徙到 Apache Pulsar 的过程中,踩过了坑,也获得了很大的成就。Pulsar 在智联外部曾经稳固运行近两年的工夫,Pulsar 陪伴了智联的业务倒退,为业务赋能,咱们外部接入的音讯曾经达到百亿级别量级,咱们团队也从 Apache Pulsar 的小白到精通。随着接入音讯量级和应用范畴一直进阶扩大,咱们对 Pulsar 的需要进一步扩充,咱们行将迈入 Pulsar 的深水区。在应用 Apache Pulsar 过程中,咱们也一直与社区踊跃互动,踊跃奉献性能与改良,心愿通过咱们奉献可能促成 Pulsar 的进一步倒退。

实际案例:Apache Pulsar 驱动新大陆电信计费零碎

周小华

周小华,新大陆软件公司技术架构师。

演讲工夫:11 月 28 日 4:10pm-4:50pm

演讲详情:

新大陆软件为电信运营商提供商业反对服务,家喻户晓,电信经营次要提供固定电话、移动电话和互联网接入的通信服务,电信业务领有海量的的话单数据和信令数据,在流解决技术的推动下,须要实时处理话单,对它进行批价计费,从网元采集话单到话单入库是一个计费的全流程。为了进步解决效率,咱们应用音讯队列作为传递话单的媒介,在业务零碎上应用过 Kafka、RocketMQ 等做为音讯队列,但越来越无奈满足咱们的需要。咱们关注并迁徙到 Apache Pulsar,充分发挥它在音讯队列、分层存储、Function、地区复制、Pulsar SQL 等方向的微小后劲。在本次分享中,我将分享 Apache Pulsar 驱动新大陆计费零碎的案例,讲述咱们在 Apache Pulsar 上的实际与调优。

案例:Apache Pulsar 在金山云日志服务的最佳实际,撑持日解决数十亿条音讯

刘彬

金山云大数据开发工程师,日志服务产品开发

演讲工夫:4:50pm-5:30pm UTC+8, 11 月 28 日, 2020 | 论坛 1

演讲详情:

金山云日志服务是一款针对日志类数据的一站式服务,提供从日志采集、日志存储到日志检索剖析、实时生产、日志投递等多项服务,目前撑持着多个业务线的日志查问和监控业务,每天数据量级在几十 TB。Apache Pulsar 做为一款云原生的分布式音讯队列平台,Apache Pulsar 计算和存储拆散的架构模式,很好地解决了在日志服务类产品中的分区扩容、分区合并以及百万级别 Topic 的撑持和多租户问题。本次演讲,我将分享 Apache Pulsar 在金山云日志服务的最佳实际。

敬请期待场景案例论坛下篇介绍。


想和 Pulsar 社区大咖谈笑自若吗?那就快来报名加入 Pulsar Summit Asia 2020 吧!
https://www.huodongxing.com/event/7568028151222

退出移动版