简介:聚焦音讯队列 & 数据湖场景,Apache RocketMQ with Hudi & Kyuubi
上海的开发者小伙伴们,12 月 18 号,Apache RocketMQ & Apache Hudi & Apache Kyuubi(Incubating)三社区 Meetup 来了,打造最强音讯传输、实时计算、数据入湖一体化解决方案专场。
本场流动聚焦 Apache RocketMQ 及 Hudi,Kyuubi 数据湖联合,帮忙开发者能更好地应答业务挑战。流动将邀请喜马拉雅、安全证券、网易、阿里云的泛滥技术专家,独特为大家分享 Apache RocketMQ with hudi & Kyuubi 实际与利用。
相干我的项目介绍
Apache RocketMQ
Apache RocketMQ 是由阿里巴巴开源的音讯产品,历经多年双十一流量洪峰严苛考验,具备低提早、高性能、高可靠性、万亿级容量和灵便的可扩展性。目前,寰球超过上万家企业都在应用 Apache RocketMQ,不仅包含字节、快手、小米、滴滴、同城艺龙等来自互联网的头部企业,也包含来自于头部银行、券商、保险,基金等一系列要求极为严苛的金融公司。
Apache RocketMQ 通过过来几年的倒退,曾经成为微服务畛域业务音讯的首选,随同着云原生时代的到来以及实时计算的衰亡,生于云、长于云的 Apache RocketMQ 5.0 应运而生,全新降级为云原生音讯、事件、流交融解决平台,帮忙用户更容易地构建下一代事件驱动和流解决利用。
Github 地址:
https://github.com/apache/rocketmq
Apache Hudi
Apache Hudi 是 Apache 软件基金会顶级我的项目,是新一代的流式数据湖平台,反对数据插入、更新、删除和增量数据处理;可助力构建高效的企业级数据湖。
GitHub 地址:_http://github.com/apache/hudi_
Apache Kyuubi(Incubating)
Apache Kyuubi(Incubating)是一个 Thrift JDBC/ODBC 服务,目前对接了 Apache Spark 计算框架,反对多租户和分布式等个性,能够满足企业内诸如 ETL、BI 报表等多种大数据场景的利用。Kyuubi 能够为企业级数据湖摸索提供标准化的接口,赋予用户调动整个数据湖生态的数据的能力,使得用户可能像解决一般数据一样解决大数据。我的项目已于 2021 年 6 月 21 号正式进入 Apache 孵化器。从社区以后阶段的倒退指标来看,它的次要方向是依靠自身的架构设计,围绕各类支流计算框架,打造一个面向 Serverless SQL on Lakehouse 的服务。Apache Kyuubi(Incubating)是一个 Thrift JDBC/ODBC 服务,目前对接了 Apache Spark 计算框架,反对多租户和分布式等个性,能够满足企业内诸如 ETL、BI 报表等多种大数据场景的利用。Kyuubi 能够为企业级数据湖摸索提供标准化的接口,赋予用户调动整个数据湖生态的数据的能力,使得用户可能像解决一般数据一样解决大数据。我的项目已于 2021 年 6 月 21 号正式进入 Apache 孵化器。从社区以后阶段的倒退指标来看,它的次要方向是依靠自身的架构设计,围绕各类支流计算框架,打造一个面向 Serverless SQL on Lakehouse 的服务。
Github 地址:_https://github.com/apache/incubator-kyuubi_
立刻点击 此处 参加流动吧!
往期举荐
RocketMQ 5.0 POP 生产模式探秘
2021 云栖大会开源引力峰会重磅公布的策略单干,Grafana 服务到底是什么?
演进实录|不同阶段的企业如何搭建监控体系?
理解更多相干信息,请扫描下方二维码或搜寻微信号(AlibabaCloud888)增加 云原生小助手!获取更多相干资讯!
版权申明:本文内容由阿里云实名注册用户自发奉献,版权归原作者所有,阿里云开发者社区不领有其著作权,亦不承当相应法律责任。具体规定请查看《阿里云开发者社区用户服务协定》和《阿里云开发者社区知识产权爱护指引》。如果您发现本社区中有涉嫌剽窃的内容,填写侵权投诉表单进行举报,一经查实,本社区将立即删除涉嫌侵权内容。