2021第十二届中国数据库技术大会(DTCC)将于2021年10月18-20日,在北京国际会议中心举办,Tapdata 创始人唐建法受邀分享:如何打造面向 TP 业务的数据平台架构。
演讲工夫:2021年10月20日 09:40-10:20
演讲地点:北京国际会议中心(专场11:[ 企业数据中台设计与实际 ])
演讲主题:Real Time DaaS - 面向TP业务的数据平台架构
从20年前的传统数仓,到10年前大数据平台,5年前开始炽热的数据中台以及最近呈现的湖仓一体新数据平台,明天被数据孤岛困扰的企业,面临着太多的抉择。这些数据产品及架构有一个共性:就是他们都是为实质上解决的都是剖析洞察类场景,所谓的 AP 场景(Analytical Processing)。然而实际上,企业在 TP 类型业务上的投入和 AP 相比是9:1。为什么没有为TP业务的数据平台呢?Tapdata 创始人唐建法将从上面几个角度来分析起因并介绍一个适宜 TP 业务的 Real Time DaaS 数据架构:
- AP业务场景 vs. TP 业务场景
- 常见AP型数据平台:数仓、大数据平台、云数仓
- 数据中台,最难解释的一个数据架构
- 面向TP型数据平台:
a)为什么须要
b)技术特色 - Real Time DaaS:为TP业务打造的数据架构
- 技术外围
a)基于实时复制的数据虚拟化技术
b)基于索引的分布式数据库存储
c)主数据管理能力
d)对立数据接口及自助式服务 - Real Time DaaS 架构个性和劣势
- Real Time DaaS 实战案例
Tapdata 创始人唐建法(TJ)是一名具备多年海内外工作教训的架构师、数据库专家和开源软件推广者。TJ 在回国之前,曾在北美留学并工作多年,波及的技术栈包含 Java, Javascript, Python, MongoDB 等,并且是开源软件 angoose 的作者。回到中国当前,TJ 和阿里、百度、360等互联网公司的 MongoDB 爱好者独特创立了 MongoDB 中文社区并倒退成了领有数万名成员的世界上最大的 MongoDB 技术社区。在过来几年中,MongoDB 中文社区累计输入了数百篇技术博客,数十场线下技术大会以及保护着最残缺的MongoDB中文文档。TJ 在2019年创建了Tapdata,一家专一于实时数据服务的翻新技术公司,外围团队来自 MongoDB 和 BAT。
Tapdata 是寰球首个基于数据即服务(Data as a Service,简称 DaaS)架构理念、面向 TP 业务或场景的企业实时主数据服务平台,具备行业当先的技术劣势:基于数据同步的虚拟化、流解决引擎 + 可视化数据开发平台、低代码API公布能力、异构数据源对立拜访框架等,可能帮忙企业疾速买通数据孤岛,构建主数据服务平台,为新业务提供对立、残缺、实时的数据,并且反对十万级并发和毫秒级响应,间接利用到TP业务零碎,切中企业的外围经营价值链。
目前,Tapdata 已服务包含周生生、中国移动、中国南方电网、中国一汽、富邦银行、罗辑思维等数十家行业标杆企业,并与MongoDB、TIDB、SequoiaDB、亚信科技、中国移动、达成策略单干。Tapdata 产品的稳定性、扩展性、灵活性、易用性等方面通过了多种业务场景的验证,并失去了客户和合作伙伴的统一认可。
进一步理解 Tapdata 实时数据服务平台,更多技术文章可返回 Tapdata 技术博客。Tapdata 自研的异构数据库实时同步工具—— Tapdata Cloud ,现已收费凋谢给技术开发者应用,目前反对 Oracle、MySQL、PostgreSQL、SQL Server、MongoDB、Elasticsearch 、达梦、Kafka等支流库之间的数据迁徙和同步,行将反对 DB2、Sybase ASE、Redis、GBase、GaussDB 等。