2021 第十二届中国数据库技术大会(DTCC)将于 2021 年 10 月 18-20 日,在北京国际会议中心举办,Tapdata 创始人唐建法受邀分享:如何打造面向 TP 业务的数据平台架构。
演讲工夫:2021 年 10 月 20 日 09:40-10:20
演讲地点:北京国际会议中心(专场 11:[企业数据中台设计与实际])
演讲主题:Real Time DaaS – 面向 TP 业务的数据平台架构
从 20 年前的传统数仓,到 10 年前大数据平台,5 年前开始炽热的数据中台以及最近呈现的湖仓一体新数据平台,明天被数据孤岛困扰的企业,面临着太多的抉择。这些数据产品及架构有一个共性:就是他们都是为实质上解决的都是剖析洞察类场景,所谓的 AP 场景(Analytical Processing)。然而实际上,企业在 TP 类型业务上的投入和 AP 相比是 9:1。为什么没有为 TP 业务的数据平台呢?Tapdata 创始人唐建法将从上面几个角度来分析起因并介绍一个适宜 TP 业务的 Real Time DaaS 数据架构:
- AP 业务场景 vs. TP 业务场景
- 常见 AP 型数据平台:数仓、大数据平台、云数仓
- 数据中台,最难解释的一个数据架构
- 面向 TP 型数据平台:
a)为什么须要
b) 技术特色 - Real Time DaaS:为 TP 业务打造的数据架构
- 技术外围
a) 基于实时复制的数据虚拟化技术
b) 基于索引的分布式数据库存储
c) 主数据管理能力
d) 对立数据接口及自助式服务 - Real Time DaaS 架构个性和劣势
- Real Time DaaS 实战案例
Tapdata 创始人唐建法(TJ)是一名具备多年海内外工作教训的架构师、数据库专家和开源软件推广者。TJ 在回国之前,曾在北美留学并工作多年,波及的技术栈包含 Java, Javascript, Python, MongoDB 等,并且是开源软件 angoose 的作者。回到中国当前,TJ 和阿里、百度、360 等互联网公司的 MongoDB 爱好者独特创立了 MongoDB 中文社区并倒退成了领有数万名成员的世界上最大的 MongoDB 技术社区。在过来几年中,MongoDB 中文社区累计输入了数百篇技术博客,数十场线下技术大会以及保护着最残缺的 MongoDB 中文文档。TJ 在 2019 年创建了 Tapdata,一家专一于实时数据服务的翻新技术公司,外围团队来自 MongoDB 和 BAT。
Tapdata 是寰球首个基于数据即服务(Data as a Service,简称 DaaS)架构理念、面向 TP 业务或场景的企业实时主数据服务平台,具备行业当先的技术劣势:基于数据同步的虚拟化、流解决引擎 + 可视化数据开发平台、低代码 API 公布能力、异构数据源对立拜访框架等,可能帮忙企业疾速买通数据孤岛,构建主数据服务平台,为新业务提供对立、残缺、实时的数据,并且反对十万级并发和毫秒级响应,间接利用到 TP 业务零碎,切中企业的外围经营价值链。
目前,Tapdata 已服务包含周生生、中国移动、中国南方电网、中国一汽、富邦银行、罗辑思维等数十家行业标杆企业,并与 MongoDB、TIDB、SequoiaDB、亚信科技、中国移动、达成策略单干。Tapdata 产品的稳定性、扩展性、灵活性、易用性等方面通过了多种业务场景的验证,并失去了客户和合作伙伴的统一认可。
进一步理解 Tapdata 实时数据服务平台,更多技术文章可返回 Tapdata 技术博客。Tapdata 自研的异构数据库实时同步工具—— Tapdata Cloud,现已收费凋谢给技术开发者应用,目前反对 Oracle、MySQL、PostgreSQL、SQL Server、MongoDB、Elasticsearch、达梦、Kafka 等支流库之间的数据迁徙和同步,行将反对 DB2、Sybase ASE、Redis、GBase、GaussDB 等。