作者:云原生加速器
数字化转型正过后,各行各业都在乘风破浪,减速数字化过程。随着信息化、数字化的一直浸透,企业在经营和业务过程中产生的数据爆发式增长。数据驱动增长的事实条件之下,对数据的获取、解决和利用的需要愈发迫切。
然而,多年烟囱式的信息化建设,造成许多孤岛式零碎和数据,海量而零散的数据,成为企业数字化征程上最大“拦路虎”。随着数字化过程放慢,数据的时效性也关乎到企业的生存倒退。
如果可能将这些孤岛式的数据平台以某种形式连接起来,并且给他们安上一个个“水龙头”,当企业须要的时候,一关上水龙头,数据就像水一样源源不断地流进去。让用户应用属于他们的数据,像喝陈腐扎啤那么简略。这正是钛铂数据(Tapdata)在做的事件。**
让企业应用数据像拧开水龙那样简略
过来数十年间,企业在信息化过程中搭建了十分多的业务零碎。现在数字化浪潮奔涌而至,各行各业迸发出各种定制化业务零碎的需要。随着数据架构日益低代码化和平台化,各类新的业务和数据系统数量仍在一直扩张。
企业在信息化和数字化建设过程中,通常波及到两类数据的解决:OLTP 和 OLAP。其中,OLTP(Online Transaction Processing)指事务型零碎,如浏览电商网页、下单、打车、外部流程等;OLAP(Online Analytical Processing)即剖析型零碎,指对已产生的业务数据,通过聚合、分组统计、AI 等形式进行剖析,得出一些洞察,以改良业务流程或晋升客户体验。
当企业开始应用 ERP、BI 报表、数据大屏、标签画像等各类零碎时,由此产生的海量数据也散落在不同零碎。当有新业务时,往往须要从不同数据库里提取不同构造的数据。然而,这些数据源可能有成千上万甚至百万个,不同源库之间数据并不相通,处于一种数据孤岛的状态,导致数据利用的价值低效且难以开释。
随着 IT 架构的迭代降级和业务端的全渠道营销,新一代的经营型剖析以及交互型业务场景逐步成为支流数据利用。企业须要获取最新的实时数据,为客户做及时的业务响应。只管目前数据库和存储库曾经很弱小,很多企业也领有各类 SaaS 零碎,但针对交互式 App 或经营剖析的场景,对实时数据反对力度无限。
在数字化转型过程中,企业面临着两大难题,一是多年信息化过程中造成的数据孤岛,一是对数据实时性要求越来越高。在 NoSQL 数据库公司 MongoDB 负责首席架构师的时候,唐建法就察看到了这个刚性需要。
唐建法曾在北美留学、工作十余年。2014 年,退出 MongoDB,通过大会、博客、文档翻译、收费社区技术支持等形式,一手打造了 MongoDB 非盈利的技术交换中文社区。
在 MongoDB 工作期间,唐建法接触到很多行业的客户,他从客户侧也强烈地感触到了,企业在数字化转型过程中遇到的上述的数据难题。
事实上,数据仓、大数据平台、数据中台等几代数据工具和架构都在解决“数据孤岛”问题,只是反对的外围业务偏 OLAP 场景,重在对历史数据做洞察和剖析,能为企业提供即时数据,用于 OLTP 业务撑持的实时数据平台非常匮乏。
另外,企业在 OLTP 上的估算投入占到 90% 以上,尽管这个比例随着数据分析价值的凸显正在逐步放大,但仍有微小市场潜力。
正是基于这些考量,一个可能疾速买通数据孤岛,为 OLTP 业务提供实时数据的新型平台就跃然纸上。
2019 年 9 月,唐建法从 MongoDB 辞职,开办了 Tapdata,推出面向事务型业务(OLTP)的 DaaS 平台,提供了一套易集成、易保护、残缺且实时的数据平台解决方案,助力企业数字化转型。
通过 3 年倒退,唐建法当初的构想曾经实现,Tapdata 曾经搭建了像自来水管一样的数据架构,当须要数据时,企业间接拧水龙头,就能取得陈腐数据。
打造一款好用的新一代实时数据产品
作为国内实时 DaaS 赛道的开创者和领跑者,Tapdata 始终聚焦数据即服务,成为一家针对企业经营中的 TP 业务,以毫秒级响应速度,提供实时数据平台服务。
“国内实时数据处理集成,包含 Daas 服务、主数据服务,Tapdata 是当先的。目前 Tapdata 曾经有 7000 多家用户,同步的数据已达到几百亿行的级别”唐建法谈到。
往年 6 月,Tapdata 官宣自带 ETL 的实时数据平台 Tapdata Live Data Platform 上线。这款产品的外围突破点在于,实现了残缺的基于 CDC 的异构数据实时集成和计算建模的能力,能够源源不断对数十种源数据库实时采集并输送到 DaaS 存储,确保数据在 DaaS 里始终失去实时更新。
唐建法谈到,Tapdata 产品最明确的定位有两个方向,其中之一,是做云上数据集成,也就 SaaS 服务。另一个是在云上搭建数据服务平台,帮忙企业把数据集中到这个托管平台,提供无代码的实时数据服务,满足企业一站式获取数据的需要。
据理解,Tapdata Live Data Platform 具备实时数据集成(ETL)和实时数据服务(DaaS)两大核心技术能力。能够做到对企业所有数据系统进行无缝无代码实时买通,从多套零碎中进行数据实时采集,而后同步到地方化的数据平台,并通过 API 或反向同步形式,为上游业务的交互式利用、微服务或交互式剖析提供陈腐实时的数据。
艰深来讲,就是当有新业务时,企业不须要再去各个中央做数据同步、复制、开发,操作人员只须用一个规范的操作形式就能获取最新最实时的数据。
唐建法称,相较于传统计划,Tapdata 的外围竞争力体现在“全链路实时”。从数据产生开始,第一工夫对数据进行实时采集、加工和服务。从采集到交付,整个过程最快用时不到一秒钟。而以前的计划都是基于小时或者最快 15 分钟能力做一些数据的抽取同步。
Tapdata 在生产端上呈现出的数据,也都是一些最新的数据或业务状态,这也是全链路实时能力的体现,即提供更加实时、疾速的产品体验。
总体而言,Tapdata 的外围能力在于多源异构数据库的实时买通,利落拽模式的数据开发,以及低代码数据公布及推送能力,提供毫秒级查问响应及数以万计的并发,和源零碎的数据提早放弃在亚秒级。
为不便用户应用,Tapdata 的实时数据平台设置三种公布模式。其中,线上版本针对新一代企业,或已在云上的云原生公司、互联网公司等。线下版则是针对很多尚未在云上的传统企业。
因为实时 DaaS 难度大、概念新,许多企业并没有那么容易接受,Tapdata 在市场推广上采取“曲线救国”的形式。比方,凋谢了开源版本,即通过一种源代码可用的形式,使不能上云的用户也能应用到 Tapdata 的先进技术。
唐建法解释称,商业化和开源并不矛盾的,通过开源形式能让产品更宽泛地触达指标用户,让大家领会到实时数据的价值,能进一步理解并采纳 Tapdata 的数据架构及产品,对商业版有肯定促进作用。另外,打磨产品最要害的是接管到用户的反馈,开源是一个十分好的共创产品的渠道。
成立三年来,Tapdata 倒退迅速,晚期就有很不错的资本投入,先后取得变量资本和蓝海资本以及五源资本、XVC 及德联资本数千万美元投资。而且取得诸多行业标杆客户认可,包含中国移动、中国一汽、周生生、TCL、南方电网、富邦银行等。
早在 2020 年,Tapdata 营收超过千万元,实现收支平衡。Tapdata 将海内市场作为将来增长的重要方向。在尚未开源和推广的状况下,Tapdata 曾经取得若干海内付费客户。
作为一家技术驱动产品的公司,唐建法认为,产品是公司的灵魂,守业胜利的关键在于打造一款好产品。只有好产品,能力让团队短暂地放弃激情。另外,还要跑在好的赛道上。
在唐建法看来,实时 DaaS 赛道十分清晰,每个企业都有对数据进行集成加工解决的需要,而且上云是将来发展趋势。只有抓住机会,把产品做好,市场是非常广阔的。
成长在阿里云:云原生助力企业突破传统数据库瓶颈
随着越来越多企业迁徙上云,具备高性能、高可用性和高安全性等特点的云上托管数据库及云原生数据库,正成为企业实现高效翻新,突破传统数据库瓶颈的首选。
在唐建法看来,云原生是以云作为终点,所有计算存储解决,信息化或者数字化都是基于云,做基础架构的形式。Tapdata 自身是一个连贯数据的产品,其开发测试、环境部署、产品交付都很依赖云来倒退。
相比于互联网等云原生企业,传统企业在数字化转型时面临的数据挑战更为艰巨,他们也将眼光投放到能大大降低老本的云原生数据库的建设中。
唐建法判断,依照趋势,即便是传统企业,将来也都会须要做布局和迁徙,最终把次要的基础架构都搬到云上。
而一些互联网公司一开始所有数据库、利用或服务,全副构建在云上,在不同的云上可能有不同的数据或业务的零碎。对于这些云原生企业,Tapdata 也能够帮他们把数据买通连贯,为其新业务提供很好的数据撑持。
基于云原生架构,Tapdata 在国内率先推出“异构数据实时同步 SaaS 平台”——Tapdata Cloud。
往年 8 月底,Tapdata Cloud 入选阿里云首期云原生加速器。本次通过产品生态集成认证,是云原生自加速器我的项目启动后,Tapdata 与阿里云正式在产品层面开展单干。
第一期阿里云云原生加速器路演
阿里云领有丰盛的云原生产品家族,有超过 300 款的产品,近千个技术解决方案。阿里云产品生态集成认证,是面向阿里云合作伙伴自有产品、解决方案与阿里云相干产品的兼容性、可用性的技术能力认证。
此番认证,表明 Tapdata 的技术能力、产品利用程度已满足阿里云相干产品的适配性要求,有利于单方一起丰盛云原生产业生态圈,减速云原生落地。
唐建法认为,阿里云的云生态可圈可点,产品能力最为残缺。通过云原生加速器我的项目,Tapdata 接触到阿里云很多产品线,也与阿里云的一些产品做了实质性的对接。阿里云提供的一些资源、产品和技术,帮忙 Tapdata 的产品更好地扩大进来,促成增长。
唐建法示意,与阿里云的单干,基于阿里云 Serverless 产品能力,使 Tapdata 研发效率大幅晋升,节俭部署工夫和上云老本,且能提供更好的客户体验。
Tapdata 始终以生态搭档的身份与阿里云放弃着深度单干。将来,借助阿里云的生态策略与生态集成技术的全面凋谢,单方的严密单干将进入新的阶段,独特为中国数千万家企业提供数字化转型服务。