作者:云原生加速器
数字化转型正过后,各行各业都在乘风破浪,减速数字化过程。随着信息化、数字化的一直浸透,企业在经营和业务过程中产生的数据爆发式增长。数据驱动增长的事实条件之下,对数据的获取、解决和利用的需要愈发迫切。
然而,多年烟囱式的信息化建设,造成许多孤岛式零碎和数据,海量而零散的数据,成为企业数字化征程上最大“拦路虎”。随着数字化过程放慢,数据的时效性也关乎到企业的生存倒退。
如果可能将这些孤岛式的数据平台以某种形式连接起来,并且给他们安上一个个“水龙头”,当企业须要的时候,一关上水龙头,数据就像水一样源源不断地流进去。让用户应用属于他们的数据,像喝陈腐扎啤那么简略。这正是钛铂数据(Tapdata)在做的事件。**
让企业应用数据像拧开水龙那样简略
过来数十年间,企业在信息化过程中搭建了十分多的业务零碎。现在数字化浪潮奔涌而至,各行各业迸发出各种定制化业务零碎的需要。随着数据架构日益低代码化和平台化,各类新的业务和数据系统数量仍在一直扩张。
企业在信息化和数字化建设过程中,通常波及到两类数据的解决:OLTP和OLAP。其中,OLTP(Online Transaction Processing )指事务型零碎,如浏览电商网页、下单、打车、外部流程等;OLAP(Online Analytical Processing)即剖析型零碎,指对已产生的业务数据,通过聚合、分组统计、AI等形式进行剖析,得出一些洞察,以改良业务流程或晋升客户体验。
当企业开始应用ERP、BI报表、数据大屏、标签画像等各类零碎时,由此产生的海量数据也散落在不同零碎。当有新业务时,往往须要从不同数据库里提取不同构造的数据。然而,这些数据源可能有成千上万甚至百万个,不同源库之间数据并不相通,处于一种数据孤岛的状态,导致数据利用的价值低效且难以开释。
随着IT架构的迭代降级和业务端的全渠道营销,新一代的经营型剖析以及交互型业务场景逐步成为支流数据利用。企业须要获取最新的实时数据,为客户做及时的业务响应。只管目前数据库和存储库曾经很弱小,很多企业也领有各类SaaS零碎,但针对交互式App或经营剖析的场景,对实时数据反对力度无限。
在数字化转型过程中,企业面临着两大难题,一是多年信息化过程中造成的数据孤岛,一是对数据实时性要求越来越高。在 NoSQL 数据库公司 MongoDB 负责首席架构师的时候,唐建法就察看到了这个刚性需要。
唐建法曾在北美留学、工作十余年。2014年,退出 MongoDB,通过大会、博客、文档翻译、收费社区技术支持等形式,一手打造了 MongoDB 非盈利的技术交换中文社区。
在 MongoDB 工作期间,唐建法接触到很多行业的客户,他从客户侧也强烈地感触到了,企业在数字化转型过程中遇到的上述的数据难题。
事实上,数据仓、大数据平台、数据中台等几代数据工具和架构都在解决“数据孤岛”问题,只是反对的外围业务偏 OLAP 场景,重在对历史数据做洞察和剖析,能为企业提供即时数据,用于 OLTP 业务撑持的实时数据平台非常匮乏。
另外,企业在 OLTP 上的估算投入占到 90% 以上,尽管这个比例随着数据分析价值的凸显正在逐步放大,但仍有微小市场潜力。
正是基于这些考量,一个可能疾速买通数据孤岛,为 OLTP 业务提供实时数据的新型平台就跃然纸上。
2019年9月,唐建法从 MongoDB 辞职,开办了 Tapdata,推出面向事务型业务(OLTP)的 DaaS 平台,提供了一套易集成、易保护、残缺且实时的数据平台解决方案,助力企业数字化转型。
通过3年倒退,唐建法当初的构想曾经实现,Tapdata 曾经搭建了像自来水管一样的数据架构,当须要数据时,企业间接拧水龙头,就能取得陈腐数据。
打造一款好用的新一代实时数据产品
作为国内实时 DaaS 赛道的开创者和领跑者,Tapdata 始终聚焦数据即服务,成为一家针对企业经营中的 TP 业务,以毫秒级响应速度,提供实时数据平台服务。
“国内实时数据处理集成,包含Daas服务、主数据服务,Tapdata 是当先的。目前Tapdata 曾经有7000多家用户,同步的数据已达到几百亿行的级别”唐建法谈到。
往年6月,Tapdata 官宣自带 ETL 的实时数据平台 Tapdata Live Data Platform 上线。这款产品的外围突破点在于,实现了残缺的基于 CDC 的异构数据实时集成和计算建模的能力,能够源源不断对数十种源数据库实时采集并输送到 DaaS 存储,确保数据在DaaS 里始终失去实时更新。
唐建法谈到,Tapdata 产品最明确的定位有两个方向,其中之一,是做云上数据集成,也就SaaS服务。另一个是在云上搭建数据服务平台,帮忙企业把数据集中到这个托管平台,提供无代码的实时数据服务,满足企业一站式获取数据的需要。
据理解,Tapdata Live Data Platform 具备实时数据集成(ETL)和实时数据服务(DaaS)两大核心技术能力。能够做到对企业所有数据系统进行无缝无代码实时买通,从多套零碎中进行数据实时采集,而后同步到地方化的数据平台,并通过 API 或反向同步形式,为上游业务的交互式利用、微服务或交互式剖析提供陈腐实时的数据。
艰深来讲,就是当有新业务时,企业不须要再去各个中央做数据同步、复制、开发,操作人员只须用一个规范的操作形式就能获取最新最实时的数据。
唐建法称,相较于传统计划,Tapdata 的外围竞争力体现在“全链路实时”。从数据产生开始,第一工夫对数据进行实时采集、加工和服务。从采集到交付,整个过程最快用时不到一秒钟。而以前的计划都是基于小时或者最快15分钟能力做一些数据的抽取同步。
Tapdata 在生产端上呈现出的数据,也都是一些最新的数据或业务状态,这也是全链路实时能力的体现,即提供更加实时、疾速的产品体验。
总体而言,Tapdata 的外围能力在于多源异构数据库的实时买通,利落拽模式的数据开发,以及低代码数据公布及推送能力,提供毫秒级查问响应及数以万计的并发,和源零碎的数据提早放弃在亚秒级。
为不便用户应用,Tapdata 的实时数据平台设置三种公布模式。其中,线上版本针对新一代企业,或已在云上的云原生公司、互联网公司等。线下版则是针对很多尚未在云上的传统企业。
因为实时 DaaS 难度大、概念新,许多企业并没有那么容易接受,Tapdata 在市场推广上采取“曲线救国”的形式。比方,凋谢了开源版本,即通过一种源代码可用的形式,使不能上云的用户也能应用到 Tapdata 的先进技术。
唐建法解释称,商业化和开源并不矛盾的,通过开源形式能让产品更宽泛地触达指标用户,让大家领会到实时数据的价值,能进一步理解并采纳 Tapdata 的数据架构及产品,对商业版有肯定促进作用。另外,打磨产品最要害的是接管到用户的反馈,开源是一个十分好的共创产品的渠道。
成立三年来,Tapdata 倒退迅速,晚期就有很不错的资本投入,先后取得变量资本和蓝海资本以及五源资本、XVC 及德联资本数千万美元投资。而且取得诸多行业标杆客户认可,包含中国移动、中国一汽、周生生、TCL、南方电网、富邦银行等。
早在2020年,Tapdata 营收超过千万元,实现收支平衡。Tapdata将海内市场作为将来增长的重要方向。在尚未开源和推广的状况下,Tapdata 曾经取得若干海内付费客户。
作为一家技术驱动产品的公司,唐建法认为,产品是公司的灵魂,守业胜利的关键在于打造一款好产品。只有好产品,能力让团队短暂地放弃激情。另外,还要跑在好的赛道上。
在唐建法看来,实时 DaaS 赛道十分清晰,每个企业都有对数据进行集成加工解决的需要,而且上云是将来发展趋势。只有抓住机会,把产品做好,市场是非常广阔的。
成长在阿里云:云原生助力企业突破传统数据库瓶颈
随着越来越多企业迁徙上云,具备高性能、高可用性和高安全性等特点的云上托管数据库及云原生数据库,正成为企业实现高效翻新,突破传统数据库瓶颈的首选。
在唐建法看来,云原生是以云作为终点,所有计算存储解决,信息化或者数字化都是基于云,做基础架构的形式。Tapdata 自身是一个连贯数据的产品,其开发测试、环境部署、产品交付都很依赖云来倒退。
相比于互联网等云原生企业,传统企业在数字化转型时面临的数据挑战更为艰巨,他们也将眼光投放到能大大降低老本的云原生数据库的建设中。
唐建法判断,依照趋势,即便是传统企业,将来也都会须要做布局和迁徙,最终把次要的基础架构都搬到云上。
而一些互联网公司一开始所有数据库、利用或服务,全副构建在云上,在不同的云上可能有不同的数据或业务的零碎。对于这些云原生企业,Tapdata也能够帮他们把数据买通连贯,为其新业务提供很好的数据撑持。
基于云原生架构,Tapdata 在国内率先推出“异构数据实时同步 SaaS 平台”——Tapdata Cloud。
往年8月底,Tapdata Cloud 入选阿里云首期云原生加速器。本次通过产品生态集成认证,是云原生自加速器我的项目启动后,Tapdata 与阿里云正式在产品层面开展单干。
第一期阿里云云原生加速器路演
阿里云领有丰盛的云原生产品家族,有超过300款的产品,近千个技术解决方案。阿里云产品生态集成认证,是面向阿里云合作伙伴自有产品、解决方案与阿里云相干产品的兼容性、可用性的技术能力认证。
此番认证,表明 Tapdata 的技术能力、产品利用程度已满足阿里云相干产品的适配性要求,有利于单方一起丰盛云原生产业生态圈,减速云原生落地。
唐建法认为,阿里云的云生态可圈可点,产品能力最为残缺。通过云原生加速器我的项目,Tapdata 接触到阿里云很多产品线,也与阿里云的一些产品做了实质性的对接。阿里云提供的一些资源、产品和技术,帮忙Tapdata的产品更好地扩大进来,促成增长。
唐建法示意,与阿里云的单干,基于阿里云Serverless产品能力,使 Tapdata 研发效率大幅晋升,节俭部署工夫和上云老本,且能提供更好的客户体验。
Tapdata 始终以生态搭档的身份与阿里云放弃着深度单干。将来,借助阿里云的生态策略与生态集成技术的全面凋谢,单方的严密单干将进入新的阶段,独特为中国数千万家企业提供数字化转型服务。