关于大数据:Tapdata-与-Apache-Doris-完成兼容性互认证共建新一代数据架构

67次阅读

共计 2976 个字符,预计需要花费 8 分钟才能阅读完成。

2022 年 4 月,Tapdata 启动 PDK 插件生态共建打算,致力于全面连贯数据孤岛,减速构建更加凋谢的数据生态,旨在充沛激发实时数据流动的价值,助力各行各业实现从传统数据架构平滑过渡到新一代数据库架构,为用户提供更好的数据服务体验。作为参加该打算的首批生态共建搭档,Apache Doris 与 Tapdata 强强联手,共建下一代数据架构。

近日,Tapdata 实时数据平台(Tapdata Live Data Platform, Tapdata LDP)与 Apache Doris 实现产品兼容互认证。经单方独特严格测试,结果表明 Tapdata 实时数据平台与 Apache Doris 齐全兼容,运行稳固,能够为数据的利用与剖析提供性能保障。

Apache Doris 是一款基于 MPP 架构的高性能、实时的剖析型数据库,以极速易用的特点被人们所熟知,仅需亚秒级响应工夫即可返回海量数据下的查问后果,不仅能够反对高并发的点查问场景,也能反对高吞吐的简单剖析场景。基于此,Apache Doris 可能较好的满足报表剖析、即席查问、对立数仓构建、数据湖联邦查问减速等应用场景,用户能够在此之上构建用户行为剖析、AB 试验平台、日志检索剖析、用户画像剖析、订单剖析等利用。
同样关注陈腐数据价值,深刻开掘离线剖析(OLAP)场景与实时业务场景(OLTP)的 Tapdata LDP,作为首个同时反对 AP 和 TP 业务场景,基于 DaaS 架构自主研发的实时数据平台,具备异构数据实时同步、批流一体数据交融、自助式 API 公布等外围性能,可无代码疾速连贯孤岛零碎,将企业外围数据实时集中到地方化数据平台,并通过 API 或反向同步形式,为上游的交互式利用、微服务或交互式剖析提供陈腐实时的数据。Tapdata LDP 领有“实时同步 + 实时处理 + 实时服务”的全链路实时劣势:基于 CDC 形式实时采集;实时流式建模;亚秒级实在时剖析;增量数据校验;高并发查问毫秒级响应。实用于多种利用场景:

  • 疾速数据交付 :新型数据库和国产数据库越来越多,每一个新数据库场景的落地,都有可能须要获取已有业务零碎的数据。间接从 Tapdata LDP 导入并放弃继续同步,满足实时数据更新的需要,从数周的工夫缩短到数小时内实现数据交付。
  • 构建实时数仓 :将企业主数据及经营数据对立汇聚到 Tapdata LDP,依照数仓分层实践分成根底数据,主数据和汇总数据层,为企业 BI、报表等提供疾速的数据撑持。
  • 构建实时数据中台 :实时买通企业数据孤岛,对数据进行实时采集,治理及建模,构建企业的主数据系统,为企业的交互式业务,包含客户治理、生产经营治理等提供一个残缺全面的企业数据底座,撑持前端交互式业务。
  • 开发实时数据大屏 :Tapdata LDP 实现数据采集同步、宽表构建、统计聚合计算,并为数据可视化平台提供数据固化视图,以亚秒级的性能为这些可视化平台供数,超过传统大屏依赖 SQL 和逻辑视图的计划,让实时大屏交互体验无需期待,更晦涩。

随着新兴国产数据库不断涌现,Tapdata 始终在踊跃布局生态单干,继续牵手优良的国产数据库代表。此番单方联结,一方面通过 Apache Doris 高并发低提早的查问性能和高吞吐量的即席剖析查问能力,以及 Tapdata 弱小的实时数据服务能力,突破数据孤岛,独特为用户提供高效对立的数据利用及剖析平台,深刻摸索互联网行业实时数据集成与剖析解决方案;另一方面,也在踊跃推动根底软件国产化代替,独特欠缺信创产业链生态,减速数据基础设施国产化过程。

目前,Tapdata 与 Apache Doris 社区正在积极探索离线 / 实时报表,以及数据驾驶舱利用场景下的实时数仓联结解决方案,携手打造更加稳固牢靠、晦涩高效的用户体验。

将来,Tapdata 还将与 Apache Doris 社区继续单干,独特摸索新一代数据架构的更多可能,基于更陈腐的数据为用户提供更精准的剖析。

对于 Apache Doris

Apache Doris 是一个基于 MPP 架构的高性能、实时的剖析型数据库,以极速易用的特点被人们所熟知,仅需亚秒级响应工夫即可返回海量数据下的查问后果,不仅能够反对高并发的点查问场景,也能反对高吞吐的简单剖析场景。基于此,Apache Doris 可能较好的满足报表剖析、即席查问、对立数仓构建、数据湖联邦查问减速等应用场景,用户能够在此之上构建用户行为剖析、AB 试验平台、日志检索剖析、用户画像剖析、订单剖析等利用。
Apache Doris 社区曾经汇集了来自不同行业近百家企业的 300 余位贡献者,并且每月沉闷贡献者人数也靠近 100 位。2022 年 6 月,Apache Doris 胜利从 Apache 孵化器毕业,正式成为 Apache 顶级我的项目(Top-Level Project,TLP)。
与此同时,Apache Doris 在中国乃至寰球范畴内都领有着极为宽泛的用户群体,截止目前,Apache Doris 曾经在寰球超过 500 家企业的生产环境中失去利用,在中国市值或估值排行前 50 的互联网公司中,有超过 80% 长期应用 Apache Doris,包含百度、美团、小米、京东、字节跳动、腾讯、网易、快手、微博、贝壳等。同时在一些传统行业如金融、能源、制作、电信等畛域也有着丰盛的利用。

对于 Tapdata

Tapdata Inc.「深圳钛铂数据有限公司」,成立于 2019 年 9 月,外围员工来自 MongoDB、Oracle、百度、阿里、腾讯、PingCAP 等,研发人员占比超 90%,至今已获五源资本等多家头部风投数千万美元融资。Tapdata 是新一代的实时数据平台,通过把企业外围数据实时集中到地方化数据平台的形式并通过 API 或者反向同步形式,为上游的交互式利用,微服务或交互式剖析提供陈腐实时的数据,已服务周生生、中国移动、中国联通、南方电网、中国一汽、富邦银行、罗辑思维等数十家行业标杆企业。Tapdata 保持“凋谢 + 开源”策略,推出 Tapdata Cloud,将无代码数据实时同步的能力以 SaaS 的模式收费凋谢,目前已积攒 6000+ 注册用户。此外,Tapdata 开源我的项目也已公布,正在面向开发者逐渐共享其外围能力。

旗下产品

  • Tapdata Live Data Platform:一款由 Tapdata 自主研发的实时数据平台,具备实时数据集成(ETL)和实时数据服务(DaaS)两大核心技术能力,可帮忙企业无代码疾速连贯孤岛零碎,把外围数据实时集中到地方化数据平台,并通过 API 或反向同步形式,为上游业务的交互式利用、微服务或交互式剖析提供陈腐实时的数据。实用于企业对立数据管理、数据上云、实时数据中台、实时数据库同步、业务系统升级与减速等多个场景。试用 Tapdata Live Data Platform
  • Tapdata Cloud:一款异构数据库实时同步 SaaS 服务,反对支流的开源数据库、商业数据库、音讯类中间件以及 SaaS 平台等(包含:MongoDB、MySQL、Oracle、SQL Server、DB2、Elastic、Kafka、Sybase、PostgreSQL、Redis、GaussDB 等),基于日志的数据库 CDC 技术,0 入侵实时采集,毫秒级同步提早,拖拽式的“零”代码配置操作,可视化工作运行监控和告警,通过 Tapdata Cloud 可轻松实现跨零碎跨类型的数据实时同步。注册 Tapdata Cloud,永恒收费应用
正文完
 0