关于数据库:十二载征程犹未止看今朝星光尽闪耀丨万字长文回顾2023数据技术嘉年华

6次阅读

共计 18289 个字符,预计需要花费 46 分钟才能阅读完成。

4 月 8 日下午,为期两天的 第十二届数据技术嘉年华(DTC 2023)在北京新云南皇冠假日酒店圆满落下帷幕。大会失去了工业和信息化部电子五所的反对和领导,围绕“开源·交融·数字化——引领数据技术倒退,开释数据因素价值”这一主题,通过一场主论坛和十二场专题论坛,汇聚“产学研”各界数据技术 领军人物 学术精英 技术专家 行业用户 ,从多角度、多维度带来 68 场主题演讲。群贤毕至、俊采星驰,从技术倒退到计划构建、从用户需要到行业实际,饱含技术干货和远见卓识的嘉年华大会吸引了 上千人到场参加,上万人观看线上直播。

— 致辞 —

建设历史视角洞悉过来,锻炼远见眼光着眼将来 ”——中国 DBA 联盟理事长、墨天轮社区发起者、云和恩墨创始人兼总经理 盖国强 在主论坛的欢送致辞中,以数据库畛域的两位图灵奖获得者 Jim Gray 和 Michael Stonebraker 在 SIGMOD 2002 上对产业界、学术界的批评发言引出这样一个摸索倒退方向的思维宗旨。墨天轮社区打造了 DTC 这一会议品牌,为学术界的首领、工业界的前辈、产业界的掌门人构建了一个交换的平台,他们摸索着不同的技术方向,沿着不同的技术路线砥砺前行。“咱们的指标如此统一,那就是为了中国数据库的产业崛起而贡献力量。”盖国强谈到。

致辞中,盖国强还对“开源·交融·数智化——引领数据技术倒退,开释数据因素价值 ”这一主题的选定进行了解读:第一,开源正在成为中国数据库产业倒退的新潮流,凝聚宽广研发人员的智慧可能减速推动数据技术的倒退;第二,简化作为用户的根本诉求,正在推动数据库从性能拆散到一体化的交融倒退;第三,数智化作为数据库技术倒退的高级需要,AI 和数据交融摸索数据,为数据库的倒退拓展了新的方向。这三个关键词囊括了数据技术在过来一年里出现的变动和倒退方向。盖国强在最初示意,“ 引领数据技术倒退,开释数据因素价值,咱们置信每一分致力都是推动中国数据库技术提高的重要力量。

☞大会 PPT 下载合辑:https://www.modb.pro/topic/622616(可公开内容陆续上传中 … …)

— 主论坛 —

大会邀请到 工业和信息化部电子五所信创负责人李冬 在主会场发表演讲。数据库作为咱们的 IT 行业里最重要的外围的产品之一,它近年来正产生着重大的变动、微小的改革。这场改革次要体现在三个方面:寰球的数据库产业改革市场格局重组、基于开源数据库市占率超过闭源数据库市占率、行业数据抉择更加多样化。现如今国产数据库品类丰盛,根社区和根生态已初步造成。他在演讲中指出,将来能够数据库的倒退能够从摸索更加多元化倒退门路、激励企业翻新在细分赛道上做差异化的竞争、丰盛国产数据库利用场景、构建凋敝的开源的生态四个角度发力。在演讲的最初李冬示意:“我置信中国数据库产业在大家的群策群力下,肯定会迎来咱们的倒退高光时刻。”

随后,CCF 数据库专委会副主任,openGauss 社区技术委员会主席,清华大学计算机系副主任、长聘传授李国良 发表了题为 《openGauss:聚焦数据库内核翻新,共建开源数据库根社区》 的演讲。他示意 openGauss 始终践行三个使命:核心技术的翻新和摸索,始终走在核心技术的冲破上;建设国产数据库的根生态和根社区,和合作伙伴一起构筑中国数据库;有引领性和创造性的思路,不是简略追随其余数据库倒退一些原有的技术。因而随着数据技术的倒退和利用需要的变动,openGauss 始终在高性能、高可用、高智能、高平安这四个方面做继续的翻新和摸索,李国良对“四高”背地的核心技术进行了具体解读。在演讲的最初他呐喊:“心愿‘产学研用’各界可能群策群力,一起共建、共享、共治构建国产数据库根社区。”

阿里巴巴团体副总裁,阿里云数据库产品事业部负责人,ACM、CCF、IEEE 会士 (Fellow) 李飞飞 在大会主论坛发表了题为 《阿里云瑶池数据库:数据业务继续在线,数据价值一直放大》 的演讲。阿里云数据库率先提出了主导将来数据库倒退的外围“四化”趋势:云原生化、平台化、一体化和智能化。他说“围绕这四化趋势,将来的数据库可能就像明天拼乐高一样,每一个组件会从架构角度进行解耦、存储、内存、计算,在计算层面咱们会有多种类型的不同的计算节点,有 TP、AP、AI,能够像拼乐高一样依照利用的需要将它疾速的组合起来,组成进去一个最满足客户需要、利用场景的数据库,这就是我认为云原生数据库的终极目标。”两周前,阿里巴巴瑶池数据库品牌正式公布,他说“咱们从户视角登程,定义了阿里巴巴瑶池数据库的外围价值:一是数据业务继续在线;二是数据价值一直放大。”围绕着两点外围价值,李飞飞深刻分析了全线产品的技术细节。

华为云数据库服务产品部副总经理庄乾锋 《自主翻新,北坡攀登,GaussDB 给世界一个更优抉择》 为主题在主论坛发表演讲。他在演讲中指出,分布式和云将主导数据库市场的将来,因而,华为在 GaussDB 分布式数据库和华为云云原生数据库这两大产品线继续布局,增强自主翻新,构建弱小的技术能力,并逐渐实现商业落地,欠缺生态建设。在演讲的最初他说道:“分布式是自主翻新数据库的将来,云原生是数字化的将来。华为的 GaussDB 将继续注入更多当先的技术和翻新,做企业外围利用的智能数据底座,和大家一起来共创国产数据库的新将来,给世界一个更优的抉择。”

腾讯云数据库总经理王义成 带来 《腾讯云 TDSQL 助力金融政企外围零碎国产化》 主题演讲。他首先介绍到腾讯云 TDSQL 经验了服务于腾讯云外部业务的第一个阶段;第二阶段是 TDSQL  Inside 使数据库集成到蕴含能源、金融、政务的产业互联网;深刻攻坚金融行业外围的第三阶段;现如今 TDSQL 行将进入第四阶段,在行业内进行规模化复制。王义成示意,要做好第四阶段,首先要做好产品层面平滑的替换,为提供一站式国产数据库解决方案,接下来腾讯云数据库将围绕实现外围零碎替换、晋升超交融 HTAP 能力、提供 SaaS 一体化一站式解决方案这三点作为产品技术的攻坚点。

OceanBase 创始人兼首席科学家阳振坤 围绕 《关系数据库发展趋势的思考》 进行主题分享,论述了他在构建 OceanBase 数据库技术能力方面的一些思考。数据库能力的构建都是出于满足市场和用户的需要,如数据系统伸缩的敏捷性、交易解决或实时剖析能力、海量数据下的老本问题,依据这些需要来逐渐思考,OceanBase 构建了单机分布式的一体化、交易、剖析的一体化解决等能力,以及现在在做的云服务,私有云、公有云、混合云等。他示意:“将来云的倒退肯定是私有云 + 公有云的混合云服务。兴许有很多业务还用纯正的私有云,极少业务用纯正的公有云,但更多企业可能会应用私有云和公有云的混合。”

云和恩墨·本原数据技术合伙人张程伟 金毅 围绕 《回归数据本原,企业级数据库的技术探索》 这一主题开展联结分享。张程伟示意,目前云和恩墨与本原数据打造了两款数据库:第一款是 企业级数据库 MogDB,在公布的两年多工夫里,围绕“安稳易用”四个字,继续构建高性能、高可用、高平安、高智能的“四高”能力,面向高并发、低时延的交易型利用场景有着极大劣势。第二款是针对工业物联网中海量数据管理场景打造的超交融时序数据库Uqbar。这两款产品都是以 openGauss 开源内核来打造的,对于抉择 openGauss 的理由他说道,“咱们认为 openGauss 社区是一个可能长期继续演进的国产数据库的根社区,可能促使社区合作伙伴踊跃的参加到社区的共建、共享、共治,集百家之长继续构建产品的卓越能力。”同时,张程伟也做了产品公布的预报,在往年的 6 月 30 日,MogDB 将公布第三个 LTS 版本——MogDB 5.0,而 Uqbar 也将公布第一个 LTS 商业版本。

随后,金毅博士 围绕数据库技术创新的驱动因素开展剖析,并进一步提炼和定义了下一代 10xHTAP 原生数据库的架构:硬件变革(众核、多级 CPU cache、大容量内存、NVMe SSD)驱动软件算法与架构变革,以一个数量级晋升资源利用率;云化资源催生云原生架构满足弹性负载;实时剖析推动编译执行、向量化、SIMD 减速交融。

清华大学穿插信息研究院 (姚班) 助理传授张焕晨 最初从学术界的视角带来 《迈向老本智能的云数据仓库将来》 主题演讲。他指出,辨别传统数据库架构和云原生数据库架构最要害的点是老本,以后云原生数据库的基础架构曾经成型,那么下一代的增强版云原生数据库就应该实现智能的老本管制。他用空调来作比喻,当空调创造进去后,下一步应该竞争的就是在同样制冷的条件下谁更省电,谁实现了这一点,谁的市场占有率就会更好。张焕晨总结道:“云原生数据库须要可能时刻在性能和老本之间进行核算,满足客户要求,数据库应该通过它的智能能力帮忙用户承当老本管制的累赘,这也是数据库易用性能够进步的中央。”

— 专题论坛 —

01「引领倒退:中国数据库翻新」专题论坛

数据库倒退历经半个世纪,现如今,百花齐放的中国数据库已逐步造成成熟的体系结构和产品能力。近年来中国数据库在需要驱动和政策带动下更加重视自主翻新。在 「引领倒退:中国数据库翻新」 专题论坛,五位技术专家作为百家争鸣的中国数据库厂商代表,在不同细分方向上展示了各自的技术冲破和翻新引领。

人大金仓高级副总裁冷建全 带来了题为 《与利用一起,打造更稳、更快、更丰盛、更智能的数据库产品》 的主题演讲,对人大金仓的全链路产品体系和弱小能力做了具体解读,并示意将来将向多模数据对立解决、多语法体系对立兼容、多场景对立解决(HTAP)等方向演进。

PingCAP 副总裁刘松 带来了题为 《以自主开源和凋谢架构构建新一代 HTAP 数据库》 的主题演讲。在演讲中,他以云计算和开源数据库从业界者的视角分享了对寰球数据库的产业趋势洞察,解读数据赛道和行业机会和沟壑,并解说了 TiDB 过来两年在 HTAP、云原生、Serverless 化的技术演进和寰球市场的拓展模式,为大家提供了国产数据翻新门路的一些思考。

南大通用 GBase8s 产品经理郭茁 带来了题为 《基于数据复制技术的多写多读数据库集群解决方案》 的主题演讲,深刻解说了南大通用 GBase8s 产品线最新推出的多活多写的数据库集群技术。在演讲中她介绍道:“在该集群计划中,所有的数据库节点都是可读可写的,数据库的整体性能会失去线性增长;并且在故障产生的时候,故障切换工夫能够管制在 3 秒以内,对客户端利用简直无感知。”在此技术计划中,数据库的数据会充沛失去冗余和多正本。通过基于业务逻辑的表拆分技术使得服务器的硬件性能失去充分利用。

GoldenDB 数据库高级架构师周日明 带来了题为 《打造外围引擎 筑路数字经济:金篆信科 GoldenDB 7.0 新个性详解》 的主题演讲。金篆信科推出的 GoldenDB 7.0 版本基于自研内核打造了 HTAP、云原生技术商业利用个性,晋升外围利用海量数据分析解决能力,与云技术交融,实现弹性、牢靠、高效的云原生利用,周日明对 7.0 版本的新个性以及关键技术进行解读,论述了新技术在实际利用中前景。

矩阵起源解决方案 VP 于涛 带来了题为 《从零开始打造新一代开源 HSTAP 数据库》 的主题演讲。MatrixOne 是矩阵起源从零开始打造的新一代超交融异构数据库,于涛在演讲中为咱们分享了 MatrixOne 在研发过程中遇到和解决的挑战,以及在存储、计算、分布式架构别离做了哪些翻新。

02「交融引领:云原生与新技术」专题论坛

云计算的遍及和软硬件技术的飞速发展,催生了数据库产业的翻新。为了满足纷繁复杂的业务需要,解决独特场景下的性能瓶颈和性能实现,种种基于云原生、AI、机器学习和数据迷信的新技术、新产品层出不穷。在 「交融引领:云原生与新技术」 专题论坛,演讲嘉宾解读了新兴数据库的能力和相干数据技术的实现原理。

阿里云数据库事业部 PolarDB for MySQL 负责人杨辛军 带来了题为 《将云原生进行到底:PolarDB 的实际和翻新》 的主题演讲,在演讲中他介绍到 PolarDB 是如何保持软硬一体化,通过资源池化和数据无缝高效的流动打造的一个高效的企业级云原生数据库,并对 PolarDB 的泛滥个性做了具体解读。

KaiwuDB CTO 魏可伟 带来了题为 《构建物联网时代“快人一步”的 AloT 数据库》 的主题演讲,他以当下物联网时代时序数据库面临的挑战讲起,分析了 KaiwuDB 1.0 的核心技术、数据库架构、性能及个性剖析等内容,为大家勾画了一个构建物联网时代时序数据库的实际之路。

玖章算术创始人 &CEO 叶正盛 带来了题为 《NineData,AIGC 时代的企业级 SQL 开发平台》 的主题演讲。NineData 是玖章算术推出的多云数据管理 SaaS 服务,可能提供云原生的智能 SQL 开发服务。叶正盛重点分享了 NineData 在 AIGC 的利用实际,为大家揭晓带这款新一代企业级 SQL 开发平台,如何让程序员和 DBA 工作更高效、更平安、更谐和。

云和恩墨数据库一体机产品总经理刘宇 带来了题为 《面向多样化数据库的数据底座 – 数据库存储 2.0》 的主题演讲。如果把过来集中式数据库标配集中式存储这样的繁多状态组合称为数据库存储 1.0,数据库存储 2.0 的次要特色就是多样化。那么如何构建面向多样化数据库,包含集中式数据库、分布式数据库、云数据库的数据底座呢?”在演讲中他介绍道:“云和恩墨 zData X 产品就是一款面向多元数据库的高效运行平台,通过硬件加持,可能大幅晋升数据库性能。”

极数云舟创始人 &CEO 周彦伟 带来了题为 《从 Database 到 Data Fabric,数据畛域技术倒退历程及翻新产品实际》 的主题演讲,Data Fabric 是一种数据架构思维(而非一组特定的工具),其通过提供一种对立的办法来治理异构数据,其外围可能通过容许将可信数据从所有相干数据源、以灵便且业务可了解的形式交付给所有相干数据消费者,从而提供比传统数据管理更多的价值。“云舟数据经纬平台 DTArk,就是对 Data Fabric 实践的落地与实际,联合了自主可控的内核层多维数据交融技术,买通了不同技术栈软件之间的数据逻辑壁垒。”他说。

03「数智趋势:智能运维与自治」专题论坛

近几年人工智能技术已逐步倒退成熟,并逐渐渗入到各行各业,智能能力被越来越多地利用到数据库内核和运维治理产品中,从而为用户提供更加稳固、高效、智能的数据库环境。「数智趋势:智能运维与自治」 专题论坛,为大家分享了数据库自治以及运维能力从传统走向自动化和智能化的改革演进和技术创新。

openGauss 数据库 AI 畛域负责人李士福 带来了题为 《openGauss:自驾驶数据库内核》 的主题演讲。随着智能化倒退,数据库作为系统软件皇冠上的明珠,与 AI 技术联合拓展出新的前沿方向。openGauss 数据库作为面向企业级外围利用的开源数据库,李士福为咱们分享了构建自驾驶内核的“AI4DB 自治零碎”和“DB4AI 库内 AI 引擎”,并联合利用案例深刻解说了 openGauss 自治运维平台 DBMind 的整体架构和卓越能力,以及库内 AI 引擎架构的技术实现。

云和恩墨数据库云管平台产品总经理巩飞 带来了题为 《构建自治智能的数据库云管平台,减速国产数据库利用过程》 的主题演讲。国产数据库百花齐放,但运维生态有余仍是制约国产数据库深刻倒退的重要因素。他介绍道:“云和恩墨数据库云管平台 zCloud 是基于 WaaS(Wisdom as a Service, 运维教训即服务)框架打造的智能化多元数据库治理平台,可能广泛晋升国产数据库运维管理水平,减速国产数据库利用过程。”随后他对 WaaS 实践在 zCloud 中的技术实现和利用场景的落地都做了具体解说。

南京基石数据 CTO 徐戟 (白鳝) 带来了题为 《常识图谱与异样检测助力数据库可观测性》 的主题演讲。数据库可观测性能力对数据库运维非常要害,利用常识图谱与异样检测能够更好的解读数据库的运行状态,发现零碎存在的问题,并辅助 DBA 定位问题起因。在本次演讲中白鳝利用近年来在数据库预警与诊断智能化方面的实际,为大家分享了一种构建数据库智能运维能力的新计划。

优维科技高级技术专家刘力鹏 带来了题为 《云原生时代智能运维与可观测性的摸索》 的主题演讲。他为观众们介绍了优维智能运维监控平台,这款产品联合了大数据、人工智能和机器学习对范畴宽泛的 IT 经营流程和工作做了性能加强和局部代替,可能集中管理 IT 运维监控的事件及告警,并联合了 DevOps 理念加强运维自动化能力。整个智能运维监控平台包含业务零碎可用性和性能监控,事件关联剖析、IT 服务治理和自动化。

柏睿数据数据科学家阿尔曼 带来了题为 《库内人工智能改革:新挑战,新机遇》 的主题演讲。现在,库内人工智能技术的倒退已是大势所趋,尤其是在运维畛域显得尤为重要。他带来了柏睿数据库全内存分布式数据库 RapidsDB 和数据库监控治理平台 RapidsDB Manager,并对其在自动化运维和智能化运维的摸索与实际做了深刻解说。

04「信创利用:数据库迁徙实际」专题论坛

在国际形势、政策疏导、业务需要等大环境的带动下,根底软件的自主可控成为国内企业关注的重点,尤其是金融、政务等 0 过错容忍度的要害行业,均纷纷发展 IT 零碎架构优化代替。那么对于数据库的代替降级,往往须要通过技术选型、能力评估、兼容测试、迁徙测试等环节,以确保迁徙过程数据无差错,迁徙后零碎安稳运行。在 「信创利用:数据库迁徙实际」 专题论坛,一些典型行业用户对数据库迁徙优良案例开展了探讨。

民生银行数据库专家朱彬 带来了题为 《民生银行信创工具体系建设》 的主题演讲。信创产业作为国家“十四五”倒退指标的重要抓手,以信息技术产业为根基,通过科技翻新,构建国内信息技术产业生态体系。民生银行积极响应国家号召,鼎力推动信创产品的技术落地,围绕整体革新工作的痛点、难点自主研发了一套信创工具体系。朱彬对信创工具体系的建设,以及将来的布局和倒退方向做了深刻解说。

数据库资深专家韩锋 带来了题为 《走好信创迁徙最初一公里》 的主题演讲。随着近些年内外部模式巨变及企业本身倒退诉求,国内企业愈发器重根底软件的自主可控。然而在整体革新中,蕴含了较多工作重点、难点以及危险。韩锋在演讲中,从信创革新角度登程,重点谈在革新中往往处于最初革新的数据库局部,即所谓信创革新“最初一公里”所面临的痛点问题及可能解决思路。

星环科技资深产品市场经理李昆 带来了题为 《星环科技国产化代替实际》 的主题演讲。星环科技通过多年自主研发,打造了一系列国产化大数据根底软件产品,在本次演讲中,李昆联合实在案例,对兼容 Oracle 和 MySQL 的金融级分布式交易型数据库 KunDB、分布式剖析型数据库 ArgoDB、万亿级图数据库 StellarDB 在国产化代替中的实际做了深刻解说。

虚谷伟业产品总监明玉琢 带来了题为 《关基畛域高价值根底数据利用国产替换与降级》 的主题演讲。“十四五”确定了以“卫生、交通、气象”为主的等高价值数据集行业。这些行业的业务压力大,数据规模大,零碎开发早。在此类行业进行信创革新须要思考的不仅仅是“当初”的“对等替换”,更要思考“将来”的“数据价值降级”。虚谷伟业在气象行业耕耘 8 年,具备较强的信创替换革新降级的实践与实践经验,本次演讲,明玉琢对行业痛点、难点进行了剖析拆解,并对虚谷伟业的全栈国产化解决方案进行分享。

科蓝软件资深大数据畛域实战专家张俊喜 带来了题为 《迁徙之路:从国产封装到中国自主品牌》 的主题演讲。他从中国传统文化角度浅析国产数据库行业现状及将来倒退之路:在术的层面思考国产数据库替换我的项目零碎迁徙;在法的层面思考国产数据库如何把握核心技术;在道的层面思考国产数据库将来前途。他说道:“咱们应从源头和底层技术抓起,依靠新型举国体制助力国产数据库产业降级,倒退中国自主品牌数据库。”

05「开源翻新:开源数据技术」专题论坛

当今数据库和数据技术仍处于一直改革演进的高速发展期,新的利用场景层出不穷、新的技术和产品不断涌现。如何在滚滚向前的技术河流中放弃本身劣势、推动产品继续翻新?这个答案无疑是“开源”,这种通过社区合作充分调动宽广开发者的创新性和创造力的形式助力数据技术倒退驶上快车道。「开源翻新:开源数据技术」专题论坛,为大家展示了开源数据库的技术创新和能力构建。

万里数据库 CTO 娄帅 带来了题为 《GreatSQL 开源社区——做中国广受欢迎的开源数据库》 的主题演讲。GreatSQL 社区是万里数据库主导发动的 MySQL 开源数据库社区。成立于 2021 年,通过凋谢的社区单干,构建国内自主 MySQL 版本及开源数据库技术,推动中国开源数据库及利用生态凋敝倒退。吸引更好开源爱好者退出,共建国内 MySQL 技术路线的蓬勃生态。娄帅在演讲中介绍了 GreatSQL 社区状况,并对 GreatSQL 劣势个性以及将来倒退瞻望做了解说。

openGauss 数据库首席架构师黄凯耀 带来了题为 openGauss 架构翻新与新个性深度解读》 的主题演讲。2023 年 3 月 30 日,openGauss 5.0.0 版本正式对外公布,在与之前版本个性性能放弃兼容的根底上,在内核能力、资源池化、工具链、兼容性等方面全面加强。黄凯耀在本次演讲中围绕要害行业外围客户场景为大家分享 openGauss 5.0.0 版本的多项架构翻新,并对新增个性进行深度解读。

SphereEx 创始人兼 CEO 张亮 带来了题为 《面向新一代数据架构的数据库加强引擎》 的主题演讲。以后企业数字化场景激增,数据量继续跃升,这便推动了底层数据技术栈逐步形成多源异构生态,张亮在演讲中从新一代数据库架构加强引擎的设计理念动手,解说了 Apache ShardingSphere 这一开源数据产品的技术特点和利用场景,深入探讨新一代数据架构的倒退方向。

钛铂数据创始人唐建法 带来了题为 《开源 + 实时 + 数据即服务架构: 遇见前所未有的 Tapdata Live Data Platform》 的主题演讲,联合利用案例为大家分享 Tapdata Live Data Platform 产品。该产品实现了一个 Data as a Service 的架构,通过 Tapdata 自带的对数十种数据源主动实时接入地方化数仓的能力,无需简单的对接,就能够给到用户一个数据就像关上水龙头那样简略应用的成果。

磐吉云数 CEO 冯若航 带来了题为 《更好的开源 RDS PG 代替:Pigsty》 的主题演讲。Pigsty v2 为世界上广泛应用的开源数据库 PostgreSQL 带来开箱即用的监控、高可用、PITR、IaC 最佳实际。冯若航介绍到,即便是在不足数据库专家的状况下,Pigsty 也能用靠近硬件的老本运行企业级数据库服务,相比 RDS 更能节俭 50%~90% 的“无专家税”。

06「交融利用:湖仓技术创新」专题论坛

随着数据的爆炸式增长,开掘和摸索数据的价值成为企业可继续优质倒退的关注重点,数据湖和数据仓库技术就此诞生,并互相交融应答更多场景。它们可能对数据进行无效治理与集中治理,并剖析数据之间的关系,为用户的重要决策提供切实数据反对。在 「交融利用:湖仓技术创新」 专题论坛,五位演讲嘉宾带大家深刻理解了湖仓技术的翻新与利用。

南大通用数据智能产品经营部总经理张绍勇 带来了题为 《GBase GCDW 云上实时逻辑数仓,反对湖仓一体》 的主题演讲。他介绍道,GBase GCDW 云上实时逻辑数仓融入了包含机器学习在内的智能计算,以及关系计算与非关系型计算之间的交融计算能力,具备云化、分布式、智能、交融、实时、平安等个性,可能反对剖析域公有云和私有云对接的 DaaS 服务部署和凋谢能力,提供云上湖仓一体的能力。

Datafuse Labs 联结创始人张雁飞 带来了题为 《Databend: 基于对象存储构建实时云原生数仓》 的主题演讲。张雁飞通过剖析 ClickHouse、Snowflake 等数仓产品技术架构,剖析以后大数据面临的新问题,引出了当下为什么须要一个旧式云数仓。Databend 便是为应答这些问题而设计的新一代云原生数仓,张雁飞就此具体解读了该产品的架构和技术实现。

HashData 资深解决方案架构师李俊 带来了题为 《基于 HashData 的湖仓一体解决方案的摸索与实际》 的主题演讲。李俊介绍了湖仓概念的历史与演进,剖析湖仓建设理论案例中的教训与教训,并示意基于此种状况,HashData 对湖仓技术有了深刻思考与翻新,进而具体讲述了 HashData 的湖仓技术创新和一体解决方案实际。

StarRocks Committer 杨文波 带来了题为 《StarRocks:湖仓交融的新范式》 的主题演讲。过来一年里,StarRocks 开始倒退数据湖剖析。StarRocks 通过 CBO 优化技术,向量化执行引擎和 Pipeline 执行引擎等技术,胜利让数据湖剖析的性能达到 Presto/Trino 和 Impala 等传统数据湖剖析引擎的 3 - 5 倍。杨文波示意,在接下来的工夫里,StarRocks 会通过细粒度数据缓存技术进一步冲破 IO 的瓶颈,进一步增强物化视图的能力,简化用户加工数据的难度,同时通过预计算的办法进一步晋升数据分析的性能,使湖仓交融真正进入新的阶段。发明湖仓交融新范式。

亚马逊云科技数据分析高级产品经理 Jason Li带来了题为 《智能湖仓 2.0:构建数据一体化交融剖析》 的主题演讲。“智能湖仓”架构是亚马逊云科技基于本身海量客户实际,总结并公布的云上数据分析最佳架构抉择,是一种可交付的架构思维,现在已实现了“2.0”进化。Jason Li 在演讲中论述了如何借助云原生数据服务搭建“智能湖仓”架构,并介绍了 Serverless 是如何晋升数据分析敏捷性、如何交融大数据与人工智能,以及云上数据安全与治理,打造云原生数据一体化交融剖析最佳实际。

07「数据价值:NoSQL 数据库」专题论坛

为了应答大规模数据汇合和多种数据类型带来的挑战,自 20 世纪 60 年代以来,NoSQL 数据库就以多种类型呈现在人们的视线中,切实解决了企业在大数据环境中海量、多源和多格局的数据处理问题。「数据价值:NoSQL 数据库」 专题论坛,带大家走进 NoSQL,分析数据价值背地的技术实现与利用实际。

华为云 NoSQL 数据库架构师胡亚凡 带来了题为 《华为云多模数据库 GaussDB NoSQL 的架构演进和利用实际》 的主题演讲。华为云自主设计研发高性能云原生多模 NoSQL 数据库产品是以存算拆散架构为根底,可能疾速孵化出文档数据库、宽表数据库、KV 数据库和时序数据库,全面兼容 MongoDB、Cassandra、InfluxDB、Redis 等多生态模型与接口。胡亚凡在演讲中平凡家分享了 GaussDB NoSQL 多模数据库的架构演进与华为的落地实际,与大家独特探讨将来多模数据库的倒退方向。

阿里云内存数据库 Tair 研发负责人朱国云 带来了题为 《阿里云内存数据库 Tair 的演进与实际》 的主题演讲。Tair 最后诞生于阿里外部,从缓存走到长久化,并提供丰盛的数据结构来满足各类在线业务需要,是撑持阿里外部实时场景的外围零碎之一,承当了双十一超大的拜访流量。目前该产品已在阿里云上正式推出。朱国云在本次演讲中为大家具体解读了 Tair 的要害个性和落地实际。

创邻科技联结创始人 &CTO 周研 带来了题为 《Galaxybase 原生分布式图数据库架构与利用》 的主题演讲。随着云计算,大数据物联网等信息技术的倒退,数据量级指数级增长,企业在简单业务场景下,对于大规模图数据高效存储、查问和实时计算产生了迫切的需要,推动图数据库向着大规模、低延时、高扩大的方向倒退,并交融图计算引擎的能力撑持实时决策。周研分享了 Galaxybase 这一国产原生高性能图平台的新一代存储计算框架,并解读是如何交融 OLTP 和 OLAP 能力,造成 HTAP 混合型图平台,实现存储计算一体化的能力。

腾讯云数据库专家工程师伍旭飞 带来了题为 《数据库内核演进,keewidb 软硬一体化摸索》 的主题演讲。他示意,传统数据库引擎历史悠久,出发点都是基于对 HDD 的优化,然而最近 10 年存储设备倒退十分快,NVMe SSD 曾经成为企业级存储的标配,在以后背景下,如何和新硬件更好的适配是存储引擎亟需解决的问题。因而,他为与会观众介绍了腾讯云自研键值数据库 keewidb 的技术架构和卓越能力,以及在软件层面 keewidb 的多线程、异步 IO、协程的无锁架构的劣势。

Ultipa CEO 孙宇熙 带来了题为 《嬴图分布式存算一体化图数据库翻新与利用》 的主题演讲。他在分享中说到:“‘事后诸葛式’的剖析已远远不能满足疾速的市场需求和业务变动”,因而嬴图在深耕图技术畛域的行践过程中,通过突破并交融了过来 OLTP 和 OLAP 两大典型利用场景的界线,以存算一体化 HTAP 分布式共识架构联合程度分布式框架,实现海量数据的实时化、深度图解决和剖析计算能力。在面对解决数据量大、并发量高、剖析逻辑简单的简单业务场景时有着卓越劣势。

08「金融科技:金融行业实际」专题论坛

金融行业因其独特的社会性能,对数据库的能力要求向来最为严苛,并且随着互联网的飞速发展,金融行业的新兴场景也不断涌现,对数据库的稳定性、一致性、安全性和运行效率的要求进一步晋升。「金融科技:金融行业实际」 专题论坛,为大家分享数据库和数据技术在金融畛域简单且高标准要求下的利用翻新与最佳实际。

民生银行资深数据库专家孔再华 带来了题为 《openGauss 在民生银行的利用实际》 的主题演讲。早在 openGauss 刚刚公布的时候,民生银行就作为开创成员退出了 openGauss 社区,并在通过充沛的理解和大量的测试后,抉择应用 openGauss 作为外围零碎的替换产品。在两年多的单干过程中,openGauss 的翻新个性一直在民生银行落地,并带来卓越的性能晋升。本次大会,孔再华为大家具体解读了民生银行在外围数据库系统替换为 openGauss 的过程中所做的工作及落地成绩。

中信建投证券技术专家刘晨 带来了题为 《金融行业数据库利用优化摸索与实际》 的主题演讲。他示意:“80% 的数据库问题是由数据库利用引起的,如数据库对象设计、SQL 语句等,而这其中 80% 的问题又来自于 20% 的数据库利用设计或 SQL 语句等,一条‘简略’的 SQL 语句或者一个不当的设计就能够轻易地搞垮整个数据库,从而造成一次重大的业务故障。”解决这 20% 的问题,就能对开发人员的能力晋升、零碎的稳固运行起到事倍功半的成果。刘晨通过他在技术治理过程中的摸索和实际案例来拆解解读以后存在的问题和痛点,并对晋升数据库设计开发能力提出了建设性意见。

华夏银行数据库专家王辉 带来了题为 《华夏银行国产数据库实际之路》 的主题演讲。金融行业在国产化革新过程中往往会面临适配老本过高、运维与备份复杂度晋升、生态建设有余、数据迁徙难度大、兼容适配性差、平安能力不可控等问题,华夏银行也不例外。因而华夏银行从 2017 年就开始做市场调研,为国产化革新之路做筹备。本次演讲,王辉分享了华夏银行在数据库选型、迁徙测试、部署投产等过程中做的工作,为大家提供了金融行业国产化代替的思路。

光大银行业务经理周明媛 带来了题为 《光大银行国产化数据仓库落地实际》 的主题演讲。中国光大银行以金融科技翻新为撑持,深入金融科技赋能,一直晋升数据资产治理能力。自 2019 年启动数据仓库国产化降级革新,历时三年实现外围数据仓库迁徙,实现架构模型优化,成为国内首家数据仓库国产化落地实际的股份制商业银行。本次演讲周明媛带大家回顾了光大银行数据仓库的国产化之路,介绍了数据仓库平台体系架构、建设成绩、转型实际问题、解决方案以及将来的倒退方向。

09「开源自研:分布式数据库」专题论坛

随着互联网业务的疾速倒退,数据库面临大规模、高并发、实时响应等方面的挑战,但传统数据库架构在这些方面显著力不从心,昂扬的建设和保护老本也给企业带来了微小的累赘。分布式数据库的数据复制、数据分区、分布式事务处理等核心技术可能无效解决超大规模数据承载问题。近些年中国分布式数据库失去了很好的倒退,在「开源自研:分布式数据库」 专题论坛中,嘉宾们对分布式数据库技术进行详解,并结合实际利用案例,带大家深刻领略分布式数据库的魅力。

OceanBase 高级技术专家易鸿伟 带来了题为 《OceanBase Cloud 4.0 技术外围能力解读》 的主题演讲。OceanBase Cloud 4.0 是构建在阿里云、AWS 等寰球支流私有云基础设施上,基于齐全自主研发的原生分布式数据库,提供弹性扩大、高性能、支流兼容的高性价比的数据库云服务。易鸿伟在本次分享中深刻解读了 OceanBase Cloud 的高性价比、高弹性、HTAP、跨境架构对立等外围能力,以及在云上 OceanBase Cloud 如何提供更优的端到端数据库服务化解决方案。

华为数据库技术专家刘梦醒 带来了题为 《GaussDB 分布式数据库核心技术及华为流程 IT ERP 最佳实际》 的主题演讲。他介绍道,GaussDB 的性能、高牢靠、平安等方面已全面超过国外支流数据库产品。本次演讲刘梦醒对分布式数据库 GaussDB 的关键技术和助力流程 IT ERP 业务的成功实践与经验总结进行了深刻解读。

天翼云公司数据库技术专家陈炜 带来了题为 《TeleDB 分布式数据库核心技术及电信外围 IT 零碎国产化最佳实际》 的主题演讲。中国电信基于云改数转实现本身 IT 改革和转型,积淀了大量国产化技术和丰盛的实践经验,通过数据库团队多年的研发迭代,演变出基于云底座的分布式数据库 TeleDB,并在中国电信外部 IT 推广实现外围零碎 100% 部署和验证,目前通过私有云、公有云等多种形式对外赋能。陈炜在演讲中分享了 TeleDB 的架构、外围能力、利用场景。

涛思数据联结创始人廖浩均 带来了题为 《将流式计算引入时序数据库,TDengine 3.0 的分布式架构实际》 的主题演讲。TDengine 是一款分布式、云原生的时序数据库。在 3.0 版本中引入了流式计算,可能实时聚合、变换、过滤、分流多个数据节点上数据,并通过分布式快照实现有状态流的容错。本次演讲,廖浩均通过技术细节,介绍了 TDengine 3.0 中引入的以事件工夫为基准的实时流式计算,分享其新的分布式架构,解读了实时性、有状态增量计算、乱序容忍这几大个性的实现过程。

NebulaGraph 产品经理韩笑 带来了题为 《分布式图数据库的零碎架构演进》 的主题演讲。在海量数据时代,从数据中简单、深度关联关系登程的图技术因为带来了传统数据处理办法未曾关注的关系维度、图特色维度、局部性维度,突破性的晋升了很多传统在线、离线业务场景的解决性能和成果。韩笑在本次演讲中为大家具体介绍了图数据库 NebulaGraph 的设计、演进,解密这个风行分布式图数据库中的实际与摸索。

10「交融翻新:HTAP 数据库技术」专题论坛

以后大型实时剖析利用曾经广泛进入咱们的生存,这背地蕴藏着的是海量数据的实时处理和剖析,业务须要实时依据 TP 的落地数据进行 C 端疾速反馈,然而传统架构通过 ETL 连贯 OLTP 和 OLAP 数据库,其过高的提早已难以满足业务疾速多变的诉求,因而 HTAP 数据库的呈现便成了众望所归。近年来,国内各大数据库厂商纷纷开始向 HTAP 进军。「交融翻新:HTAP 数据库技术」 专题论坛为大家深刻分析 HTAP 数据库技术的实现原理与翻新利用。

腾讯云数据库研发总监王云龙 带来了题为 《HTAP:腾讯云数据库 TDSQL 的思考与实际》 的主题演讲。TDSQL 在推动国产化数据库倒退的过程中,逐步形成商业数据库兼容、HTAP、多环境适配的产品能力,在满足数据库产品性能需要的同时,同样重视性能的晋升。本次分享,王云龙讲述了 TDSQL PG 产品的技术架构、产品能力、利用场景以及落地实际。

亚信安慧科技副总裁张桦 带来了题为 《通信行业外围零碎数据库的利用与翻新》 的主题演讲。他在演讲中介绍了 AntDB 如何构建一站式的 HTAP 解决方案,在外围交易与大数据分析的混合场景下,提供利用通明的的数据库服务;通过多类型数据库个性的充沛交融,帮助行业用户实现对立架构下的 HTAP 混合负载。此外,张桦还预报了 2023 年 AntDB 产品的公布布局。

泽拓科技资深技术专家林晓斌 带来了题为 《Klustron 高可用和容灾技术体系》 的主题演讲。他介绍了实现 Klustron(原 Kunlunbase)的高可用和容灾技术体系背地的技术细节,如:Fullsync 强同步机制、Fullsync HA 机制、数据中心高可用机制、集群间数据复制技术等。

OceanBase 架构师周跃跃 带来了题为 《MySQL 能力全凋谢,OceanBase 社区版 4.0 摸索与实际》 的主题演讲。随着业内首个单机分布式一体化数据库 OceanBase 4.0 公布,新版本在性能、性能和兼容性方面失去了很大的晋升。本次分享周跃跃对凋谢的外围个性进行了深刻的技术解读,帮忙有需要的企业用户更好的应用 OceanBase 社区版。

石原子科技创始人 &CEO 叶建林 带来了题为 《基于 MySQL 生态的下一代 HTAP 数据库的翻新和实际》 的主题演讲。StoneDB 是石原子研发的基于 MySQL 生态的下一代 HTAP 数据库,在本次演讲中叶建林对 StoneDB 的核心技术进行了论述和解读,并列举了几个理论利用案例,展现了 StoneDB 丰盛的利用场景和弱小能力。

11「智能前沿:数据库内核技术」专题论坛

只管数据库的类型和技术方向多种多样,但开发人员对内核技术的摸索始终如一。在 「智能前沿:数据库内核技术」 专题论坛,演讲嘉宾从内核技术和能力实现的角度登程,深挖底层技术,探讨数据库的最新架构设计与实现原理。

四维纵横创始人 &CEO 姚延栋 带来了题为 《超交融数据库如何做到既要又要还要》 的主题演讲。他从数据库实质登程,合成数据库复杂度的本源,并介绍了 YMatrix 的超交融数据架构和外部细节,如多模数据反对和不同场景操作等,让架构师、业务人员、开发人员聚焦于数据价值,而不是数据库价值,减速企业数智化转型步调,防止“试点炼狱”。

云和恩墨数据库内核研发工程师王春玲 带来了题为 《MogDB 中自治异步事务提交的设计与实现》 的主题演讲。自 2020 年以来,云和恩墨继续加大对数据库产品 MogDB 的研发投入,自研了事务异步提交、动静分区裁剪、增量排序、智能数据索引压缩等企业级个性,并逐渐回馈 openGauss 社区。本次演讲,王春玲对 MogDB 数据库中可能晋升高并发场景下事务处理能力的自研个性“自治异步事务提交”的设计与实现进行了详解。

达梦公司华北服务中心技术总监姚艳玲 带来了题为 《达梦数据库产品和内核技术》 的主题演讲,对达梦数据库重点产品线、解决方案和理论的利用案例进行了解读。达梦数据库是国内最早从事数据库自主开发研制的厂商之一,多年来,达梦数据库始终保持自主研发数据库的内核技术,搭建起国内数据库厂商最丰盛的产品线和解决方案。姚艳玲重点介绍了达梦数据库基于代价的优化器、并发管制等技术,达梦共享存储集群 DSC 的缓存交融、疾速故障转移、专用 ASM 文件系统等原理。

人称“Oracle 百科全书”的 云和恩墨联结创始人兼 CTO 杨廷琨 带来了题为 《Oracle Database 23c 翻新个性和 SQL 加强》 的主题演讲,介绍了 Oracle 最新公布的 23c 版本都有哪些翻新个性和 SQL 加强。演讲中,杨廷琨对查问省略 FROM、表反对 4096 列、Boolean 类型、GROUP BY 别名、SCHEMA 级受权、DDL 反对 EXISTS、新开发者角色、构建多行记录、更新 JOIN 后果、RETURN 反对 OLD、欠缺报错信息、SQL DOMAINS、无锁列值托管、主动事务终止等做了一一解说。

VoltDB 中国技术负责人杜华兴 带来了题为 《分布式内存数据库 VoltDB 内核原理》 的主题演讲。VoltDB 是由 ACM 图灵奖得主 Michael Stonebraker 博士领导的世界一流数据库专家团队所创立的开源产品,它是一款性能杰出的分布式内存数据库和数据处理引擎,具备多方面的劣势。本次演讲中,杜华兴对分布式内存数据库 VoltDB 的内核架构和实现原理进行分析解读。

12「智胜将来:数据技术创新利用」专题论坛

科技的飞速发展带动了一些新的利用场景,如电商平台、金融服务、数字政府、智能制作等。这些多样且简单的场景对数据库的能力提出了不同的要求,因而数据技术也需一直分化、合并、演进、迭代,以适应业务需要。「智胜将来:数据技术创新利用」 专题论坛为大家分享了在各行业千差万别的需要场景下有哪些值得参考借鉴的数据技术创新利用案例。

云和恩墨数据智能产品部总经理徐培 带来了题为 《为数据插上智能的“翅膀”,数据智能技术助力企业降本增效》 的主题演讲。他介绍道:为解决企业生产运维环境当中所产生的海量数据分析问题,进一步开释数据价值,云和恩墨数据智能产品团队研发了机器数据智能平台(zAIoT Platform)和机器数据智能剖析软件 (zAIoT AS) 两款产品,其中 zAIoT Platform 作为工业物联网平台提供海量时序数据的接入、存储、解决和剖析能力;zAIoT AS 作为硬件设施数据的智能剖析软件,为硬件设施生产制造商提供了原型验证、品质验证、预测性保护、组态治理和数据挖掘等性能。徐培结合实际利用场景对这两款产品的能力进行了深刻解读。

京东科技数据库架构师刘欢 带来了题为 《京东云数据库在双十一期间的利用实际》 的主题演讲。京东云数据库作为京东团体的次要数据载体产品,以其丰盛的产品线及高牢靠高可用的服务架构,大规模撑持了京东 6.18 和 11.11 大促的稳固运行。本次分享,刘欢对双十一期间云数据库整体技术解读以及云数据库在不同业务场景的案例介绍。

用友财务云资深数据架构师李传猛 带来了题为 《ToB 简单 HTAP 业务场景的落地:用友事项会计 + 云原生 PolarDB》 的主题演讲。用友的事项会计产品具备实时、精密、多维的个性需要。基于这些个性须要,用友财务云跟阿里 PolarDB 数据库团队深度单干交换,一起布局并落地了 PolarDB 的外围个性:实时、列存、内存、多写、个性分区,使 PolarDB 成为了可能撑持 ToB 简单业务场景的 HTAP 数据库。

中移集成运维部数据库负责人朱乐齐 带来了题为 《数字政府数据治理新模式》 的主题演讲。中移集成公司翻新推出的特色利用品牌 onecity,面对甘肃数字政府在全省范畴内多云架构,多种国产数据库和开源数据库的对立运维治理挑战,构建了混合云环境下多种数据库的生命周期对立经营治理架构,引入支流国产及开源数据库在跨云跨平台环境下的对立运维技术,造成数字政府核心层数据层的一体化交付计划,规范化自动化的运维大幅升高了运维人员工作压力。

知乎数据库负责人代晓磊 带来了题为 《知乎分布式数据库上云实战》 的主题演讲。知乎作为中国互联网高质量的问答社区和创作者汇集的原创内容平台,在各个业务线超大数据量的存储选型方面有很多教训,数据库到底是跑在云上还是裸金属部署?知乎作为国内较早实际 k8s 的互联网公司,也比拟早的将分布式数据库 TiDB、Redis 等数据库上云。本次分享,代晓磊解读了如何为适合的场景抉择适合的数据库以及一些云上踩坑教训分享。

道足以忘物之得春,志足以一气之盛衰。”数据库倒退的路线曾经前进五十余年。半个世纪间,有数风云人物率领一代又一代数据技术从业者,勇面挑战、克服困难、继续翻新,以不灭的奋斗精力,推动着技术倒退过程。现如今,咱们曾经看到漫天星光在各自的畛域璀璨闪耀、斗艳争辉,数据库的中国时刻,曾经到来!将来盛世,DTC 与君同行。


特地鸣谢

在此感激:盖国强、李冬、李国良、李飞飞、庄乾锋、王义成、阳振坤、张程伟、金毅、张焕晨、冷建全、刘松、郭茁、周日明、于涛、杨辛军、魏可伟、叶正盛、刘宇、周彦伟、李士福、巩飞、徐戟、刘力鹏、阿尔曼、朱彬、韩锋、李昆、明玉琢、张俊喜、娄帅、黄凯耀、张亮、唐建法、冯若航、张绍勇、张雁飞、李俊、杨文波、Jason Li、胡亚凡、朱国云、周研、伍旭飞、孙宇熙、孔再华、刘晨、王辉、周明媛、易鸿伟、刘梦醒、陈炜、廖浩均、韩笑、王云龙、张桦、林晓斌、周跃跃、叶建林、姚延栋、王春玲、姚艳玲、杨廷琨、杜华兴、徐培、刘欢、李传猛、朱乐齐、代晓磊(排名不分先后)整体演讲嘉宾的倾力付出与精彩分享!

感激工业和信息化部电子五所的领导!感激云和恩墨、华为云、阿里云瑶池、OceanBase、腾讯云数据库、openGauss 社区、南大通用、星环科技、万里数据库、KaiwuDB、金篆信科、亚信科技、涛思数据、人大金仓、PingCAP、矩阵起源、科蓝软件、创邻科技、红象云腾、本原数据等合作伙伴,以及中国 IDC 圈、DOIT、CSDN、科技中国、企业网 D1Net、博文视点、TiDB 社区、StoneDB 社区、IT 西方会、DataFun、OSChina 等泛滥媒体、社区、出版社对第十二届数据技术嘉年华流动的大力支持!

感恩数据技术路上有你同行!

这一番暂且别罢,来日期江湖重逢。

敌人们,明年见!

2023 数据技术嘉年华(DTC)官网:https://www.modb.pro/dtc2023

  • 视频回放:https://www.modb.pro/course/185
  • PPT 下载:https://www.modb.pro/topic/622616

欲了解更多可浏览墨天轮社区,围绕数据人的学习成长提供一站式的全面服务,打造集新闻资讯、在线问答、流动直播、在线课程、文档阅览、资源下载、常识分享及在线运维为一体的对立平台,继续促成数据畛域的常识流传和技术创新。

正文完
 0