概要
2021 年 12 月 13 日,中国信息通信研究院新一轮“大数据产品能力评测”后果颁布,阿里云实时计算 Flink 版通过分布式流解决平台稳定性专项测评,阿里云成为「首批 + 惟一」通过该稳定性专项评测的厂商。此前,实时计算 Flink 版别离在 2019 年 5 月和 2021 年 6 月通过中国信通院“分布式流解决平台 - 根底能力测评”和“分布式流解决平台 - 性能专项测评”,因而阿里云实时计算 Flink 版成为 国内惟一全面通过中国信通院根底能力、性能、稳定性三款评测的分布式流解决平台产品。
评测详情
近年来,“中国信通院大数据产品能力评测”作为国内首个大数据产品权威评测体系,已成为厂商产品研发和用户洽购选型的风向标。本次阿里云实时计算 Flink 版在稳定性专项性能测评中,通过了 CPU 高负载、硬盘高负载、内存高负载、读写高负载、网络丢包、单节点故障、随机高强度综合测试等 7 个子我的项目评测。其中 CPU 高负载、硬盘高负载、内存高负载、读写高负载、网络丢包 这五种状况下作业主动适应环境,从而安稳运行;单节点故障、随机混合测试中 作业均从故障中实现主动复原,并继续运行直到计算工作实现。面对小规模硬件故障和简单网络环境,实时计算 Flink 版体现出极高的架构健壮性,继续向用户提供稳固的企业级服务。
技术劣势
实时计算 Flink 版产品在阿里巴巴团体各类大促环境中早已有广泛应用,在天猫双十一购物节和 618 等重大电商流动中都体现出卓越的能力。往年的双十一购物节期间,Flink 实时计算的算力总 TPS 达到惊人的 69 亿条每秒,GMV 大屏提早在 3 秒以内。2021 年实时计算 Flink 版成为中国惟一进入 Forrester 强劲表现者象限的产品,刷新了国内公司在数据流计算畛域的最好问题。
阿里云流计算产品进入 Forrester 数据流剖析报告
产品劣势
作为国内最早布局实时计算技术方向的企业之一,早在 2016 年阿里巴巴就曾经开始大规模上线应用实时计算产品。本次通过测试的阿里云实时计算 Flink 版,是阿里云 Flink 企业级开发运维平台和增强型内核引擎所形成的云上产品。实时计算 Flink 版产品绝对于开源 Apache Flink 领有更具劣势的性能和稳定性,开箱即用,同时企业级加强性能集成阿里云加强的 Iceberg、Hudi 等数据湖格局能力,不便用户构建大规模数据湖。
实时计算 Flink 版还领有 丰盛的作业运行监控与诊断调优能力,能够为用户提供状态兼容性检查和状态数据迁徙,以最大可能的复用原来的状态数据,帮忙用户疾速降级 SQL 作业。同时反对算子级别的精细化资源配置(CPU/Mem),大规模作业资源利用率进步 100%+。
在产品状态层面,实时计算 Flink 版向用户提供灵便的产品状态以供选择。不仅反对适宜用户开箱即用的全托管状态,帮忙用户疾速落地流计算的开发运维,同时也反对用户自主可控、易于集成的半托管状态(基于 Yarn 资源分配调度),包年包月模式与用户自建成本统一,帮忙用户实现一站式实时数据流解决的基础架构(蕴含 Kafka 和 企业版 Flink 引擎 VVR)。对于资源绝对变动较小的状况,能够抉择包年包月。对于资源不好明确评估或有业务高下峰变动的,能够抉择按量付费 + Autopilot 模式实现 serverless 的“用多少买多少”。
实时计算 Flink 版产品在阿里巴巴的倒退历程
客户案例
目前阿里云实时计算 Flink 版曾经积淀了互联网娱乐,在线交易,金融,在线教育等近百个行业案例场景,多行业全方位实际场景,为业务稳固倒退保驾护航。
实时计算 Flink 版局部客户案例