关于程序员:华为云大数据企业的寻宝鼠

39次阅读

共计 1780 个字符,预计需要花费 5 分钟才能阅读完成。

何为华为云 FusionInisght 智能数据湖?有什么用,真的是企业“寻宝鼠”,上面听我一一道来。

华为云 FusionInisght 智能数据湖 为企业客户提供残缺的大数据云服务产品组合,有单集群最大反对 5W 节点的云原生数据湖 MRS 服务和寰球最大的商用部署的云数据仓库 DWS 服务,MRS 和 DWS 既能够灵便按需部署,也能够交融演进到湖仓一体的架构; 同时面向一直增长的数据摸索剖析、新型的图剖析、可信计算等诉求,提供了齐全托管式的 DLI 数据湖摸索服务,齐全自研的高性能一体化的 GES 图计算服务、翻新的可信智能计算服务 TICS,并提供源自华为本身数字化转型教训积淀的 DGC 数据湖治理核心服务,用于海量数据的数据治理、离线剖析、实时剖析、数仓集市、多模剖析等场景,帮忙客户构建一站式的大数据分析平台,开释企业数据价值。

产品劣势

离线数据湖 :提供交互式、BI、AI 等多个计算引擎,基于云原生存储实现存算拆散架构,使得云原生数据湖的架构更灵便,业务更麻利。同时还反对单集群 5 万(通过集群联邦,反对 10 万 + 规模) 节点的超大规模,反对集群滚动降级,保障要害业务降级不中断。

实时数据湖:提供生成数据 CDL 实时捕捉入湖、Hudi 数据湖存储引擎、ClickHouse 毫秒级 OLAP 剖析等构建实时更新解决能力,使得供数时效从 T + 1 到 T +0。

逻辑数据湖:HetuEngine 提供跨湖、跨仓、跨云的协同剖析,实现湖仓一体,缩小 80% 数据搬迁,协同剖析提效 50 倍。

计划架构:

华为云 FusionInsight 智能数据湖实现了数据采、存、算、管、用全生命周期治理,反对最大 2 万规模集群的装置部署,滚动降级,业务不中断,技术永新;1000+ 精细化、可视化运维指标,提供高牢靠、平安、容错、易用的集群治理能力。

1、MRS 云原生数据湖

一个架构可构建逻辑、实时、离线三种数据湖,为政企客户提供湖仓一体、云原生的大数据解决方案。蕴含 Spark、ClickHouse、HetuEngine、Hive、HBase、Hudi 等组件,撑持政企客户全量数据的实时剖析、离线剖析、交互查问、实时检索、多模剖析、数据仓库、数据接入和治理等场景。

2、DWS 云数据仓库

一款具备剖析及混合负载能力的分布式数据仓库,提供 PB 级数据分析、多模剖析和实时处理能力,用于数据仓库、数据集市、实时剖析、实时决策和混合负载等场景,广泛应用于金融、政府、电信等行业外围剖析零碎。

3、DGC 数据湖治理核心

数据全生命周期一站式开发经营平台,提供数据集成、数据开发、数据治理、数据服务、数据可视化等性能,反对行业知识库智能化建设,反对大数据存储、大数据计算剖析引擎等数据底座,帮忙企业客户疾速构建数据经营能力。

4、GES 图引擎

超大规模一体化图查问与剖析服务。30+ 高性能算法笼罩多场景,反对百亿点、千亿边秒级查问。广泛应用于社交利用、企业关系剖析、风控、举荐、防欺诈等具备丰盛关系数据的场景。

利用场景:

1、在金融畛域,华为云 FusionInsight 在工商银行、建设银行、招商银行等银行、证券、保险行业广泛应用。通过华为云 FusionInsight 开展大数据联创,通过 HetuEngine 实现 13000+ 分析师即时 BI 新体验,能够大数据容灾、云原生、数据实时入湖等方面开展联结翻新。

2、在运营商畛域,华为云 FusionInsight 已笼罩国内三大运营商以及海内运营商客户。某通信运营商基于华为云 FusionInsight,联结客户独特打造智慧电网、智慧港口、高清视频等系列标杆利用,买通数据全生命周期链路,实现对内业务撑持、对外利用赋能,全面撑持了笼罩 1 亿 + 用户的政务、民生等大数据利用和服务。

3、面向大企业客户,笼罩能源、交通、制作等行业客户大数据平台建设。某城市地铁采纳华为城轨云解决方案,利用云计算、大数据、人工智能等技术外围,建设了对立、凋谢、智能的城轨数字平台,利用华为云 FusionInsight MRS 云原生数据湖能力构建深圳地铁大数据分析平台,在智慧车站、智慧运维方面,对新技术与地铁场景进行翻新交融,推动了车站业务全日主动运行、线上线下一体化客服、设施被动检测、衰弱治理等利用,摸索数字化、高效化的新业务模式,为城市提供更优质的公共交通服务。

本文由博客群发一文多发等经营工具平台 OpenWrite 公布

正文完
 0