关于大数据:再拔头筹FusionInsight为华为云大数据打造硬实力

3次阅读

共计 4236 个字符,预计需要花费 11 分钟才能阅读完成。

摘要:在 IDC2020 大数据报告中,有云服务厂商、传统 ICT 厂商,以及大数据时代的创企等三类“玩家”,为何华为云可能怀才不遇?

近日,IDC 公布《IDC MarketScape: 中国大数据管理平台厂商评估,2020》报告。该报告从能力、市场、策略三大维度对中国支流大数据厂商进行全面评估,报告显示华为云位居“领导者(Leaders)”象限,并在市场份额和技术实力两个维度双当先。

能够看到,在 IDC 大数据报告中,有云服务厂商、传统 ICT 厂商,以及大数据时代的创企等三类“玩家”。为何华为云可能怀才不遇?

解读华为云 FusionInsight 智能数据湖五大硬核能力

据理解,华为云 FusionInsight 智能数据湖五大硬核能力凸显了翻新技术。

硬核能力一:让政企客户在一个大、快、融、稳的数据湖架构下可继续演进!

大:传统的大数据单集群扩容受限,往往扩容到 2000 节点就难以冲破,华为云 FusionInsight 通过大集群冲破扩展性瓶颈,反对最大 2 万 + 节点大集群,还可集群联邦有限扩容。此大规模个性已在华为外部取得了实际,华为云流程 IT 通过 FusionInsight 构建 OneData 大数据集群,其规模已至 1 万 + 节点,撑持各部门经营剖析、即席查问等大数据分析,每日新增数据近 100TB,10 万张表,即席查问工作日均 1 万 +,批处理作业每日 10 万 +。华为流程 IT OneData 大集群历经两次滚动降级,业务 0 中断,已稳固运行六年。

快:因数据量仍在一直指数级增长,人们对大数据高效解决的极致谋求永无止境!传统大数据存在剖析链路长,以 T + 1 预先报表为主。华为云 FusionInsight MRS 可 T + 0 实时增量更新和实时 OLAP,让大数据越用越”快“!华为团体 IT 基于 FusionInsight,实现了 CDC+FLINK 的实时集成计划,撑持了骨干交易、财经、供给等交易数据的增量整合模型落地,绝对于传统数仓的 ETL+ 调度计划,数据供应效率晋升了 10 倍。

融:传统大数据分析面临类型多、散布散、协同难等问题;FusionInsight 通过 HetuEngine 实现五大交融,对立 SQL 接口仅用简略的 SQL 就可操作 PB 级数据,全民 BI,让大数据越用越简略。某行基于 FusionInsight 构建金融大数据,通过 HetuEngine 对立 SQL 接口,解决数据扩散,组件多、语言多等难题,升高技术开发门槛,跨源跨域跨引擎交融剖析,数据免搬迁,升高整体 TCO。

稳:FusionInsight 可保障一企一湖连续性,在线滚动降级,业务永远在线,无需拆集群、搬利用,彻底解决传统大数据集群多、效率低、治理难、降级难等问题,让降级过程中要害业务不中断,确保业务连续性。某运营商应用 FusionInsight 搭建了大数据平台应答 5G 数据浪涌,先后两次滚动降级实现了大数据平台的平滑演进,实现业务无中断,降级无感知,用户体验继续在线,单集群规模已扩大至 1500+ 节点,撑持了各类政务、游览、精准扶贫等 200+ 大数据应用服务,笼罩用户 1.3 亿 +。

硬核能力二:实时数据湖

为了实现实时性,华为云 FusionInsight 提出了实时数据湖,反对数据实时批量入湖、实时增量同步,全量数据供给效率 T +0;可对贴源数据实时多维分析,缩短剖析链路,进步剖析效率,让数据价值近在眼前!

硬核能力三:云原生数据湖

近几年,云原生是云计算畛域要害的技术创新,华为云在云原生畛域也摸索多年,通过 Data Lake Catalog 数据湖目录,为超大规模剖析引擎提供对立元数据服务,让数据全局可视可得;在数据存储方面,通过 OBS 存算拆散计划,实现计算、存储按需扩容,基于企业级 EC 实现最低 1.2 正本,总体 TCO 降落 20%+,让数据每 bit 老本更优。

湖内提供交互式剖析引擎,可无缝对接 BI 报表和自助剖析,实现秒级用数,数据免搬迁;湖内对立 SQL 接口,升高技术开发门槛,简化用数,实现技术当先的云原生数据湖。

硬核能力四:企业级数据仓库

华为云 FusionInsight 为客户提供基于 Shared-Nothing 架构提供新一代凋谢的、全场景剖析型数据仓库 DWS,反对 2048 节点扩大能力;多层级全并行计算引擎,可调度海量的算力资源,通过高效的指令效率,实现数据导入和剖析;具备多层级容灾能力,稳固牢靠,离线、半在线、在线扩容技术,从容应对多种扩容场景。

硬核能力五:一站式数据湖治理核心

华为云 FusionInsight 为客户提供一站式数据湖治理核心,助力企业疾速构建从数据接入到剖析的 E2E 数据治理体系,对立数据规范,减速数据资产化。通过全域数据视图对立信息架构,对立数据规范;通过一站式全栈平台实现 30+ 异构数据源的高效数据集成;领有凋谢齐备的平安体系,数据分级分类,对立平安认证。

通过以上五大“硬核”能力的加持,华为云 FusionInsight 新一代的数据湖,让大数据越用越快、越用越易、越用越稳、越用越省!

技术产品好不好,要用案例来谈话

事实上,华为云这种“稳固第一”的体现,在很多权威榜单中也有体现,例如间断四年上榜工信部中国大数据企业 50 强,间断三年入围 Gartner Magic Quadrant for Data Management Solutions for Analytics,在中国区厂商排名第一。

在技术受到权威机构认可的同时,华为云 FusionInsight 也是“最懂行”的大数据解决方案。截至 2020 年 6 月底,华为云大数据已服务了 60+ 个国家和地区、3000+ 客户,笼罩政府、金融、运营商、电力、医疗、制作、互联网等泛滥行业。

在政府畛域,国内 50% 的智慧城市都有华为云 FusionInsight 的手不释卷的身影,华为云大数据已撑持多个部委和各省市地区建设“大数据 + 政务”。

在某市,华为云 FusionInsight 联结搭档建成“一云二网三平台”,在对立的政务数据逻辑模型的领导下,针对民生、产业、政府的“痛点”和“难点”,从构建城市数据资源库为开始,以大数据分析撑持政府智慧决策,以建设智慧利用为抓手,突破信息孤岛,实现信息资源替换共享,在“数聚惠民”、“数聚兴业”、“数聚善政”三大方面,施展大数据的威力,撑持“一号、一窗、一网”政务服务,让简政放权、百姓办业务“最多跑一次”成为事实。

在金融畛域,国内 50% 的 TOP20 金融客户(含银行、证券、保险等)均已应用华为云 FusionInsight 构建其大数据平台。某行应用华为云 FusionInsight 构建大数据根底平台,撑持了银行企业级数据湖、数据仓库、团体信息库为外围的“一湖两库”建设,承载了总行及各支行业务零碎,撑持日常银行 BI、AI、数据挖掘、数据分析等,实现了一份数据全局可用,罢黜数据搬迁,晋升协同效率 10 倍,存储周期晋升 2 倍,资源利用率最大可达 90%,减速银行数字化转型过程。

在运营商畛域,国内三大运营商均应用华为云 FusionInsight 构建其大数据平台。广东挪动基于华为云 FusionInsight,联结政企客户独特打造智慧电网、智慧交通、智慧港口、高清视频等系列标杆利用,买通数据全生命周期链路,实现对内业务撑持、对外利用赋能,全面撑持了各类政务、民生等大数据应用服务。

在交通畛域,深圳地铁在 6、10 号线采纳华为云 FusionInsight 构建大数据分析平台,打造当先的 5G+ 大数据计划,并构建其数据资产核心和运行监控核心,承载地铁各业务零碎,撑持设施衰弱、能耗治理、客流统计、线路核心级监控、应急决策和图像型火灾剖析等线路级数据分析,数据分析效率从周级缩短至分钟级,实现高效经营,推动深圳步入更美妙的全联接数字化轨道交通新时代…

以及在环境保护方面,青海绿能数据有限公司基于华为云 FusionInsight 构建了国内首个能源大数据翻新平台,实现了布局辅助决策、用气象数据迷信领导发电等翻新业务,为上下游产业链企业提供 25 类 47 项数据服务,推动 28 座新能源场站实现了“无人值班、少人值守”,并无效撑持了青海“绿电 15 日”,以大数据为基石,建设绿色新青海,守护高原谐和生态。

同时,华为保持“本人的降落伞本人先跳”,华为团体 IT 通过 FusionInsight 构建 OneData 大数据集群,实现大数据平台在大规模场景下的开辟,OneData 集群其规模已至 1 万 + 节点;同时,实现了对立的数据管理服务,在菩提海 UniDB 产品中,通过逻辑对立形式,把 50+ 物理扩散的计算集群 (Hadoop+MPP),基于五对立(数据安全,元数据目录,数据集成,数据拜访,任务调度),整合成湖仓一体的架构,撑持上千个企业租户的 PB 级数据分析解决需要。一个基于 FusionInsight MRS+DWS 的“+ 治理,+AI,+ 经营,+ 云”的交融数据底座(菩提海) 曾经在华为团体 IT 宽泛应用,将来可期!

以上只是“冰山的一角”,华为云 FusionInsight 一方面不断深入了解客户一直倒退的业务诉求,另一方面,继续技术创新并引领行业倒退,商业诉求 + 技术创新双轮驱动行业可继续、高质量倒退,“用数”助力客户商业胜利!下面的阐述曾经充分证明,华为云是“懂行”的大数据领导者,真正让客户用好数、管好数、释怀用!

底子硬才是真的硬道理

能够看到,无论是技术实力还是市场体现,华为云都做到了行业第一。

那么,在已有的问题背后,华为云是否“守得住”?这方面,从已有的动作看,差异化这个次要的特色之外,华为云维持本身位置还有三个方面的竞争劣势。

1. 长期的技术积淀

华为云 FusionInsight 大数据自 2009 年就开始投入钻研,最早在 2014 年推出商用产品,当初,MRS“大快融稳”的云原生数据湖、DWS 企业级数据仓库以及一站式数据湖治理核心 3 项硬核能力都建设这样的长期积攒之上,不足技术积攒和了解的平台显然无奈实现这样的降级。

2. 对行业、对业务、对企业理论的了解

大数据服务必须建设在业务深度了解的根底上,而这不是久而久之能实现的,须要靠一直的摸索和磨合。华为的市场第一既是一种竞争后果,也代表着它领有最宽泛和深度的业务实际机会。

3. 丰盛而深厚的生态单干

当下,华为云积攒了从基础设施到剖析利用等畛域的合作伙伴群体,包含多行业 800+ISV 等,当初,其为合作伙伴提供了 100+ 凋谢 API 接口,技术生态化带来的大数据利用将更加丰盛。

能够看到,三个都须要工夫和教训积淀的劣势,让华为云大数据有了既深且宽的竞争“护城河”。

点击关注,第一工夫理解华为云陈腐技术~

正文完
 0