共计 3791 个字符,预计需要花费 10 分钟才能阅读完成。
2017 年,VMware 公布了 VMware Cloud on AWS,吹响了公有的基础架构云厂商进驻私有云,并为私有云用户提供基础架构服务的号角。这是一个标志性的事件,一方面,表明私有云基础架构服务的灵活性、重要性岂但被越来越多中小型用户认可,同时,也失去了以 VMware 为代表的公有云行业龙头企业的认可和关注;另一方面,反馈出私有云提供的基础架构服务在某些场景下,须要其它基础架构供应商进行补充,从而满足差异化的市场需求。
在虚拟化、混合云的计算畛域,有相似 VMware 这样的厂商,为用户提供运行在 AWS 环境中的 VMware 软件服务,同样地,在数据拜访和治理方面也是如此。近些年,呈现了泛滥存储软件厂商,将他们的软件部署到私有云上,为私有云的用户提供基础架构层面的数据存储和治理服务,为私有云原生的存储服务进行了无益补充。在 Gartner 2019 年公布的混合基础架构服务能力成熟度曲线上,首次呈现了混合云存储技术。Gartner 认为,以新技术、新场景驱动的混合云存储等相干技术,在将来数年会为企业带来下一波微小的商业价值和转型劣势。
混合云存储技术,经验了若干年的倒退。起初,混合云存储只是为私有云提供的存储加上某些拜访网关,以作为数据备份的用处,用于寄存某些价值密度低的归档型数据。这些年来,人工智能、大数据、物联网等新型利用蓬勃发展,新型利用最重要的作用,就是要从大量的数据和信息中提取商业价值,这些新型利用对计算能力具备强烈要求,而本地自建计算资源弹性差、周期长、老本高,两者产生了微小矛盾,私有云成为了解决这一矛盾的无效伎俩。这些新型利用在私有云上,将不再只局限于归档这类低价值的数据,转而须要大量具备外围价值的数据,能力帮忙企业充分利用私有云上的计算劣势。因而,混合云存储成为了企业通过私有云,撬动和开掘更大商业价值的支点和杠杆。
Gartner 预测,与 2020 年相比,到 2024 年,大型企业存储在本地、边缘或私有云中的文件或对象存储的非结构化数据将减少两倍,施行混合云存储架构的企业将从 2020 年的 10%,增长到 2024 年的 40%。
混合云存储,并没有扭转存储技术服务于信息保留、拜访、为利用提供业务价值的外围实质,也没有发明出新的利用拜访接口(利用拜访还是块存储、文件存储、对象存储的接口类型),其技术的外围,在于适应云计算倒退和利用迁徙的趋势,提供更不便于利用拜访、经济效益更高的存储服务交付模式、以及数据流动的形式。
混合云文件系统市场剖析
从混合云存储提供的数据拜访接口上看,例如 Qumulo、NetApp、Nasuni 等厂商都将关注点集中到文件拜访接口,为什么各大厂商会对混合云的文件接口如此感兴趣呢?咱们认为有以下几个起因:
与私有云原生存储造成无效互补
块存储是私有云的外围基石,私有云的次要业务来源于虚拟机、云磁盘,这类业务都必须提供块存储反对,业务诉求清晰、对立,即牢靠、低延时、高 IOPS,对私有云厂商而言,容易造成规范且对立的产品,因而,以后除了一些主存储、超交融或公有云厂商在私有云上提供托管且与公有云用户体验雷同的面向块存储的产品和计划外(例如 Nutanix Xi Leap、VMware Cloud on AWS),很少第三方厂商将精力投入到在私有云上提供块存储产品。
对象存储也是私有云最早成熟的产品,例如 AWS 的 S3,简直就定义了整个业界对象存储的规范,因为不足理论的客户价值和差别点,也极少有存储技术厂商基于私有云提供对象存储服务。
反观文件存储,业务类型十分宽泛,有归档类的、在线类的。各种业务类型 IO 特色简单,例如日志写多读少、追加写多;AI 对小文件程序读、大文件随机读、高带宽、低延时的要求高;渲染类利用具备高带宽、低延时、读写混合的 IO 特点;HPC 多客户端并发读同一个文件;归档利用写多读少、要求低成本。私有云厂商自身很难通过一个对立文件系统产品满足所有利用的须要,因而私有云厂商通常的做法是,针对通用的场景和诉求,满足规范的文件拜访协定,提供 NFS、SMB 等通用的文件服务,而特定类型的场景及 IO 诉求,则为泛滥创新型存储厂商提供了用武之地,存储厂商能够基于这些场景与私有云造成很好的联合和互补。
下层利用决定 IT 基础架构
大量基于文件接口拜访数据的应用程序,是混合云文件存储生存的理论土壤。AI、HPC、大数据、渲染、PACS 医疗影像、资源勘探、基因剖析、物联网等利用,对非结构化数据通过文件接口进行存储和拜访是强需要,将文件接口转换成对象拜访接口,须要重写应用程序,带来额定的开发工作量,文件接口和对象接口在读写特点上也存在不同,例如对象存储对随机写短少反对。因而,大量的厂商致力于在计算所须要的中央,为利用提供满足利用特点的个性化文件存储产品和计划。
从基于私有云的第三方文件系统实现形式看,有以下几个代表厂商和产品:
ScaleUp 架构的文件存储系统
NetApp 基于宏大的公有环境企业级用户群体,推出了能够在 AWS 等私有云上软件化部署的产品,通过私有云上的软件化计划,可实现与企业外部 NetApp 文件系统无缝数据迁徙、备份和拜访性能,除了个别基于硬件的性能差异外,私有云的 NetApp 软件与 NetApp 设施所提供的用户体验大体雷同。NetApp 的私有云软件服务还是基于 ScaleUp 的思路,在数据规模上存在肯定局限性。
底层基于对象存储的文件拜访网关
Nasuni 的 UniFS 是基于私有云底层的对象存储,加上可配置的企业外部 Nasuni 文件缓存设施(或虚构设施),提供大容量的文件存储产品。这种产品能够满足企业日常共享应用文件,尤其是分支机构较多的企业拜访对立文件系统的须要。因为底层应用对象存储的性能和延时难以预期,企业外部常常拜访的数据,须要通过外部缓存来实现,缓存数据的规模以及企业与私有云带宽的限度,会肯定水平上影响用户实时读写数据的体验,实用于日常办公或数据备份等场景。
ScaleOut 架构的分布式文件存储
Qumulo 在私有云上提供可扩大的分布式文件系统,私有云上运行的 Qumulo 文件系统可实现与企业外部 Qumulo 文件系统的同步,提供快照等性能,从这个角度上看,补救了私有云从性能到混合云场景中的一些性能欠缺,也是近年来倒退较快的新兴文件存储厂商。
YRCloudFile 引领国内混合云存储浪潮
继国内首个进入 CNCF Landscape 的容器存储产品之后,焱融科技再次捕捉到混合云存储的技术当先趋势,于 2019 年 6 月就推出了基于私有云的 YRCloudFile 软件版本,定位在反对混合云业务非结构化数据的存储和拜访。
YRCloudFile 的混合云存储计划具备以下特点:
反对国内外各大公有云平台、本地数据中心,及边缘部署,可基于企业外部通用服务器,私有云的云主机、云盘进行部署,在 AWS、腾讯云、阿里云上提供一键化疾速部署能力,可在数分钟内为用户提供文件存储服务。
以阿里云为例,只需在阿里云 ROS 模板中简略输出 VPCID、VSwitchID、明码、受权秘钥等几个配置,即可通过 ROS 模板一键部署 YRCloudFile 平台。
可联合底层对象存储提供数据冷热分层性能,升高用户应用老本。在某 IoT 客户理论利用场景中,用户每天生成约 2TB 数据,一部分数据须要在肯定周期内保留在热数据层中,随后数据趋冷,可通过 YRCloudFile 主动下刷至对象存储。YRCloudFile 通过 4 台云主机,只需应用约 30TB 云盘,即可满足用户热数据拜访需要,联合 YRCloudFile 分层及压缩性能,第一年可为用户节约近 10 万元老本,次年可节俭约 55 万元,第三年节俭 134 万元,三年累计可节俭约 200 万元老本。
高性能个性 可满足 AI、视频渲染、HPC 等利用需要,元数据集群和数据集群可随时按需扩大,单集群可反对数百亿文件的存储。在 AWS 上,YRCloudFile 在 8 节点和 16 节点 EC2 云主机中,应用不同文件大小,拜访性能可达到线性扩大,16 节点提供高达 15GB/ s 带宽性能。
容器长久化存储反对。私有云上利用的容器化过程高于企业外部,YRCloudFile 可能为运行在私有云上的 Kubernetes 提供 CSI 和 FlexVolume 接口,反对 RWX、RWO 等读写模式,满足各种利用对长久化存储的拜访需要,并提供 PVC 配额、QoS、Resize、PV 热点监控等性能,更好地服务用户在私有云上运行的容器长久化利用。
数据跨云同步。YRCloudFile 可部署在公有云、私有云、边缘节点上,不同节点中的数据可通过 YRCloudFile 自带的同步性能实现主动同步,能够最大水平施展云上及边缘的计算能力。在渲染场景中,艺术家,只须要将素材上传至工作室的文件系统集群中,YRCloudFile 即可将数据主动同步至私有云的 YRCloudFile 集群,为渲染所需的数百台高性能计算服务器提供高性能数据拜访,渲染完结后,渲染后果可主动同步回工作室存储集群,极大晋升整体工作效率。
总结
随同着近年来私有云的疾速倒退,大量企业逐渐开始承受将 IT 投入,由传统的 CAPEX 资本型一次性收入,转化为更精细化的 OPEX 经营型收入,使私有云成为越来越多企业的抉择。然而,私有云计算资源的劣势,在不足新一代混合云文件系统撑持时,无奈失去全面开释,焱融科技帮忙客户轻松应答混合云新架构下的数据挑战,充分发挥数据价值,晋升企业效率。