共计 4038 个字符，预计需要花费 11 分钟才能阅读完成。
每天，咱们都会遇到一些没有答案的问题，比方：宇宙中有多少颗行星？
这个问题没有最终答案，毕竟，仅仅是咱们所在的银河系就有 60 亿颗类地行星。
而在阿里云智能资深产品总监、阿里云存储产品负责人 Alex Chen 看来，明天人类生产生存中所产生的数据就像浩瀚的宇宙：数据量大，且一直收缩；暗藏着诸多难以预感的危险；同样受到引力的解放。而每一家企业都像一艘宇宙飞船，当飞翔在浩瀚的宇宙中时，须要卓有成效的措施去应答一直疾速收缩的数据、屏蔽各种危险和抗衡各种劫难、解脱数据引力解放实现宇宙速度以及发现数据内暗藏的价值。
一、冷热数据分层、施展规模效应，帮忙客户降本
这是一个数据爆炸性增长的年代。据 IDC 公布的报告显示，中国数据量规模将从 2022 年的 23.88ZB 增长至 2027 年的 76.6ZB，年均增长速度 CAGR 达到 26.3%。如果对如此宏大的数据进行分类的话，能够分为须要实时拜访的在线数据和不须要实时拜访的离线数据（比方归档类型的磁带库）。
目前，阿里云对象存储 OSS 上曾经存储了数十 EB 的数据，网盘与相册服务 PDS 为夸克、UC、阿里云盘、中国移动云盘等产品提供数据存储服务，累计服务 8 亿终端用户。为了更好地帮忙客户治理这些数据，对象存储 OSS 提供了 5 种存储类型。在线数据能够放在 OSS 的规范 / 低频 / 归档类型中，离线数据则适宜放在 OSS 的冷归档 / 深度冷归档类型中。
此前 OSS 归档类型中的数据在读取时须要冻结，但归档直读能力的公布，使得冻结的步骤能够省去，间接对数据进行拜访。当须要对数据进行生命周期治理时，能够基于最初一次批改工夫（Last Modified Time）以及最初一次拜访工夫（Last Access Time）的策略创立生命周期规定，定期将存储空间（Bucket）内的多个文件（Object）转储为指定存储类型，从而节俭存储费用。此外，OSS 归档类型还新增了同城冗余规格，进一步晋升了数据可靠性。
近期，阿里云存储公布了 OSS 深度冷归档类型，目录价仅为 0.75 分 /GB/ 月, 是靠近磁带库的价格，并且可反对百 TB/ 日冻结能力，无需简短的冻结工夫。
二、全方位的数据保护，应答多种平安威逼
安全可靠是云存储立身之本。为了防备勒索病毒、系统故障、自然灾害、运维事变导致的数据失落和损坏问题，须要在云上和本地的数据中心做对立的数据保护。通过 ECS 快照和混合云备份 HBR，能够为整机 / 云盘 / 文件 / 数据库等提供备份、容灾爱护。
同时，HBR 提供了备份不可篡改的能力，给备份数据多一层爱护；还能够将备份数据进行冷热分层，在保留时长满足审计需要的前提下，达到降本增效的目标。当波及到多账号时，客户能够不便地将快照共享给其余受权用户，也能够应用 HBR 进行跨账号的备份。
为防止 region 级别的劫难，必须做跨区域的复制。对象存储 OSS 就有从一个 region 到另外一个 region 的 replication time control，即十分钟之内这个 object 能够异步复制到另外一个城市，比方从北京复制到广州。块存储 EBS 也具备同样的异步复制的能力。
往年，阿里云所有的快照、备份库都逐渐具备了同城冗余的能力。数据可别离寄存在 3 个数据中心，当其中 1 个数据中心产生故障时，仍能在其余数据中心读取快照和备份数据，让企业以最低的老本去实现高可用。
在对象存储 OSS 中，有基于组织、用户和资源的拜访策略。企业能够采取 Access Point 简化共享数据的权限治理复杂度，通过 Control Policy 设定平安基线进行管控，各业务部门应用 OSS 必须强制加密、强制指定 TLS 版本拜访，并设置针对 VPC 的拜访管控，强制 ACL 设为公有，避免 OSS 上数据透露。
三、存算拆散，为场景化性能减速
在不同业务场景下，企业对性能的要求也不一样。一些企业应用负载（比方 OLTP、Web 缓存等场景）因为更加凑近利用的前端，会更加重视实时性，对提早特地敏感；而绝对靠后端的大数据分析场景则对带宽的需要更高，提早敏感性绝对较低。
1、电商场景：ESSD AutoPL 规格，引领 IO 性能弹性新方向
在 Severless 时代, 存储须要智能适配负载变动。四年前，阿里云公布了百万 IOPS 的 ESSD 云盘。它基于全新一代自主研发的分布式存储引擎盘古 2.0，实用于时延敏感的利用或者 I/O 密集型业务场景（如大型 OLTP 数据库）。以典型的电商业务为例，性能 / 容量耦合设计有以下挑战：
- 日常流量与业务洪峰差别微小，平峰期间利用率低，存在大量资源节约；
- 大促期间业务峰值工夫短，且难以评估峰值需要，存在业务受损的可能。
为此，阿里云推出了面向“Serverless”时代的 ESSD AutoPL 云盘，在放弃 ESSD 云盘原有性能与性能的同时，实现了云盘容量与云盘性能的解耦。用户能够在配置 ESSD AutoPL 云盘容量的同时，依据业务需要自定义云盘的预配置性能和性能突发，轻松应答电商日常经营、秒杀促销流动等多种简单场景。识货 APP 就通过采纳 ESSD AutoPL 云盘，完满解决双 11 流量洪峰问题的同时，老本相较于全副降级到 PL2 云盘低 42%，且无需长期保有。
2、数据湖场景：存算拆散架构下的性能最优解
后面说到，大数据分析场景有更高的带宽需要。OSS 高吞吐和低延时的服务响应能力可能无效反对各种热点类型数据的拜访。为了满足更高的吞吐要求，OSS 还推出了 OSS 加速器性能，它能够缓存 OSS 中的热点对象，实用于基因训练、机器学习、大数据计算等须要大带宽且数据反复读较多的场景。
OSS 加速器是一个规范的服务端缓存服务，和计算齐全解耦。同时，基于 OSS 智能元数据架构，OSS 加速器提供了传统缓存计划不具备的强一致性，当 OSS 上文件被更新时，加速器能自动识别，确保引擎读取到的都是最新数据。
在数据湖场景中，数据流动的前提包含协定上的兼容和元数据的兼容，因而多协定的拜访不可或缺。对象存储是扁平化的元数据架构，一个 Bucket 里可能有十亿个文件，解决元数据（如文件重命名）时将消耗大量工夫。作为云原生数据湖根底，OSS-HDFS 全面交融大数据存储生态，除提供对象存储扁平命名空间之外，还提供了分层命名空间服务。分层命名空间反对将对象组织到一个目录层次结构中进行治理，并能通过对立元数据管理能力进行外部主动转换，大大缩短了数据处理链路。
3、模型训练场景：CPFS 减速 AI 翻新
不论是以后煊赫一时的 AIGC，还是主动驾驶，都离不开 AI 训练。大规模的多机多卡并行训练须要高性能文件系统撑持训练过程中对数据的大吞吐读写需要。
阿里云存储自 2018 年开始大规模应用 RDMA 技术，并自研了 Solar-RDMA 协定，提供稳固的高性能存储网络。CPFS 先进的元数据和数据全并行架构，能够充分利用端到端的 RDMA 网络劣势，实现 I/O 减速，使 PAI- 灵骏智算训练效率晋升 3 倍。
文件存储 CPFS 曾经实现与 OSS 之间数据双向便捷流动。在进行 AI 训练时，可将数据寄存在 OSS 中，通过预处理后 Lazyload（延时加载）至 CPFS 训练，后果数据流动回 OSS 长久保留，升高数据长期存储老本。
4、高性能计算场景：弹性文件客户端助推云原生算力晋升
在 Serverless 时代，传统文件存储须要向着高密、弹性、极速演进。阿里云文件存储推出弹性文件客户端（Elastic File Client，简称“EFC”），翻新的端接入技术实现了高密计算端的稳固链接、性能随计算规模弹性伸缩和极速挂载能力。
弹性文件客户端的元数据缓存能够将共享文件存储 NAS 的日常元数据操作减速 10 倍，4K 的小文件关上读的速度晋升 5 倍，靠近本地 EXT4 的程度。翻新的多客户端间 Lease 技术，保障了引入缓存减速后，仍能无效反对多客户端间的数据强一致性，保障 AI 并行训练的后果正确性。分布式数据缓存实现了吞吐性能随着计算集群的扩容而同步晋升，冲破文件存储的吞吐下限。
此外，EFC 还通过 CNFS 和 Fluid 与阿里云 ACK、ASK、ECI 集成，即开即用，可完满匹配科研、工业仿真、AI 训练等畛域的高密度计算需要，晋升数据处理效率。
四、全链路可观测精准查问，晋升运维效率
云计算未然成为新时代的水电煤，须要正当地应用和治理云资源。应运而生的 Alibaba CloudLens，包含用量剖析、拜访剖析、异样检测、平安剖析、性能监控、数据保护六个模块，让企业在保障业务敏捷性的前提下，实现对 OSS/SLS/EBS/ALB 等云产品的精细化运维剖析，帮忙客户疾速构建云产品的可观测能力、用好云。
在千行百业的数字化改革中，越来越多的企业抉择在云端构建 IT 零碎，进步问题诊断速度、故障排查效率非常有必要。Logs、Traces、Metrics 作为 IT 可观测性数据的三剑客，根本能够满足各类监控、告警、剖析、问题排查等需要。日志服务 SLS 作为云原生观测剖析平台，可对 Log、Trace、Metric 等数据进行对立存储和交融剖析，并内置主动巡检、异样实时告诉、根因定位等性能，帮忙企业疾速排障。
要晋升数据审计、监管场景下的运维效率，元数据索引能力的增强势在必行。对象存储 OSS 通过为 Bucket 创立并保护独立的元数据管理库，并提供 9 大类元数据筛选条件，联合 5 种聚合输入形式，帮忙用户在数十亿的文件中，实现秒级的数据疾速索引与聚合。此外，当有新文件上传至 OSS 中，可在 10 秒钟内自动更新至索引池。
在分享的最初，Alex 也代表阿里云正式发表首届数据洞察翻新挑战赛即日启动，大赛分为智能运维赛和数据管理翻新赛两个赛道，设立初赛、复赛、决赛三个环节，每个较量有相应的赛题，依据参赛选手提交的代码品质来评定。开发者可收费加入，总奖金池高达 20 万元！（点击这里，立刻参赛）
数字化迈向智能化，是云计算新一轮改革的主线。在企业数字化转型的路线上，阿里云存储将继续践行“稳固平安高性能，普惠智能新存储”这一理念，帮忙企业打开数字翻新的下一篇章。
点击立刻收费试用云产品 开启云上实际之旅！
原文链接
本文为阿里云原创内容，未经容许不得转载。
