OceanStor9000横向扩展文件存储概述

1、华为OceanStor 9000横向扩展文件存储概述融合扩展 简单高效非结构化数据迅猛增长海量快速2021年，超过80%的企业数据存储在Scale-out存储中相比2017年，2021年数据总量将有超过30%增长数据来源：Gartner “Critical Capabilities for Distributed File Systems 2017”行业需求带来容量和性能的挑战媒体娱乐4K、8K时代，需要数倍于传统影片的存储容量视频监控百万人口的平安城市建设，需要存储数万路视频存储生命科学每年2倍的数据增长海量数据驱动存储创新原始分布式1995互联网云存储企业级云存储高性能，应用兼容性好传统R

2、AID，无法容忍“单”点故障写多份，利用率低，容忍“单” 点故障缺乏统一、图形化管理未针对视频类应用优化，性能差EC算法，容忍多点失效，利用率高极致数据效率追求20082013OceanStor 9000 V5极致可靠节点级冗余：最大容忍4节点同时失效掉电保护，数据重启即用卓越性能1.1TB/s极致性能单节点带宽5.0GB/s灵活扩展非结构化数据存储理想选择288节点，百PB级容量扩展统一命名空间，无需管理节点面向全球，值得信赖数据来源：IDC中国外部磁盘存储市场季度报告0宕机报告0现网超过EB级容量，数万节点EB12连续12个季度销量连续增长极致可靠集群可靠性保障99.999%可靠性高效数据

3、保护全分布式架构，高可靠数据保护+1+2+3+4 N+1N+4的数据保护，最大允许4块硬盘/节点故障磁盘利用率最高达95%条带化存储，平衡利用率与可靠性N+M以6+2冗余为例12345678910数据元数据文件切分为固定大小的Chunk基于N+M构建冗余均衡分发条带卓越性能率先支持32层4K超高清编辑1.1TB/s极致性能单节点带宽5.0GB/s小文件聚合，提升读写性能直接写大文件小文件HDDEC Cache写12IO聚合34FileFileFile小文件聚合优势：高并发，降低资源消耗，存储利用率提升1倍FEDCBAFABCDE256KB *ODC全局缓存支持关键应用性能ABC应用服务器 CP

4、UMemoryNode 1 CPUMemoryNode 2 CPUMemoryNode 3全局缓存存储节点一级缓存：文件分条二级缓存：SSD三级缓存：保电缓存（NVDIMM）轮询节点连接数节点吞吐量节点综合负载CPU利用率统一单一域名，单一路径，升级扩容不改变应用访问入口自动负载均衡，避免性能瓶颈丰富5种策略，更精细化的均衡能力智能全自动化调度，无需人工干预自动迁移扩容同时，自动向空节点迁移，提升节点资源利用率秒级单节点扩容60秒完成InfoEqualizer分级实现数据自动迁移，平衡数据价值与性能热数据冷数据冷数据SSDSASSATA创建时间文件大小文件名修改时间I/O热度I/O次数访问时间

5、用户自定义生命周期管理实现数据生命周期的分级分层管理，满足应用SLA对应用透明，上层业务无感知基于预设策略，全自动化执行，无需人工干预3种磁盘介质，更丰富的存储资源8种策略模板，更精细的迁移粒度丰富灵活SASSATASATA弹性扩展超大集群统一管理288节点超大集群性能容量线性增长全对称架构支持海量数据存储单一文件系统140PB级扩展简化存储资源分配与管理天然支持自动精简配置增强存储利用率线性增长随节点数的增多，容量、性能线性增长容量、性能线性增长容量 140PB性能 1.1TB/s36144288全对称架构，并行访问简化管理，高效数据保护00:0000:00只读权限自定义WORM时钟管理员权

6、限100TB30TB40TB5TB15TB10TB5TB无I/O挂起，系统性能“0”影响手动快照、定时快照（支持按天、按周、按月）快照远程复制WORM配额管理一对多、多对一复制全量、增量复制复制任务实时监控支持单独的WORM时钟子目录自动获取父目录的WORM属性匹配复杂的“组织架构”，空间灵活分配支持NIS, AD, LDAP域控InfoStamperInfoReplicatorInfoLockerInfoAllocator超大集群统一管理1套管理软件：存储节点、网络设备、软件统一管理2种系统资源：物理资源和逻辑资源4种告警方式： E-mail/声音/短信/指示灯5大审计功能：统计报表、监控分

7、析、趋势预测、性能对比、诊断分析存储节点网络设备软件性能统计监控分析告警1分钟上手，3分钟熟练面向海量数据存储，为您的应用量体裁衣媒体娱乐视频监控卫星测绘基因测序石油勘探科研教育视频监控轻松扩展的视频云解决方案视频、图片统一资源池率先支持SMR硬盘，超强扩展同时支持自研或第三方流媒体软件InfoRevive视频修复技术可靠性达99.999%文件聚合，千亿图片秒级检索高带宽，单节点可支持1600路视频录入，单节点图片性能最高可达7000张/秒突破海量文件存储性能瓶颈，千亿级图片秒级检索无阻塞校验单节点承载视频路数提升4倍文件聚合2X小I/O聚合成大I/O，每节点每秒写入文件数提升2倍4XP36A

8、：写删读比例1:1 :0.2（纯小图，写+立即读:删:读=1500+1500:1500:300）OceanStor 9000 V5 分布式文件存储单节点最多接入1600路高清视频不丢帧OceanStor分布式存储助卡塔尔哈马德国际机场更安全平均每节点视频（路）华为 OceanStor 9000 V5Vendor A1600533291108主存储OceanStor 9000 V513000路高清视频未来5年，10PB扩展至69PB容量NVR存储X备存储双码流最大最小4525系统带宽（GB/s）媒体娱乐数据量不断增长的媒体内容库全IP化不改变现有组网，快速部署。统一资源池提供一个资源池支持全媒体

9、业务流程。卓越性能InfoTurbo技术提升性能，业界首个支持2层8K编辑的存储系统。业界首个支持32层4K编辑的存储系统 文件 当前读取位置下次读取位置当前读取位置下次读取位置图例： 已读取数据 预取数据Cache未命中，出现丢帧/花屏Cache命中，视频编辑画面连续，快速响应一个客户端、一条链路、一个服务端“一个客户端、多条链路、多个服务端”,打破网络链路和单服务端瓶颈元数据链表链表头链表尾元数据LRU（Least Recently Used）算法将最近最少访问到的文件或目录淘汰掉，尽量缓存访问频率高的元数据。（颜色越深表示元数据访问热越高）访问频度高的元数据不断添加到链表尾123智能预取

10、技术协议优化缓存管理优化 文件OceanStor 9000 V5KBS放送公社，看奥运史上首次全面4K赛事报道500100015002000500100015002000Vendor APK稳定带宽1GB/s6层4K编辑在KBS POC测试中唯一完成4层4K编辑的存储产品数据“0”丢失新闻编辑724小时在线，保证系统高可用易于扩展可扩展至140PB单一文件系统，系统带宽可以达到TB/s，性能随容量增加而线性增长卡帧丢帧采用4K技术播报2018平昌冬奥会HPC高效简单的存储解决方案容量性能线性扩展，可预期；私有客户端，全面提升系统带宽高性能全对称架构，系统无单点故障，长时间稳定运行，数据更安全；快速数据恢复高可靠全方位可视化统一资源管理，包括后端万兆交换机；自动统计分析，管理更简单；单一文件系统+配额管理，维护成本更低；简单易用冷数据根据策略漂移到廉价介质，实现数据的全生命周期管理，面向无带化需求。智能归档基于百