云存储应用白皮书2023

一、数字经济时代已经到来1.基础设施的云化2.核心技术互联网化3.应用数据化和智能化二、存储行业的变革1.存储服务网络的巨变2.云原生对云存储的新要求3.智能与存储的交相辉映一、强大的技术基因2.弹性让云成为可能3.软件的重新定义4.多种数据灾备及加密方式二、完善的产品矩阵6.云定义存储CDS7、云灾备8、闪电立方9、智能媒体管理10、网盘与相册服务一、本地数据上云方案1.数据业务迁移上云方案2.数据归档上云方案二、云灾备解决方案三、云上数据应用解决方案1.影视数据存储与传输加速方案2.物联网大数据存储解决方案3.在线教育数据存储解决方案4.数据湖存储解决方案5.日志采集在微服务架构中的应用6.高性能计算存储在渲染行业的应用7、可观测运维解决方案四、AI模型训练解决方案1.文件存储在飞天AI加速中的应用2.智能媒体管理在人脸语音识别中的应用3.表格存储在推荐系统中的应用4.文件存储在AIGC赛道中的应用五、混合云存储解决方案1.基于混合云存储阵列的虚拟化平台搭建2.视频监控混合云存储解决方案行业综述>10行业综述一、数字经济时代已经到来自人类社会诞生以来，先后经历了农业经济、工业经济、网络经济等时代。今天，我们迎来了由IT经济、DT经济、智能经济所组成的数字经济时代。根据联合国发布的《2022年数字经济报告》的统计，数字经济的规模约占全球生产总值的10%。从参与数据驱动的数字经济并从中受益的能力来看，美国和中国脱颖而出。正如水之于农业经济时代，电之于工业经济时代一样，在数字经济时代，数据正在成为新的自然资源、新的战略资源。中国工程院院士、阿里云创始人王坚在其《在线》一书中认为，数据正在改变商业的本质。根据IDC的相关预测，未来五年，全球数据量将会增长一倍以上，这其中，中国本土的数据量会仅次于北美地区，达到大概56.16ZB的规模，另外年复合增长率接近25%，增长率将成全球第一，也就是说，未来几年中国将会超越北美地区成为全球最大的数据市场。多方数据的汇聚以及对数据“存储-使用-管理”的全生命周期支撑能力、全方位的数据安全体系和健全的数据生态环境、以数据为中心实现数据价值最大化是以存储、计算、网络等基础设施所需要解决的重要问题。而今天，云计算已经在关键技术和应用规模上实现对传统基础设施的超越，基础设施全面云化的进程已然开启。一方面，新基建、“东数西算”等国家战略级定位的重点项目敲开了B端市场的大门，为云计算发展带来了大片市场蓝海。另一方面，技术融合成为数字经济重要发展趋势，云计算与数据中心、人工智能、工业互联网等的融合碰撞将摩擦出新的火花。行业综述>11行业之间出于业务共性、方案成熟度、部署和维护等方面的考虑，上云的过程中存在较大差异。为了避免行业云的设计方案因人而异或因事而异，需要通过标准将行业云要求清晰准确地列出，做到有章可循。除已发布的和在研的国家标准、行业标准之外，公共云服务商也需要不断制定自己的相关标准，让上云更加高效便捷。早在2020年2月，阿里巴巴集团的首个云计算企业标准《行业云建设要求》编制完成并发布，标准规定了基于公有云模式的行业云建设要求，包括总体要求、机房选址要求、物理网络架构要求、云产品部署要求和安全要求等。此外，API的广泛应用为标准化上云提供了可能，阿里云存储已经提供并开放了多个管理与控制的API，使得客户可以通过编程灵活调用、管理与监控存储资源，甚至实现跨平台的存储管理。作为分布式处理、并行处理和网格计算融合发展的产物，云计算从2006年正式诞生，时至今日，云计算已经成为一门独立的学科。今天，大数据、物联网和人工智能等技术正在引领云计算的发展。在各行各业不断拥抱互联网的当下，在企业组织数字化转型的当下，在产业互联网蓬勃发展的当下，需要更加适合互联网场景的技术升级方案。从成立的第一天开始，阿里巴巴就具有了独特的互联网基因，在过去的二十年，阿里巴巴不断应对互联网时代的诸多挑战，从而在今天构建起并梳理了数字经济时代的底层范式和技术脉络。基础设施的云化需要一套新的技术体系，需要基于互联网技术来进行改造。这其中最为明显的例子就是对象存储的兴起，在最初就将存储视为一种服务的对象存储，在应对互联网数据存储的规模化、高增长等问题的时候，提出了具有划时代意义的全新解决方案。对象存储面向互联网、移动互联网而生，专为大量网页、视频、图片、音频等数据的存储行业综述>12和管理等场景而设计。对象存储采用基于互联网的访问接口，其本质是通过互联网或移动互联网访问相关内容，为应用提供了全局、全网共享的数据池化管理，非常适合作为视频、社交、音乐等互联网应用的底层平台。现在，对象存储已经拥有了面向海量数据存储、快速访问的能力，不但可以构建数据统一分析平台，还可以进一步挖掘数据的价值，让存储更智能。互联网经济的蓬勃发展很大程度上也源自于开源技术的繁荣。开放、开源是互联网技术的重要基因。阿里巴巴是开源的受益者，也是开源的贡献者。可以预见，下一代技术将构建在基于互联网技术、开源技术、云原生的云化基础设施之上，在这一过程中，阿里巴巴已经积累了丰富的经验和最佳实践，这套技术体系的可行性和先进性也已经被充分证明。数据化和智能化是数字经济的重要特征，而云计算是应用数据化和智能化的有力保障。随着技术的不断发展以及架构的不断演化，云计算简化了传统IT产品的供应链流程，提升了产品弹性。在实现了平台和产品分离的同时，通过平台升级带动产品升级，实现了产品版本的快速迭代，使产品具备实时发布和实时使用的智能化特征。借助“数据+智能”这个出口，云计算将能够根据不同企业和组织的规模、类型、行业等为其量身打造上云方案。万事万物都将被数字化，都会因为数字化而产生进一步走向全面智慧化、智能化的空间和驱动力。在具体实践中，数据智能服务已普遍应用在不同业务中来辅助人工决策。决策智能开始逐步代替人工，通过全流程智能化、自动化的升级，从辅助人工决策走向全流程自动化决策。以阿里云存储为例，在完成了以弹性扩展、灵活高效、降低成本为核心的存储基础服务以后，已经实现了支撑集团100%业务上云的目标，同时还帮助越来越多的客户实现数据管理的数字化和智能化。在针对不同业务场景上，阿里云发布了智能媒体管理IMM，为云上文档、图片、视频提供行业综述>13一站式数据处理、分析、检索等智能管理。阿里云存储不再是一个单一的底层平台，而是升级为数据智能管理的平台。二、存储行业的变革云计算让原本离散的、依靠渠道实现分发的蒲公英网络演进为具有更高的服务效率、迭代效率、发现效率、运营效率等四大优势的平行网络。这其中，自服务是云计算核心的竞争力之一。传统IT技术所构建的商业模式不再成立，云计算的自服务能力让企业可以像使用水和电一样使用云计算产品，在可管理性方面有了极大的提升，也避免落入依赖技术和产品外包的服务陷阱。从这个角度来说，相比于强调所有权的公有云，强调使用权的公共云的概念其实更为贴切。云存储是基于云计算相关技术延伸和发展而来的全新的产品形态。本质上，云计算不是一种计算，而是服务，云存储也不是一种存储，而是一种基于存储功能的服务。云存储的内核是应用软件与存储设备相结合，通过应用软件来实现存储设备向存储服务的转变。如同云状的广域互联网，云存储对使用者来讲，不是指某一个具体的设备，而是指一个由多个存储设备和服务器所构成的集合体。因此使用云存储时并不是使用某一个存储设备，而是使用整个云存储网络带来的一种数字化服务。网络互连是分布式存储的基础，随着半导体存储介质的发展，存储网络的问题越来越突出。盘古针对存储网络面临的低延迟、高吞吐、CPU占用等问题，提出了新的存储网络协议及技术架构。具体包括用户态TCP协议栈LUNA、增强型ROCERDMA以及全自研RDMA网络协议及软硬一体技术架构。通过高性能存储网络技术的演进，带来了如下技术创新：∙解决了分布式存储互连存在的性能问题，盘古构建了全球最大规模的增强型RDMA存储网络，解决传统RDMA面临的PFC等问题。在规模化生产环境下，端至端I/O延迟行业综述>14降低至100us以内，造就了全球性能第一的ESSD云盘。∙降低处理网络协议栈的CPU开销、减少内存拷贝，持续升级数据中心存储物理网络技术架构。将数据中心存储互连提升至2x100Gbps，网络带宽利用率达到90%以上，并向更高速率的网络技术发展。∙自研RDMA存储网络协议栈，发展HPCC(highperformancecontrolcenter)络拥塞控制算法。通过RDMA协议提升硬件卸载的效率，降低网络丢包率，提升存储网络利用率，解决存储场景下面临的Incast等重要问题，促进存储网络向高性能方向演进。∙通过端网协同能力，提升链路探测的效率，降低存储I/O的长尾延迟，提升存储系统的QoS能力，为用户提供极致的SLA。盘古存储网络相关技术在阿里云得到了规模化，也积累了一系列创新成果，自研的高性能RDMA存储网络（SIGCOMM2022）、HPCC流控算法（SIGCOMM2019）、RDMA网络的大规模实践和优化（NSDI2021引领了云存储进入微秒延迟时代。云原生（CloudNative）的概念在2015年开始被提及，主要包括容器、服务网格、微服务、不可变基础设施和声明式API等技术领域。云原生计算基金会（CloudNativeComputingFoundation）认为云原生技术有利于组织在公共云、私有云和混合云以及新型动态环境中快速构建和运行可弹性扩展的应用。作为下一代云计算的核心技术内核，云原生对于企业竞争优势的原生放大具有重要作用。全面上云的拐点已经到来：∙从单次购物节大促到日常业务运营，已经实现了常态化的上云；从边缘业务到核心链路和关键业务，已经实现了核心业务的上云；行业综述>15∙从几百台机器到超过十万台机器，已经实现了规模化的上云；∙从单一技术到全栈技术，已经实现了多样化的上云，上云已经成为一种必然。除此之外，上云不仅是业务需要面向云端，研发同样需要面向云端。云原生的出现让业务获得了更灵活的部署能力，同时也能够挖掘出在线数据的更大价值。云原生技术正在深刻改变着应用服务的方方面面，而存储作为应用运行的基石，也面临着新的需求和挑战。云原生场景下，用户在云存储基本能力之上又提出了效率、弹性、自治、稳定、应用低耦合、安全等方面的新诉求。数字红利催化、云原生架构驱动、存储技术演进，三重背景共同推动着存储迈进云原生存储时代。首先，云原生存储是面向应用的应用层存储，是云存储在用户接口和效率、易用性等优势的集合；其次，云原生存储利用云存储基础设施红利，是构建在应用存储之上的分层存储；第三，云原生提升了实现效率和自治方面的能力，提升了存储稳定性，降低了安全隐患。阿里云为国内头部云厂商，具备提供丰富的云原生能力的基础，深耕云原生领域多年，从最开始布局容器，到核心系统云原生化，再到2022年提出核心云产品全面Serverless化，阿里云始终以先行者的视角布局技术，不断带给业界新的想象空间。阿里云存储不断演进Serverless能力，智能适配负载变化，提供智能数据管理能力以及全场景覆盖不断发展的新负载。在中国信通院组织的《云原生存储能力要求》测评中，阿里云块存储EBS、对象存储OSS、文件存储NAS等产品通过了2022年度云原生存储能力首批评估。行业综述>16人工智能技术的发展让存储产品在打破数据孤岛，提升数据管理效率等方面有了更多可能。阿里云提供了丰富的数据管理功能，通过数据分析挖掘数据价值。以阿里云日志服务的智能运维分析功能为例，该功能面向趋势预测、异常发现、智能聚类和根因分析等四个场景，提升了DevOps分析和诊断的效率，帮助运维人员提前配置资源，提前预测、发现和解决突发故障。借助人工智能技术，阿里云存储产品在磁盘、服务与网络的故障检测中，可以更加准确地预测到故障的发生：∙在遇到网路抖动等异常状况时，可以做到及时规避，大大减少长尾延迟现象；∙在业务调度中，利用人工智能技术，能够提前进行负载均衡，避免热点的不均衡；∙在数据的放置策略中，可以根据对冷热数据的分析以及客户访问的规则与模式，将不同类型的数据进行分类，执行不同的置放策略，实现更加智能的分级存储，从而提高总体系统效能。2023年，阿里云智能数据湖解决方案成功入选第六届数字中国建设峰会“十大硬核科技”。针对机器学习与人工智能计算的场景，阿里云推出了高性能并行文件系统（CPFS：CloudParallelFileSystem并广泛应用于AIGC、AI训练、自动驾驶、生命科学和渲染仿真等场景。灵骏智能计算结合CPFS可以实现TB/s级吞吐能力的高性能存储系统、微秒级延迟，它还实现了一份数据多个协议的同时访问的能力，使得不同的应用可以根据需要用不同的接口进行访问。同时，在语音、图像、文本模型训练以及渲染仿真等领域，很多时候都存在着大量的只读小文件，其IO模式非常固定，但同时又耗时极长，灵骏为此提供了专门的加速工具KSpeed，行业综述>17对整个数据IO作业的流水线进行了重构，通过结合使用高速缓存和数据预处理技术，大大缩短了数据IO的时间。为了应对图片和视频数据的快速增长，对数据进行智能分析成为刚需，阿里云的智能媒体管理系统（IMM）将先进的分析算法与存储相结合，通过简单便利的调用接口，使得中小客户也可以享用到阿里云以及达摩院强大且先进的人工智能技术服务。技术产品>18技术产品一、强大的技术基因1）十年磨一剑的飞天盘古分布式存储因其支持块、文件、HDFS、对象多种协议的特性，具有较好的场景适应性。面向云计算的大规模分布式存储系统，往往需要历经纯软件技术架构、用户态技术架构，再到软硬一体全栈融合技术架构的发展阶段。从2008年问世以来，飞天盘古作为阿里巴巴集团、蚂蚁集团业务的数据存储平台，在存储技术的理解、分析、分类和抽象等方面持续创新，一方面为了适应硬件的迭代更新；另一方面还要满足大规模及复杂业务场景的存储需求，主要体现在四个方面，即开放分层的分布式存储软件、高性能存储网络、硬件适配性和硬件架构创新，以及深度软硬融合的闪存存储架构。一个大规模、高性能、高可靠、高可用、可伸缩的分布式存储平台，不仅需要为对象存储、表格存储、块存储、文件存储等不同存储产品提供分布式持久化核心存储层，而且要为上层的大数据处理、数据库、中间件、日志分析、邮箱、搜索等基础服务提供底层数据存储服务。技术产品技术产品>192）稳定压倒一切开放分层的软件架构是飞天盘古在系统架构演进上的重要实践经验。飞天盘古数据服务层从上到下分为飞天盘古服务层、飞天盘古分布式功能层、单机存储引擎层和软硬件一体化飞天盘古分布式功能层是一个公共的基础核心，提供多副本文件（典型配置为三副本）及纠删码文件的文件语义，并支持DirectI/O及BufferI/O适应不同业务访问模式的需求。分布式功能层采用分布式元数据管理，支持单集群的大规模及系统的可伸缩性；提供良好设计的异常处理机制及数据复制机制，保证节点异常的性能稳定性及数据可靠性；采用端到端的QoS保证业务运行的SLA；采用端到端的CRC校验保证数据传输和存储过程中的数据完整性；后台CRC校验机制保障数据持久存储的可靠性；支持快速介质与慢速介质构成的混合存储模式，达到性能与成本的均衡。3）性能是极致追求开放分层架构具备定义稳定和良好的接口，有利于系统自身的快速迭代。不仅如此，飞天盘古针对不同的硬件特点及应用场景进行了深度的优化和设计，包括：技术产品技术产品>20分布式元数据服务。增强整体系统的元数据服务器能力，支持海量文件规模、灵活伸缩扩展，并摒弃中心节点带来的不足，提升分布式存储的可靠性及性能。自研的分布式一致性协议。对软硬件异常进行容错，在保证可靠性的基础之上提升性能。分布式纠删码技术将数据冗余从典型的3份副本降低至1.5份副本以下。全自研的用户态存储引擎支持NVMeSSD和HDD介质，充分发挥NVMe的性能，保证后端存储的I/O延时在10us以内；通过用户态存储引擎挖掘HDD磁盘的吞吐带宽，比基于Ext4的存储引擎性能翻倍。全链路SLA服务保证I/O的稳定性，通过异常节点探测算法、异步写追加等方法来增强端至端的I/O服务质量。在网络互联方面，飞天盘古针对存储网络面临的低延时、高吞吐、CPU占用等问题，提出了新的存储网络协议及技术架构。具体包括用户态TCP协议栈Luna、增强型RoCE（RDMAoverConvergedEthernet）、全自研RDMA网络协议及软硬一体技术架构。在规模化生产环境下，端至端I/O延时降低至100us以内，造就了全球性能第一的ESSD云盘。弹性是云计算的核心价值，是每个企业，每个团队，每个IT工作者所追求的目标。阿里云弹性计算首席架构师蔡俊杰认为，从广义上讲，弹性让IT能力轻松跟上客户的业务发展；从狭义上讲，弹性则带给客户无与伦比的灵活性。技术产品技术产品>21从资源利用角度来说，弹性意味着性价比，根据相关数据统计：在实现云端部署之后，综合成本会下降50%。弹性是云计算技术中公认的最重要的特点之一。弹性实现了按需增减计算、存储、网络等各种资源。阿里云的弹性贯穿于整个产品生态，客户可以根据业务负载、增长预测、实际应用设置触发条件，实现资源的动态调整。在2022北京冬奥会期间，阿里云支撑赛事运营所需的核心系统100%上云。这是奥运史上首次由云计算替代传统IT，改变了过去奥运重复建设传统IT机房，在赛事短暂使用后拆除的状况。应用开发和部署流程缩短，IT基础设施的成本大幅下降。阿里云存储在弹性方面实现了按量付费和按实际使用量付费，无需提前一次性投入。同时，自动弹性扩展存储的容量和文件数目也满足了EB级海量数据存储的需求。另一方面，随着公共云、专有云、混合云等平台之间的数据及业务迁移变得更加灵活和便捷，云计算的外延也不断扩大并延展到边缘现场环境中。容器、微服务、服务网格、无服务器计算等新的技术架构不断涌现、不断创新，这些也将进一步助力云存储不断提升自身的弹性，推动了数字经济时代组织架构的改变以及文化的变革。技术产品>22Gartner于2013年提出的“软件定义一切”仍余音绕梁，由硬盘、磁带以及云等存储介质组成的存储金字塔架构正在受到越来越多的冲击，存储架构进一步简化，实现了通过数据的使用而不是底层存储介质来定义数据。软件创新使等简化的存储架构可轻松用于更多的细分市场，例如媒体和娱乐、能源，甚至是中小企业市场。新的简化模型使组织可以将大部分不活跃的数据从昂贵的存储主层（由闪存、NVMe和其他固态技术以及高性能磁盘组成）中移到更为经济的冷存储层，或者称之为永久层。用户也可以将数据的多个副本存储在对象存储、磁盘和磁带等在内的多种更为经济的存储介质上。永久层还可以用于第二存储、数据分发、备份、存档和灾难恢复等业务上。同时，也可以将永久层设置为根据客户工作流程的需求进行响应，从而使用户可以创建响应副本或在云、磁带上创建灾难恢复副本。这些功能，都有赖于软件对数据存储、访问方式的重新定义。软件与硬件的发展往往是紧密结合的，在这个过程中，既离不开不同介质硬件的自我革新—接口的方式进一步提升存储系统效率，借助硬件和软件产品的集成，确保硬件可以在软件的支持下得到性能的优化。存储系统架构经过不断演进，已经从硬件定义时期演变到软件定义时期——通过软件的能力在通用廉价硬件基础之上构建可靠数据存储系统，最明显的例子就是SDS（软件定义存储）近几年的快速发展，它使存储软件与底层硬件分离，使企业可以更好的利用标准化硬件从而获得成本、效率等方面的回报。根据IDC数据，2019-2021三年来，传统存储硬件市场份额从65%下降至52%，市场份额持续萎缩。照此趋势，未来数年内SDS/HCI硬件市场份额有可能超过传统存储，成为企业存储主流解决方案。新的存储技术如持久内存（PM）、存储类内存(SCM)、NVMeoF等，将进一步推动SDS系统的发展。安全可靠是阿里云始终坚守的重要底线。为此，阿里云执行多层次、全链路、全方位的安技术产品>23全加密策略，实现业务安全、运营安全、数据安全、网络安全、应用安全、主机安全和帐户安全以及底层数据中心安全。此外，还提供了完全托管服务，用户不再需要自己规划容量的扩容和备份。与传统灾备服务相比，云灾备具有投入成本低、敏捷运维、资源服务化、多系统应用等优势。早在2018年6月，阿里云已经正式对外发布了国内第一家云原生混合云备份服务和混合云容灾服务，提供云上备份与容灾的保护能力，客户可实现灾备方案的分钟级部署。国内首家发布同城三可用区域部署能力的云上对象存储，可满足企业级客户对于发生机房级灾难事件时数据不丢、业务不断的需求。相比于建设线下同城容灾机房，对象存储同城区域冗余存储提供99.95%的可用性SLA指标、12个9数据可靠性和一键部署云上同城容灾服务能力，结合“跨区域复制”能力，可实现机房、同城、跨地域三级完整的容灾服务能力。对象存储的多版本功能，使得用户可保留、恢复文件的历史版本，且可设置历史版本保留时间，防止人为或程序的出错，提升容错能力。云盘异步复制是一种基于块存储数据复制能力实现跨地域或者跨可用区数据保护的功能，主要用于异地容灾的业务场景。通过ESSD云盘对数据进行周期性跨地域复制，客户可以非常方便地在阿里云全球28个地域，根据业务需求来选择生产站点和灾备站点，实现高等级、低成本的数据级容灾架构。在数据加密方面，对象存储的多次读取特性允许用户以“不可篡改、不可删除”的方式进行云上数据合规保存。对象存储的数据加密功能涵盖客户端加密、服务端加密，可结合密钥托管服务，并支持用户以自有密钥方式进行加密，大大提升数据安全与合规能力。混合云备份HBR提供备份源端加密，并支持基于SSL/TLS的HTTPS加密传输，有效防止数据在云端的潜在安全风险。文件存储推出的传输加密、落盘加密功能，通过托管密钥、自有密钥加密充分保证数据在传输中的安全性。技术产品>24块存储通过和阿里云密钥管理服务集成，用户可通过云盘加密功能保护数据的隐私性和自主性。二、完善的产品矩阵阿里云对象存储OSS（ObjectStorageService）是一款海量、安全、低成本、高可靠的云存储服务，提供99.9999999999%(12个9)的数据持久性，99.995%的数据可用性。多种存储类型供选择，全面优化存储成本。2023年4月，阿里云对象存储推出全新预留空间产品（ReservedCapacity客户购买一年的预留空间，较按量付费，最高可节省70%的费用。预留空间适用于多种业务场景下的数据存储与管理，如互联网音视频、数据湖、云相册、视频监控等业务场景。无地域属性预留空间则适用于对数据存储地域无要求，可接受仅通过外网进行数据读取访问的客户。户技术产品>25∙更安全：完善的权限控制与多种加密算法的支持，满足企业数据安全与合规要求。∙更可靠：OSS的多重冗余架构设计，为数据持久存储提供更可靠的保障。∙更稳定：提供高达99.995%的可用性SLA承诺，为客户提供高可用的存储服务。∙更智能：提供数据的生命周期管理与数据的智能处理能力，有效满足企业需求。数据迁移：支持PB级的在线、离线迁移方案，完成中国互联网首个单客户百PB级数据的迁移上云案例，提供更安全、更快速的海量数据迁移上云方案。∙离线数据迁移：闪电立方可将用户线下数据，安全、高效的迁移至对象存储OSS，提供端到端的加密机制，支持TB到PB级数据迁移上云。∙在线数据迁移：用户可使用阿里云OSS在线数据迁移服务、OSSImport工具，将第三方云存储、自建的线下存储等各类数据，在线迁移至对象存储OSS。∙HDFS数据迁移：通过Hadoop对阿里云OSS的支持，用户便可以在自建的Hadoop集群或通过阿里云EMR，将HDFS中大规模的数据迁移至对象存储OSS。数据处理：支持图片、文档、视频、CSV等数据的常用处理和分析能力，提供更智能的对象存储。∙图片处理：支持jpg、png、bmp、gif、webp、tiff等多种格式的转换，及缩略图、剪裁、水印、缩放等操作。∙视频截帧：支持截取视频中的指定位置生成图片，完成视频截帧。∙人脸识别：支持图片中多张人脸位置与属性检测，如性别、年龄、情绪、头部姿势、眼睛状态、模糊度等。数据管理：支持生命周期、镜像回源、更丰富的数据上传与下载方式、事件通知、回调等功能，提供更简单易用、更便于管理的对象存储。∙生命周期：可定义数据的生命周期，将符合规则的对象转换存储类型或过期清除。∙镜像回源：支持配置用户源站，当访问数据不在OSS时，OSS会从源站拉取并写技术产品>26入OSS。∙传输加速：阿里云OSS原生加速产品，依托阿里云数据中心全球的接入点，结合智能探测与调度算法，提供最适合OSS用户的加速服务。容灾备份：通过数据跨区域复制以及同城冗余、版本控制等技术，保障数据的高可靠性，防止数据被误删或误覆盖导致的业务损失。∙跨区域复制：提供跨不同的OSS存储空间之间自动、异步（近实时）的文件复制能力，将对象的增、删、改等操作进行自动复制。∙版本控制：将数据覆盖和删除操作通过历史版本的形式保存下来。在错误覆盖或者删除对象后，能够将存储空间中存储的对象恢复至任意时刻的历史版本。∙同城冗余：阿里云OSS采用多可用区（AZ）的冗余机制，将数据分散存放在同一地域（Region）的3个可用区。当某个可用区不可用时，仍然能够保障数据正常访问安全合规：OSS提供多种保证数据安全与合规的技术，包括防盗链、数据存储加密和数据的合规保留策略（WORM）设置等。∙防盗链：通过设置Referer白名单的方式限制仅白名单中的域名可以访问您存储空间内的资源。∙数据加密：阿里云OSS的数据加密功能，提供服务端加密、客户端加密等多种数据加密选项。∙WORM：阿里云OSS支持WORM策略（一次写入，多次读取保护周期内，任何人都不能对文件进行修改以及删除，满足行业合规要求。块存储EBS（ElasticBlockStorage）是为云服务器ECS提供的低时延、持久性、高可靠的块级随机存储。块存储支持在可用区内自动复制您的数据，防止意外硬件故障导致的数据不可用，保护您的业务免于硬件故障的威胁。技术产品>27∙数据持久性：云盘基于多副本机制，提供9个9的数据持久性。∙极致性能：ESSD云盘最高可提供100万随机IOPS，4000MB/S吞吐。∙弹性扩展：单盘最大支持32TB，容量和性能均可弹性扩展。∙安全合规：所有云盘以及快照均支持加密，满足合规要求。丰富的块存储产品类型：提供ESSDAutoPL云盘、PL1/2/3云盘、SSD云盘、高效云盘、NVMeSSD本地盘、SATAHDD本地盘等多种磁盘类型，满足不同业务场景需求。∙弹性扩容：单盘最大支持32TB，可根据业务负载自行配置云盘容量以及类型，后续可按需在线扩容以及调整云盘类型，以满足业务诉求。∙数据加密：通过阿里云密钥管理服务(KMS)，针对云盘以及快照提供BYOK加密能力。加解密操作对于业务性能基本无损。∙分布式多副本机制：基于分布式多副本技术，为云盘提供稳定、高效的数据随机访问能力，规避底层单一硬件故障带来的数据丢失问题。多元的企业级块存储特性：提供云盘加密、弹性扩展、共享挂载、在线变配等传统企业级SAN存储特性，满足线下业务无缝迁移上云。∙弹性扩容：单盘最大支持32TB，可根据业务负载自行配置云盘容量以及类型，后续可按需在线扩容以及调整云盘类型，以满足业务诉求。∙数据加密：通过阿里云密钥管理服务(KMS)，针对云盘以及快照提供BYOK加密能力。加解密操作对于业务性能基本无损。∙分布式多副本机制：基于分布式多副本技术，为云盘提供稳定、高效的数据随机访问能力，规避底层单一硬件故障带来的数据丢失问题。极致的云盘性能：ESSD云盘是阿里云目前性能强劲的企业级云盘规格，基于新一代分布式存储架构，提供单盘高达100万的随机读写和低至百微秒的单路时延能力。∙百微秒时延：采用全新架构的ESSD系列云盘最低能够提供百微秒写时延，可满足高性能数据库负载。技术产品>28∙单盘最高提供100万IOPS：ESSDPL3规格最高提供100万IOPS以及4000MB/S吞吐能力，能满足核心交易系统、自建数据库等重IO密集型场景。∙ESSD性能变配，秒级生效：ESSDPL1/2/3规格云盘修改性能等级秒级生效，业务无需等待。简单高效的数据备份能力：通过自动快照策略或者手工方式针对ECS实例、云盘创建快照，以应对数据丢失或错误风险。同时利用快照能力可实现批量快速创盘。∙批量创建云盘：基于新一代快照服务架构，可实现短期内批量创建ECS实例或者数据盘，实现业务快照部署。∙快照极速可用：启用了“快照极速可用”能力的快照能够在数秒内完成快照创建或者回滚操作。可将业务等待时间缩短至秒级别。∙快照跨地域复制：通过手工或者自动快照策略，将快照复制到指定区域，可实现云上异地容灾或者新业务快速开服。1）NAS阿里云文件存储NAS（ApsaraFileStorageNAS）是一个可大规模共享访问，弹性扩展的高性能云原生分布式文件系统。支持智能冷热数据分层，有效降低数据存储成本。广泛应用于企业级应用数据共享、容器、AI机器学习、Web服务和内容管理、应用程序开发和测试、媒体和娱乐工作流、数据库备份等场景。∙企业级稳定性：基于分布式架构，提供11个9数据持久性和99.95%的服务可用性。∙云原生：存储容量随业务的写入或删除动态伸缩，0成本创建文件系统，无需提前预购容量。∙简单易用，快速部署：全托管式服务，控制台界面快速创建和配置文件系统。技术产品技术产品>29∙数据分层：通过生命周期实现NAS存储的冷数据自动迁移至低频介质，大幅降低数据存储成本。云原生共享文件存储：通过NFS/SMB协议为弹性计算ECS和容器ACK实例提供跨AZ、区域和VPC的分层目录结构文件访问，支持数千个共享访问链接。∙多协议支持：提供标准的NFSv3/v4.0和SMB访问协议，支持主流的Linux和Windows操作系统直接挂载。∙完全托管&动态弹性：提供简单的界面，可以快速创建和配置文件系统，为您管理文件存储软硬件基础设施，根据应用所需，动态提供存储容量和性能。∙面向应用的数据共享：与容器ACK服务深度整合，为容器环境提供数据共享和数据持久化存储，并通过高性能文件锁保证数据的强一致性。多种存储类型：拥有通用型和极速型两种针对特定场景的NAS存储产品，以及超高性能的CPFS。通用型NAS支持数据冷热分层，提供更具性价比的存储方式。∙面向不同场景的通用型、极速型和CPFS：通用型NAS满足数据共享、高吞吐的常规需求。极速型NAS的低延迟和快照技术，为Devops、金融业务提供专属优化。CPFS可以满足AI、HPC最严苛的I/O要求。∙从热到冷多种规格：通用型NAS提供性能型、容量型两种规格，结合低频介质满足不同场景下对存储的性能和成本需求。∙数据生命周期：支持配置基于访问时间的自动转储规则，将数据转储至低频介质，大幅降低存储成本。低频介质上的数据可以在文件系统中随时访问。企业级数据管理：提供配额管理、AD\ACL权限控制、容量和性能监控等企业用户需要的高级数据管理功能。∙配额管理：支持对某个目录设置某个用户或用户组的空间和文件数配额，保障多部门多应用间资源合理使用。∙容量和性能监控：对接云监控，支持NAS基础服务指标、性能指标和计量指标的监控。及时了解服务运行情况。技术产品>30∙AD\ACL权限控制：支持接入AD域控，对域用户进行文件或目录的ACL访问权限控制。保障企业内多部门间的数据安全访问。企业级数据保护：提供权限组IP隔离、数据加密、数据备份等企业用户需要的高级功能。∙权限组：支持基于计算实例的IP地址或网段配置文件系统读写权限规则，实现不同业务或部门间的数据隔离。∙数据加密：提供服务端加密、传输加密，构建全链路数据加密能力，保障端到端数据安全。∙数据保护：支持回收站，有效防止数据误删。与云备份HBR服务深度整合，支持灵活的备份策略，周期性自动备份和增量备份。2）CPFS（CloudParalleledFileSystem）文件存储CPFS(CloudParallelFileStorage)是阿里云完全托管、可扩展的并行文件存储系统，支持POSIX\MPI-IO和NFS协议，针对GPU和CPU计算场景进行了深度优化，提供对数据亚毫秒级的访问和百万级IOPS的数据读写请求，可以用于AI深度训练、自动驾驶、基因计算、EDA仿真、石油勘探、气象分析以及影视渲染等业务场景。∙与OSS数据湖融合：支持高速导入OSS数据与元数据，为OSS提供高速文件访∙高吞吐和超高IOPS：采用分布式并行架构，基于全闪介质提供数十GB吞吐和百万级IOPS。∙简单易用：30分钟创建高性能文件系统，支持POSIX、NFS协议互访。∙弹性可扩展：支持在线扩容，可快速实现线性增长，满足更多容量与性能诉求。技术产品>31高性能计算文件存储：支持标准的POSIX、MPI-IO、NFS协议，高性能计算程序无需进行任何接口适配和性能优化即可高效率执行。∙兼容POSIX/MPI/NFS：兼容标准POSIX/MPI-IO/NFS协议，高性能应用程序无需进行任何更改，即可直接通过ECS或容器CSI接口连接CPFS读写数据。∙高吞吐，低延时：新一代并行架构，用户I/O在客户端和存储节点间完全并行访问，通过集群聚合，吞吐可以线性增加。同时基于全闪SSD介质，提供亚毫秒级∙并发访问优化：元数据和数据均采用分布式的并行架构，无惧小文件，支持百万级IOPS，几千台服务器同时并发访问，适合GPU多机多卡训练。与阿里云计算生态密切整合：与E-HPC、容器ACK、无影等计算平台整合，支持方便的挂载CPFS文件系统。用户可以在云上分钟级构建高性能计算和分析平台。∙与E-HPC深度整合：通过E-HPC控制台可以快速创建CPFS文件系统并搭建完整的高性能计算平台。∙支持容器ACKCSI接口：CPFS支持阿里云ACK容器服务。通过CSI接口，容器服务可以方便的利用CPFS的高速I/O能力。同时实现计算力大规模弹性伸缩。∙支持无影云桌面：CPFS通过NFS协议服务支持无影桌面直接挂载。实现开发调试终端与高性能运算集群的数据共享。混合云高性能计算文件存储：支持标准的POSIX和MPI-IO协议，高性能计算程序无需进行任何接口适配和性能优化即可高效率执行。∙兼容POSIX/MPIIO：兼容标准POSIX/MPI-IO协议，基于LinuxPOSIX和MPI-IO编程的高性能应用程序，无需进行任何更改，即可直接运行。∙高吞吐，低延时：依靠并行架构，用户I/O在客户端和存储节点间完全并行访问，通过集群聚合，吞吐可以线性增加。∙丰富企业级特性：拥有ACL/Quota/快照等企业级数据管理能力。技术产品>323）HDFS（ApsaraFileStorageforHDFS）产品介绍：阿里云文件存储HDFS版（ApsaraFileStorageforHDFS）提供标准的HDFS访问协议，用户无需对现有大数据分析应用做任何修改，即可使用具备无限容量及性能扩展、单一命名空间、高可靠和高可用等特性的分布式文件系统。产品优势：∙易使用：允许像在Hadoop分布式文件系统（HDFS）中一样管理和访问数据。∙高性能：高吞吐、高IOPS，全面满足大数据分析的性能需求。∙高可靠：基于多副本技术，可靠性不低于99.999999999%。∙低成本：弹性伸缩，降低数据分析业务整体TCO。产品功能：高性能、高可靠、高可用：基于阿里云新一代分布式存储和高速网络。∙高性能：基于阿里云新一代分布式存储和高速网络，提供大数据分析所需的高吞吐∙高可靠：基于分布式多副本技术，99.999999999%的数据可靠性设计，提供远高于传统HDFS存储的可靠性。∙高可用：基于全分布式设计，所有节点无单点问题，提供高于99.9%的可用性。海量、弹性的存储空间：存储空间按需使用。∙海量存储空间：单个文件系统存储空间无上限。∙弹性扩展的多层命名空间：单个文件系统的元数据能力随存储空间线性扩展。简单、易用的使用方式：兼容HDFS接口，您的Hadoop应用无需修改即可上云。∙简单、易用：提供标准HDFS接口，无论Hadoop还是机器学习应用，无需任何修改，即可使用文件存储HDFS。技术产品>33∙原子目录操作：提供高性能元数据操作能力，移动、重命名、删除即刻完成，提升大数据分析效能，降低整体TCO。强大、稳定的安全机制：RAM用户认证、VPC、安全组的访问控制，保障数据安全。∙网络隔离：支持通过VPC链路层数据传输和访问隔离。∙RAM用户认证：支持主子账号授权，满足大型企业复杂授权模型。产品介绍：日志服务（SLS）是云原生观测分析平台，为Log/Metric/Trace等数据提供大规模、低成本、实时平台化服务。一站式提供数据采集、加工、分析、告警可视化与投递功能，全面提升研发、运维、运营和安全等场景数字化能力。∙统一接入：Log/Metric/Trace数据统一接入；全面支持云产品日志、开源系统、多云日志、云下日志接入。∙智能高效：具备秒级分析百亿级数据能力；支持完整AIOps能力，支持智能异常检测与根因分析。Spark等流批数据分析平台。∙弹性低成本：具备PB/Day规模弹性伸缩能力；支持按量付费，仅需为实际用量付费，TCO降低50%以上。数据采集：支持Log/Metric/Trace统一采集，支持服务器/应用/移动设备/网页/IoT等数据源接入，支持阿里云产品/开源系统/云间/云下日志数据接入。∙便捷：40+成熟接入方案，多客户端统一采集，支持内网、公网、全球加速传输等技术产品>34多种传输方式。∙可靠：阿里经济体自用基础设施，历经多次双十一，春晚活动考验。支持断点续传，可根据业务流量实现弹性伸缩。∙开放：多协议（HTTP/Syslog/Prometheus/OpenTelemetry）无缝接入，完整对接开源生态。数据加工：通过灵活语法，在不编写代码情况下支持各种复杂数据提取、解析、富化、分发等需求，支持结构化分析。∙灵活：提供丰富算子、开箱即用的场景化UDF（Syslog、非标准json、AccessLogUA/URI/IP解析等）。可扩展语法应对各种复杂格式。∙免运维：全托管云上服务，无须投入额外运维资源。支持自动根据流量弹性伸缩。∙可扩展：支持多层嵌套、分流等逻辑，支持复杂的数据分派与编排需求。查询分析：提供关键词、SQL92.AIOps函数等多种方式，支持面向文本+结构化数据实时查询分析，异常巡检与智能分析。∙高性能：秒级分析十亿级数据，且完整支持SQL、PromQL等分析接口，HTTP、Kafka、JDBC、Prometheus等协议。∙稳定可靠：企业级设计，多租户隔离，PB级容量设计，数万企业用户选择。∙智能：经过阿里经济体实践的AIOps能力，支持智能异常巡检与根因分析。监控与告警：具备丰富的可视化组件，可创建所见即所得的交互式分析大盘。同时支持实时可编排的告警功能，可随时随地掌握业务动向。∙一站式：丰富的可视化组件，可交互式分析报表，灵活告警与多样的通知能力。∙灵活：支持灵活监控规则编排，告警策略管理，行动策略管理及多样化通知渠道。∙开放：支持JDBC/HTTP等多种查询协议，支持多种可视化标准。日志审计：多账户下实时自动化、中心化采集云产品日志并进行审计，支持升级所需合规存储、查询及信息汇总报表。∙自动化：一键式配置，支持30+种数据源自动接入，跨多主账号自动实时发现新资源并实时采集。∙合规性：满足合规、等保、网安法、GDPR等多种标准，内置近百个安全合规监控技术产品>35规则，一键式开启。∙开放：提供20+种数据对接手段，与开源、阿里云大数据、第三方SOC软件无缝对接，充分发挥数据价值。投递与消费：与各种实时计算及服务实时对接，并可以实现自定义消费。支持数据投递至存储类服务，支持压缩、自定义Partition以及行列等各种存储格式。∙稳定可靠：PB级容量设计，根据流量变化自动弹性伸缩，提供任务状态监控及异常告警。∙免运维：开箱即用免运维，无需编写代码，仅需控制台简单配置即可完成任务配置。∙开放：提供20+种数据对接手段，无缝对接主流(Flink、Spark等）流计算、数据仓库平台与阿里云众多产品。表格存储（Tablestore）面向海量结构化数据提供Serverless表存储服务，同时针对物联网场景深度优化提供一站式的IoTstore解决方案。适用于海量账单、IM消息、物联网、车联网、风控、推荐等场景中的结构化数据存储，提供海量数据低成本存储、毫秒级的在线数据查询和检索以及灵活的数据分析能力。∙Serverless：弹性支持单表PB级存储，自动扩展服务能力，享受免运维、即开即用的使用体验。支持多级存储介质，配合冷热自动分层最大化优化存储成本。∙场景化数据模型：针对场景化优化提供多种数据模型，包括宽行模型、时序模型和消息模型。简化数据模型定义，让开发更便捷，让能力更贴合。∙多元化索引：可便捷的对数据进行实时索引，针对不同查询场景提供多元化索引。支持二级索引、全文索引和多维数值索引，加速查询与分析。∙易集成生态丰富：全面接入开源与云原生大数据生态体系。与Maxcompute、Spark、Flink等计算引擎集成，与Kafka、数据集成等链路组件无缝打通。技术产品>36Serverless：提供Serverless服务体验，零运维，低成本。∙分布式架构体系，自动负载均衡：单表10PB级数据量、万亿条记录数以及千万级别的TPS能力。自动负载均衡及热点迁移，无需人工介入。∙存储计算分离，多种存储介质：存储计算分离架构，计算层与存储层均可独立扩展，更灵活更低成本。支持多级存储介质，配合冷热自动分层最大化优化存储成本。∙支持灵活计费模型：支持纯按量模式，享受0元门槛产品使用。同时支持预留模式，规划预留资源、成本可控。灵活选择满足不同场景需求。企业级服务，稳定安全：多维度、多层次的安全防护与访问控制，保障数据安全。∙企业级安全保障体系：提供表级别和API级别的权限管理机制，支持STS临时授权和自定义权限认证及主子账号功能。同时提供网络访问控制能力与数据加密能∙数据高可靠：数据多副本，保证强一致性，按照11个9的数据可靠性的标准设计。同时支持通过HBR来做数据备份与恢复。∙服务高可用：分布式存储架构，单点故障快速检测快速恢复，按照99.99%可用性设计。场景化数据模型：能够满足不同场景不同类型数据存储。∙宽行数据模型：无需结构定义，属性列能够灵活动态扩展。适用于非强事务、海量在线数据存储与查询。∙时序数据模型：针对时间序列数据的特点进行设计，提供更高压缩比，支持数据查询与分析。适用于物联网设备监控、设备采集数据、机器监控数据等场景。∙消息数据模型：针对消息数据场景所设计，能够满足消息数据场景对消息保序、海量消息存储、实时同步的特殊需求。可以同时应用在IM、Feed流等消息场景中。多语言SDK与SQL灵活访问：支持SQL、ResultAPI、SDK、客户端等不同访问方式。∙SQL：支持SQL查询。能够映射关联不同数据模型的表，能够自动关联索引进行查询与分析优化。∙多语言SDK：RestfulAPI接口，多语言SDK支持，满足不同语言开发者的使用需技术产品>37求。∙开发工具：支持客户端与命令行工具，支持Windows、Linux和Mac平台。能够便捷的完成所需的运维管理需求。数据检索与分析：提供多元化索引，满足不同场景数据查询与分析需求。∙多元索引：提供二级索引、全文索引、多维数值索引等多种数据索引。提供不用场景的查询与分析加速。∙查询加速：支持任意字段的组合查询、全文检索、地理空间查询、模糊查询等能力。加速数据查询。∙分析加速：内置统计聚合能力，支持高并发扫描与存储侧算子下推，加速数据分析。开放的计算生态对接：全面接入开源与云原生大数据生态体系以及数据链路中间件。∙计算引擎对接：支持Maxcompute、Spark、Flink等计算引擎直接访问。∙数据实时订阅：能够实时捕获表内数据的变化，提供全增量一体数据实时订阅能力。可以自定义数据实时处理或对接流计算引擎。∙上下游数据集成：与Kafka、数据集成等链路组件无缝打通，便于多组件数据架构搭建。同时支持数据实时投递至OSS，搭建数据湖架构。6.云定义存储CDS云定义存储（CloudDefinedStorage，CDS）通过盘古全新的QoS框架将对象存储OSS、块存储EBS、日志服务SLS和灾备服务HBR多个存储产品融合部署在同一套物理服务器上，与公共云上规模化的存储服务做到了代码版本基本一致，弥合了以往混合云版本和公共云版本差距较大的问题。云定义存储是一个全新的软件定义存储，既能够在定制的存储服务器上软硬一体优化输出，也支持x86服务器到各平台的软件输出模式。其中最核心的关键词是“云定义”，具有云原云部署（onCloud）以及混合多云（HybridMultiCloud）等优势。技术产品>38云定义存储提供了数据块级别的随机存储CDS-EBS，具有低时延、强持久性、高可靠等特点，采用CDS-EBS依托于盘古提供的异步写、后台读等能力，可提供稳定的时延和故障恢复能力。CDS-EBS在云盘调度和QoS等方面经过充分优化，可保持服务器之间和云盘之间流量公平分配，保证用户稳定的体验。CDS-EBS会经过严格的故障切换测试和破坏性测试，可在进程挂掉、机器宕机、物理盘损坏、单机网络故障等场景做到业务流量平稳，同时管控节点宕机可做到持续服务，热升级可做到用户无感知。CDS-EBS提供全链路CRC校验能力，可有效校验出I/O传输过程中的网络、CPU、内存错误，不会将错误数据返回给用户。同时针对内部一些逻辑如纠删码、压缩、TRIM进行额外的算法维度的校验，确保纠删码、压缩和TRIM算法不会导致数据错误。CDS-EBS会针对冷数据进行后台扫描，除了物理介质上存储的数据CRC校验外，还包括数据读上来之后进行文件格式解析、解压后的校验，以及副本间数据一致性的校验，经过优化，绝大部分场景可保证60天内完成一轮整集群粒度的数据扫描。CDS-EBS集群规模相比公共云要小很多，最小支持6台服务器集群，目的是降低起建规模，节省用户成本。CDS-EBS会在单台服务器上混合部署不同服务，如元数据服务节点、数据存储节点等，各服务之间设置了严格的CPU和内存的隔离，经过了严格测试可保证有限资源下业务平稳运行。CDS-EBS同时针对各服务间做了软件架构上的QoS隔离以及优先级控制，保证各服务在使用飞天盘古文件系统时不会相互干扰。在CDS-EBS与CDS-OSS混部场景，同样支持不同业务间的资源隔离，确保不同业务的吞吐、空间和性能规格。CDS-EBS从性能、产能、稳定性、运维、监控告警等方面重新定义了小型化的基线，以更好地适配云定义存储场景。技术产品>39对象存储架构从上到下主要分为三层：对象语义服务层ServiceLayer(ServiceLayer)、索引服务层(KVLayer)和存储持久层，具有如下特点：∙领先的松耦合分布式架构：对象存储各个层次的功能松耦合而且是全分布式系统，全分布式服务使得架构没有单点故障，解耦架构使得各个层次可以单独灵活扩展，以便支持海量文件存储。∙高可靠性和高性能：对象存储在接入点时根据负载均衡没有热点负载，而且无状态支持快速故障切换，索引层根据字典序打散服务，根据热点自适应均衡，数据在持久层按块的粒度全打散副本/纠删码备份，故障后数据并发重建，快速恢复数据冗余，保证数据可靠性。各层解耦使得性能可以提高线性扩展能力，而且充分利用固态硬盘的能力实现分层存储加速，应对海量文件也能做到高可靠和高性能。为了更好地解决存储系统与业务系统的运维问题，云定义存储引入了基于阿里云日志服务SLS构建的可观测能力，即CDS-SLS。CDS-SLS致力于超大规模的PB级日志数据的计算存储，并针对偏计算和偏审计等场景推出专门的机型，更加灵活满足线下用户的需求，将计算和存储资源利用得更加充分。CDS-SLS秉承"提供机制而不是策略（SeparationofMechanismandPolicy）"和“单一职责（DoOneThingandDoItWell）”的经典UNIX思想，各模块中有大量的后台参数可以调节，默认值能够满足大部分业务场景的需求。CDS-SLS的数据采集Agent（Logtail）经过多年百万机器大规模验证，在性能、稳定性上都有很好的保证，相比开源软件，可以大幅降低对机器资源的占用，最高可降低90%。同时针对云原生场景Logtail和Telegraf深度集成，针对常用中间件Nginx、MySQL、MongoDB、Kafka的监控数据采集到SLS进行查询分析。针对线下数据中心场景，通过Syslog和SNMP方便地将硬件网络设备的日志接入分析告警，有效提高运维效率和可视技术产品>40化大盘信息。1）混合云备份（HybridBackupRecovery）混合云备份HBR（HybridBackupRecovery）作为阿里云统一灾备平台，是一种简单易用、敏捷高效、安全可靠的公共云数据管理服务，可以为阿里云ECS整机、ECS数据库、文件系统、NAS、OSS、Tablestore以及自建机房内的文件、数据库、虚拟机、大规模NAS等提供备份、容灾保护以及策略化归档管理。∙经济：对比自建灾备系统，节约80%以上TCO。∙高效：数据重删压缩比高达30：1，节约网络、存储资源。∙安全可靠：AES-256/KMS加密备份数据，定期数据校验检查。∙免运维：主动监控状态，出错自动告警。数据源丰富：支持阿里云上应用数据和本地数据中心等多种数据源备份。∙阿里云上应用数据：支持ECS（文件，MySQL,Oracle,SQLServer，SAPHANA)，NAS，OSS，Tablestore等阿里云上数据源备份。∙本地数据中心：支持文件，NAS，VMware，主流数据库等本地数据源备份。∙其他公共云：可以为其他云服务商上的文件提供备份服务。经济高效：备份上云，灵活扩展，省存储，省网络。∙领先的重删能力：备份数据重删比可达30:1,节约备份存储的消耗。技术产品>41∙网络流量小：本地文件永久增量备份，源端重删，全量备份也无惧流量限制。∙免费的高级功能：本地虚拟机云上恢复功能无需额外付费。简单易用：云原。生服务，学习曲线几乎为0。∙本地纯软部署：简易客户端安装，备份策略一键配置。∙云上一键启用：无需手动安装客户端即可备份ECS，NAS，OSS，Tablestore，集中控制台统一操作。∙运维全自动：备份策略自动执行，出错短信、电话、邮件多渠道告警，免运维。备份容灾归档迁移一体化：本地NAS系统备份、归档上云；本地VMware备份、容灾、∙本地NAS系统备份、归档上云：本地NAS系统海量文件智能分析，多维度展现数据特点，热数据备份，冷数据策略化归档，预测数据管理效果。全局检索，秒级发现归档文件。∙本地VMware备份、容灾、迁移上云：本地VMware虚拟机无代理增量迁移，适合核心生产系统批量上云；支持LAN模式与LAN-Free模式的VMware无代理备份上云，可on-demand恢复至ECS，实现本地系统云容灾。∙ECS备份及ECS整机跨地域/可用区容灾：ECS文件、数据库备份；ECS整机跨地域/可用区高性能容灾，支持动态增盘、扩盘，实现备份及容灾双重保护2）混合云容灾（HybridDisasterRecovery）混合云容灾HDR（HybridDisasterRecovery)是为企业级应用提供低至秒级RPO和分钟级RTO的容灾服务。覆盖本地应用容灾上云，阿里云上应用跨可用区或跨地域容灾场景，可以有效保障数据安全和业务连续性。无需自建灾备中心，云下部署简单、云上资源全自动管理、控制台集中管控。技术产品>42∙高性能：秒级RPO，数据实时复制，分钟级RTO，云上快速整机拉起。∙可验证：一键演练，10分钟完成验证，多恢复点，可验证历史版本。∙低成本：免机房建设，云上只需极少数计算资源。∙易运维：无需部署云主机，全链路监控，故障自动报警。高性能CDR：满足高RPO、RTO要求的持续数据复制。∙IO级实时复制：每个IO操作秒级上云，数据丢失量小。∙快速整机恢复：几分钟内云上整机拉起，业务快速恢复。∙一致性能：任意恢复点演练以及容灾切换，都保持分钟级RTO。集约化配置：容灾资源消耗远小于生产站点。∙极低计算资源：无需对等配置计算资源，平时仅消耗云盘和极少量计算CPU内存。∙容灾网络无消耗：云上VPC，vSwitch，流量完全免费。∙无需自建灾备中心：无需自建灾备中心，免去机房运维、硬件采购等成本。一键式操作：容灾操作一键完成。∙一键演练，一键切换：最短2分钟内整机拉起，满足快速演练，快速容灾切换需求。∙多恢复点：直观选择历史恢复点，一键拉起RTO恒定。∙全自动管理：云下部署简单、云上资源全自动管理、控制台集中管控。8、闪电立方闪电立方（Datatransport）能够为用户提供安全、高效、便捷的数据传输服务。支持将对象存储、文件存储从不同设备、不同云服务商迁移和同步到阿里云。它提供在线迁移和离技术产品>43线迁移(闪电立方)两种迁移方式，致力于解决大规模数据传输效率、安全问题等难题。微型闪电立方作为闪电立方的小型化设备，具有超强的抗震、宽温能力，可运行在自动驾驶、媒体、医院、工厂、影院等多个边缘数据迁移场景，让数据迁移更简单，更高效。∙易用灵活：迁移过程实时监控，在线显示迁移进度；迁移结果提供报告，完成情况一目了然；支持可视化配置页面，仅需3步设置部署任务。∙安全可靠：传输时，采用HTTPS数据加密通道；支持MD5或CRC自动识别源端校验规范，进行读写双向校验。∙传输性能高：支持多任务、高并发；支持个性化流控，可指定时间段内的最大流量，避免迁移数据与在线业务访问争抢网络带宽。∙扩展灵活，低成本：单台设备可支持40TB\100TB\480TB的迁移数据能力，可多套同移速度大幅提升。∙部署方便：为数据迁移而生的专业设备，标准机架和电源，可多套同时部署提升迁移效率；支持多种的数据源类型：本地文件系统、NAS、HDFS、FastDFS等。∙安全可靠：采用CRC技术对读写双向校验保障数据一致性；提供端到端的加密机制运输并上传数据；数据迁移完毕后，通过阿里云官方数据擦除机制，确保数据不会被第三方获取。支持热迁移，降低系统迁移过程中的应用停机时间。可实现不停服热迁移，存量数据迁移完成后，配合使用增量数据迁移功能，定时扫描增量将数据迁移到阿里云目标数据源中，可以将系统迁移过程中的应用停机时间降低到秒级别。技术产品>44完善的迁移监控可视化平台，无运维成本。∙迁移过程监控：支持迁移进度查询，迁移流量数据监控。∙迁移任务报告：支持迁移完成率统计，打印失败文件列表清单。∙灵活的迁移管控：支持随时启停迁移任务，动态修改迁移限流，重试失败任务。支持图形化管理。提供图形化的配置界面，用于用户登录设备，进行网络、数据迁移任务和迁移参数的配置。从本地机房到阿里云：∙第1步：选择闪电立方机型，并下单；∙第2步：设备邮寄到用户机房，上传数据；∙第3步：设备邮寄回阿里云指定机房，传输数据上云。智能媒体管理IMM（IntelligentMediaManagement）是一款场景化封装数据智能分析管理工具。为云上的文档、图片数据，提供一站式数据处理、分析、检索等管控体验。根据图