华为中国信通院-云财务管理实践白皮书

云财务管理实践白皮书华为云计算技术有限公司：孟凡忠、顾昊、刘丽娟、温嘉佳、杨善数字经济步入全面发展阶段，企业逐渐从上云阶段走向深度用云阶段，传统“粗放式”的上云用云带来的云成本问题已经超越云安全成为头号挑战，在企业依托云助力数字化转型的持续性动作中，如何精细化管理云成本以增加资金效率、降低用云复杂度，在此背景下，华为云联合中国信息通信研究院云计算与大数据研究所撰写本白皮书，从行业发展背景、云上成本关键挑战、FinOps方面，详细阐述深度用云管云阶段企业如何精细化管理云成本，最大化云价值，支撑企业提升资源利用率，以增强核心竞争力。本步入深度用云阶段，管理云成本成头号挑战01企业管理云成本的四大难点02企业管理云成本优秀框架FinOps03企业通过云财务管理实践FinOps，精细化管理云成本044.1云财务管理全景 4.2成本可视 4.2.1预测和规划 4.2.2管理与控制 4.2.3分配和可视 4.3成本优化 4.3.1优化优先级 4.3.2计费优化 4.3.3资源优化 4.3.4架构优化 4.4持续运营 实践案例135.1华为终端云深入实践FinOps，实现降本增效 5.2哔哩哔哩实践FinOps，降低数亿IT成本 5.3极氪智能科技运用FinOps理念及云原生技术降低IT成本 5.4美的楼宇科技基于云原生技术的成本优化实践 5.5陌陌基于容器技术实现资源成本优化 5.6顺丰基于资源精细化运营平台的降本实践 未来展望27 数字经济是当今世界最重要的经济形态，数字化浪潮正席卷所有行业，企业能否跟上时代潮流及数字化转型尤为重要，这需要先进的基础设施来支撑。云计算已从IT资源的服务形式演变为新一代软件架构范式，支撑企业实现以资源为中心到以应用为中心，成为企业数字化转型和智能升级的基石。国务院《“十四五”数字经云、上平台，降低技术和资金壁垒，加快企业数字化转型”。以云为底座开展数字化已成为行业共识，在政策、产政企是行业数字化转型的主力军，也是云化的先行者，用云的深度和政企数字化程度息息相关，决定了能否最大化释放数字生产力。随着数字化转型的深入，行业加速从业务上云向深度用云转型，管理云成本成为行业普遍需 越来越多的企业在利用云的敏捷高效、创新、弹性扩展优势时，遇到云成本管理方面的一系列难题，主要有如按需弹性使用，云成本随着业务动态变化，如高峰流量时云资源占用多、升级扩容时动态开通新资源等。云成本可变导致静态规划的预算和业务实际产生的后云资源消费贯穿用云整个过程，采购责任也从集中采购变为去中心化采购，即工程师直接购买资源而非传统的采购人员购买。工程师在消费云资源时成本的调优方案。而且云厂商持续发布新服务、新实例类型和新的优惠。面对云上新，但也容易产生资源浪费。如为了追求性能和质量，业务团队配置的资源大于运行工作负载实际需要，产生过度配置；部分项目新建环境或者扩容实例企业面对这些问题时，发现难以精细化管理云成本，也难以选择最优的成本调优路径，且实施的优化措施成效FinOps是“Finance”和FinOps是“Finance”和金会将FinOps定义为“不断发展的云财务管理纪律和文化实践，通过帮助工程、财务、技术和业务团队在数据驱动的支出决策上进行协作，使组织获得最大的业企业云资源消费贯穿用云的整个过程，管理云成本也需要持续迭代优化。FinOps框架提出三阶段(可视、优化、持续运营)实践模型，指导企业持续优化。在优化时，FinOps指导企业找到成本、质量与效率的平衡，避免企业为了极低成本导致业务效率和稳定性受影响。在一个公司FinOps进展不一，不同团队可能FinOps指导企业通过多团队协作和基于数据决策，精细化管理云成本。各业务团队成本可业基于数据决策云投资，保障企业核心业务和战略业务方向的支出。企业应用FinOps后，持续降FinOpsFinOpsOperateInformOptimize活用户数)FinOps 企业通过云财务管理实践FinOpsFinOps企业通过云财务管理实践FinOps，4.1云财务管理全景企业需要E2E的云财务管理能力进行FinOps实践，实现管好云，降低用云复杂度，加速企业数字化转型。建议企业优先使用云厂家提供的云财务管理方案，从小规模开始，在适合本企业的FinOps活动成熟的情况下逐步扩大规同时，企业云消费贯穿上云的整个过程，企业需要从组织、文化、流程等方面建设成本运营体系，构建长效机在云成本可变情况下，成本所有支出需要有跟踪和可视。通过成本监控，运行时及时管控异常成本，变事后通过多维度精细化分析，看清成本结构与趋势；将成本分配到责任团队，使各责任团队清晰了解自己业务成在云成本可变情况下，成本所有支出需要有跟踪和可视。通过成本监控，运行时及时管控异常成本，变事后通过多维度精细化分析，看清成本结构与趋势；将成本分配到责任团队，使各责任团队清晰了解自己业务成本，加强团队成本意识，支4.2成本可视成本可视是理解成本构成和优化成本的基础。成本可视使企业看清成本结构和趋势、预测未来云开支，让企业通过数据支撑决策，最终确保云支出与业务目标保持一致。分配到业务团队的成本报告也有助于加强团队成本意无论已经用云，还是刚刚开始云迁移之旅，都需要定期完成未来规划并做好计划跟踪，实现规划先行。规划阶段首先需要规划匹配企业管理模型云上IT治理架构，合理预估未来云成本，并通过4.2.1预测和规划随着经营范围和规模的不断扩大，企业不断建立子公司、分公司，子公司再建立孙公司，大部门也逐步拆分成多个小部门，组织结构的层级也就越来越多。企业的IT治理架构也会受到组织结构的影响，需要匹配企业管理模型，帮助企业以多层级组织的方式管理人、财、物，所有资源都可以找到责任团队。企业根据组织结构合理规划IT治理架构后，可将成本分配到业务团队，让各利用云厂商的企业组织+多账号、项目、标签能力，助力企业合理规划组织，通过合理的IT治理架构支撑各部•中小型企业以及单账号客户：优先使用项目来映射组织。如果存在更多维度、更细粒度规划的诉求，可以使用标签作为组织规划的补充。比如用标签来 企业通过云财务管理实践FinOps，精细随着企业深度上云，企业云上支出持续高速增长，如何预估未来云成本对企业的规划至关重要。企业未来用云业务或者出海等在其他区域提供服务产生的云成本。由于云支出是可变的，没有一种预测方法可以适用所有场景，结合基于趋势（已上云业务的历史支出作为输入）的预测和基于业务驱动因素（例如新业务上云或区域扩张）的预.利用成本预测能力，结合机器学习和基于规则，根据客户的历史波动预测未来时间范围的成本.利用价格计算器，根据新规划业务所需的资源，自主搭配估算未来成本。预算超支是管理云成本核心难题之一。完成组织和成本的规划后，企业可以为各业务团队制定预算，并跟踪各业务团队预算执行情况。通过预算跟踪，确保各业务团队及时看到预算执行情况，并根据实际成本和预算的差异及利用云厂家预算管理能力，对规划的预算做跟踪，并可以精细化4.2.2管理与控制云资源按需灵活扩展，云成本在用云过程中不再固定不变。为了避免意外账单，需要在用云过程中精细化控分析根因也至关重要。如发现异常成本时，需要确认是业务发展导致，还是资源过度配置或资源闲置导致，并根据云厂家提供多种能力帮助企业监控处理运行时异常成本。包括异常成本监控和根因分析、超预算监控、资金可.超预算监控：设置预算超支预警，及时接收系统发出的短信或邮件预警。对应责任人可结合成本分析和业务.可用额度监控：监控资金可用额度是否不足，避.资源包预警：监控资源包剩余量，避免资源包用尽自动转为按需计费。 企业通过云财务管理实践FinOps，精细云厂商会向客户出具实际消费的账单，企业可以根据云厂商的账单，快速评估每月支出是否和预计一致，并对每一笔消费都明明白白。如果支出和预期不一致，企•从汇总到明细看清每一笔消费。使用多维度汇总账单(按产品类型、企业项目、区域、计费模式)、明细账单•各企业对账流程存在差异，可通过个性化对账提升对账效率和体验，包括自定义信息卡片布局，自定义汇总维度(按产品汇总、按产品规格)，自定义嵌套方式(账号、计费模式、产品类型、账单类型)。4.2.3分配和可视成本分配支撑企业将成本分配到各业务团队中，使得各业务团队的成本清晰可见。根据清晰的成本，业务部门可准确定价，并平衡成本、稳定性和性能，经济高效的提供领先方案。企业管理者基于数据决策各业务的云开支，品牌A成本分析报告(成本占比) 企业通过云财务管理实践FinOps，精细成本分析报告(成本占比)•公共成本分配：利用云厂商公共成本拆分能力，将公共成本（例如共享资源&平台服务等公共成本、未及时¥¥总成本自定义规则分配部门A拆分公告成本拆分公告成本针对跨团队共享使用的云资源成本，如CDN、直播、共享带宽等，各业务团队使用量比例变化较大，则需要•按布局维度查看云成本，针对灾备、分析、转码、运维等网络容忍度高模块，分析是否可使用乌兰察布、贵 企业通过云财务管理实践FinOps，精细4.3成本优化各业务成本可视后，就可以针对主要支出驱动因素（例如计算、数据库、存储、网络或其他高阶服务）进行优化改善。典型业务云化模型包括布局、资源、数据，以及短信、云中间件等，需要从业务角度考察成本与业务之间的平衡，发现潜在降本方向，在以业务稳定性、可靠性为前提，并兼顾业务云支出的主要影响因素是费率和用量，结合云化业务模型和成本数据分析优化措施，包括费用优化、资源优化和业务架构优化三种类型。对多种优化措施，企业需要首先基于业务目标、对业务影响、优化投入和收益等维度确4.3.1优化优先级企业根据业务目标、对业务影响、优化代价和收益的评估，确定优化目标和优化措施优先级。确定优化措施优先级后，就可制定优化目标与计划，按计划实施优化。优化措施执行完毕后，企业通过成本可视及时评估优化效 企业通过云财务管理实践FinOps，精细4.3.2计费优化云服务存在按需、包年包月、资源包、竞价实例等多种计费模式，不同的计费模式有着不同的适用场景。企业根据自己的需要，合理选择各种计费模式来适配不同的业务•包年包月：通过预付一定周期的资源使用费用，来获取优惠的计费模式。一般适用于资源长期使用，业务较利用云厂家计费优化能力，基于历史消费数据，通过智能消费预测算法和优化建议算法进行综合对比测算，降•通过资源包的使用率/覆盖率分析，了解已购资源包的使用情况，识别资源包购买过多（使用率低），还是），4.3.3资源优化使用云厂商资源优化能力，根据历史消费和资源使用情况，识别低利用率资源并获得优化建议。企业可参考给出的优化建议、节省金额，协同业务团队实施优化，提升资源利用率。如识别空闲云主机后，针对长时间不再使用的闲置资源进行关停；对低负载使用的资源进行降配；对有忙时闲时使用的场景，通过灵活计费方式(节省计划+按4.3.4架构优化结合企业业务场景优化方案架构，对业务布局、资源规划、数据各层次成本进行优化，如在线离线业务混合部署提升资源利用率、存算分离使计算和存储各自按需使用避免绑定浪费国家已启动“东数西算”工程，将东部发达地区的数据，传输到西部算力资源丰富的地区进行运算、存储。西部数据中心综合成本有明显优势，低PUE低能耗，如贵阳资源价格比广州上海等区域低10%左右。企业可将灾备、离线分析、转码、运维等对网络要求低的系统 企业通过云财务管理实践FinOps，精细广告电商等在线作业服务SLA要求较高，高峰时段明显，使用资源存在潮汐现象；大数据/转码等离线作业容错性高，计算需求大，可容忍较高的时延。为了保证在线业务的性能和稳定性，通常按波峰时需要申请资源，这样在传统大数据方案计算和存储融合部署，扩容磁盘时必须扩容计算节点，在实际使用时产生浪费。如某导购网站日志分析业务，存储经常扩容，计算需求没有明显增长，计算资源浪费；某互联网客户推荐业务，存储容量缓慢线性增加，计算突发需求大，峰值计算资源消耗是低使用对象存储代替HDFS/本地盘，计算存储分离，多种计算组件独立部署，计算和存储各自按需使用，避免绑 企业通过云财务管理实践FinOps，精细4.4持续运营企业云消费贯穿上云的整个过程，企业需要从组织、文化、流程等方面•联席例会：组织多角色参与的例会(如月度例会)，审视预算执行情况、讨论风险应对策略、总结优化经验和•主动推送预算报告给业务责任人，让业务团队根据预算执行情况调整云使用，避免超支；业务团队预算超支减少人工工作量，提升运营效率。如设置自动启停云资源策略、设置超过额度后限制开通新资源•评估下一轮优化目标和方案，启动下一轮“可视、优化、持5.1华为终端云深入实践FinOps，实现降本增效华为终端云业务量非常大，数亿的终端和账号会随时连接云端，产生数亿的并发连接。华为终端云从百万用户到数亿用户的发展过程中，云的灵活和弹性让基础设施和应用架构快速适应了业务的发展。随着云的大量和深度使用，云资源规模变得非常大，带来了资源使用率的下降，成本的上升高于业务的上升。因此华为终端云基于华为云的云财务管理解决方案和自身实践，建设了成本洞察、成本优化、成本运营的端到端能力，还把FinOps作为一种文化，融入到研发、运维和财务的各环节中。最终不但带来巨大的直接成本收益，还规范了云资源的使用，成为华为数据的可视化是基础，确保可以呈现出基本的成本数据。华为终端云不仅要求成本“能看到”，还要能对数据对每个云资源都建立好标签。标签的关键信息包括组织（归属哪个团队、哪个部门、哪个项目等），业务信息（归团队、部门等企业内部组织建立关联，同时还华为终端云管理成本的一个核心是预算，预算为云资源的使用框定了一个基本的范围。对于超出预算范围的资源使用，需要业务团队、平台团队和SRE一起去审视。所以针对预算，形成了全方位的视图，包括：预算目标、预云上的资源类型繁多复杂，华为终端云针对不同类型的资源，建立了一套完整的指标体系，用于全方位的了解资源的使用情况，作为提升资源利用率的基础。以云上的虚拟机为例，首先从指标上看，需要重点关注CPU利用率和内存使用率；同时，要定义好CPU利用率和内存使用率的目标，可以看到虚拟机CPU利用率和内存使用率的视 云上资源除了种类繁多复杂，其合同、单价、折扣率、结算等信息，不同资源也是不同的，需要综合考虑最优方案。华为终端云针对合同与价格等商务层面信息，建立了一套数字化的体系。对于技术人员来说，需要综合考虑价格因素做选型，比如说，从单价上看包年包月实例折扣率更低，整体价格优势下，在一些弹性场景下也可以选择包年包月。对财务（比如要制定怎样的框架合同）、供应链（比如某个服务的折扣对整体影响最大）、规划（根据历史结算信息预测未来使用）人员来说，可以利用这些信息做整体设把云上的资源信息，通过大数据的分析，形成成本上的综合视图，为成本的优化提供最直观的输入。包括：成2.成本优化，建设上百种工程能力，覆盖华为终端云把历史上成本优化的能力，形成可复制的工程化能力，覆盖了主要的云上服务，包括：计算、网有了成本优化的武器库是不够的，还要有精细的管理方法去驱动组织去做成本优化。华为终端云管理驱动措施对于华为终端云这样几千人的大团队，每个人都有不同角色，属于不同团队，负责不同业务，面临的成本问题千人千面。每个人都可以通过跟AI助手对话，获取成本优化的相应信息：有哪些方面的成本还可以优化，如何进行管理云成本涉及到的领域多，每个人都需参与进来，需要有一整套的数字化工具。对于华为终端云，这套数字化工具就承载在成本运营平台上。数字化平台的底层需要利用大数据技术，对原始数据进行处理建模；上层的可视化报表，尽管已经提供了常用视角的洞察，但仍然完全满足每个角色的需要。通过引入低代码技术，运营平台的用确保预算按计划执行是管理云成本的关键之一。华为终端云对预算的执行有一套完善机制，预算制定好以后，需要持续的监控预算的执行情况：业务部门对云资源的使用，需要有专门的平台部门（通常是SRE）对预算的使用进行管控，确保在预算范围内对资源进行使用。执行过程中做好流程设置，既要让避免资源的随意使用造成浪费，MLOps关注于提升GPU/NPU的使用率。除了对云资源的直接使用，财务、供应量等团队也会把成本治理的相关要 5.2哔哩哔哩实践FinOps，降低数亿IT成本制和执行，那么问题则是成本控制力度不足，缺乏成本数据导致各业务团队没法深度参与。从2022年开始，基于FinOps的一整套理论，开展了成本洞察、成本优化和成本运营等一系列的工作，各业务也都积极参与到降本工作据。支持全域账单，对所有IT成本按照业务、组织、服务进行拆分，通过技术账单推广，让业务研发快速、全面地支持定期技术账单的中台出账、业务对账、账单分析、针对优化、效果反馈的对账流程，对账中分析现有成本的组成与分配，跟进当期成本优化项目效果，确定未来降本增效方向，实现成本问题的精细化、可视化、责任化，涵盖服务器、套餐类资源利用率数据的采集、可视化、自定义查询。制定利用率目标，建立公司内各类技术中台建立效能模型，支持平台资源水位线管理，度量使打通多部门数据壁垒，采集并清洗和转换基础数据，建设资产、成本、使用率数仓，支持成本优化项目的多维度数据需求。通过使用数据挖掘、机器学习和可视化工具，辅助业务根据成本模型数据分析，点播带宽的优化主要思路是降低码率和降低单价。具体实现包括窄带高清编码系统、AV1覆盖、机器学习优化转码预测、清晰度策略、廉价带宽占比提升、自建CDN专线互联、内容分层、削峰填谷服务器成本优化的主要手段包括硬件迭代和服务器虚拟化混部。硬件迭代速度极快，每一次迭代在降低单位算力的成本，因此应尽量引导业务配合硬件升级。服务器虚拟化混部主要基于资源的效能模型，包括提升容器总资源量、池化率、分配率和利用率等手段。此外，混部也是提升利用率的一大利器，可以利用不同业务的潮汐效应，分根据业务特性适配资源是云上项目的重要一环。网络流量的计费方式有按带宽计费和按流量计费，网络线路类型也有不同选择，需根据业务特点选择最优计费方式。IaaS类资源多以实例使用时长的形式计费，可在申请阶段就控制新增资源量。其他产品采用自研或公有云方案，需根据产品的功能需求、成本等因素进行选择。混合云方案可为了降低成本并实现成本最优化，需要更加严格地控制预算。由于预算实际执行的时间可能与预算规划时间相隔较长，内部和外部都可能发生变化，因此需要及时根据变化进行调整，以尽量减少金额。通过上述的技术手段来协助进行预算控制。使用数据分析工具来监控和分析预算执行情况通过资源的生命周期管理，定期Review资源利用率，及时清退低利用率资源，减少资源5.3极氪智能科技运用FinOps理念及云原生技术降低IT成本极氪智能科技面临着电动汽车和智能驾驶等新技术的迅速发展。为了提高竞争力，企业决定运用FinOps理念优化IT基础设施降低运营成本。首先，企业通过成本预测和预算规划，让未来成本可视；其次，运行对账和异常控制，让支出和异常成本可视；最后，分析现有成本的组成与分配，实 企业发现，由于多个数据中心的维护及多种IT基础设施之间的运维复杂性，造成了高昂的运营成本。因此，企业决定采用多云策略，将部分非关键业务迁移到云端，实现按需付企业分析发现，当前IT基础设施资源利用率较低，存在大量闲置或低效使用的资源。企业决定采用容器化技术，实现应用的快速部署和轻量化管理，提高资源利用率，同时减少软硬件维护成本。极氪汽车自动驾驶需要采购多台GPU硬件设备，同时为了资源可以高效利用，采用多台GPU组件容器云的方案来共享资源，通过技术手段降低在深入了解业务需求和IT基础设施现状后，企业发现数据处理和存储方面存在冗余和不合理的配置。企业采用存算分离的技术方案，将计算和存储资源分离，使得资源可以根据需求进行灵企业建立了专门的FinOps团队，跨部门协同工作，共同为企业IT基础设施降本增效。团队成员分别来自技术、企业倡导全员参与，普及成本意识，鼓励员工在日常工作中关注企业制定了明确的成本运营目标，并将其分解为各个部门和个人层面，确保目标的实现。同时，企业定期审查企业每季度进行一次成本复盘，总结过去的经验教训，及时调整和优化成本控制策略。同时，企业鼓励员工提.构建成本的自动化管理能力握资源使用情况；利用自动化脚本，实现资源的自动调通过以上举措，极氪汽车制造商成功地运用FinOps理念及云原生技术实现了IT成本的降低，也充分展示了FinOps理念在实际应用中的价值，以及云原生技术在降低企业IT成本方面的潜力。企业应充分利用这些理念和技5.4美的楼宇科技基于云原生技术的成本优化实践数据技术已成为企业竞争和创新的重要支撑，作为暖通行业和智慧楼宇行业的领军企业，美的楼宇科技深知数据技术在其发展中的不可或缺性，然而面对着业务的快速扩张、数据极速暴涨的情况，导致资源成本居高不下，业根据当前的业务布局，从区域维度（海内外、国内区域分布）、业务分级、业务分类等方面进行分析，寻找可根据云资源、本地资源的分配情况，持续利用率情况，结合业务场景，分析并列举需要增降配、分离或合并、根据年度成本结构，按月查看各资源线、业务线的成本结构和成本走向趋势，分析成本构成，挖掘可降本资经过深入分析，我们发现在数据平台的架构、存储管理和监控、数据备份和恢复策略等方面，具有采用云原生首先，采用数据压缩、去重、快照等技术来优化存储空间的使用，并确保备份和恢复策略的可靠性和效率，避免不必要的存储资源浪费，例如，只备份必要的数据、避免重复备份等，再通过引入存储管理和监控工具，精确监视数据存储的使用情况，及时发现问题并进行解决，并对存储资源进行分类管理，将不同等级、不同访问频率的数 另外，采取冷热数据分离策略，将热数据存储在高性能设备上、冷数据存储在低成本介质上，在保障整体数据处理性能的同时，实现成本最小化。我们分析发现，数据中台80%是冷数据，且只有20%的冷数据需要在特定时期此外，我们将数据存储在多个分布式源站上，以提高数据的可靠性，同时也为数据的备份提供更全面的保障。采取该方案，可以将数据备份的时间缩短50%以上，在降低备份成本的同时提供更可靠的数据备份与恢复策略，并相比于之前的架构，新架构使得机器成本降低了50%以上、聚合上卷查询，关联查询方面性能可以提升20-30同时，容器技术可以用来保持数据分析应用程序的隔离性，使它们更容易管理，并针对不同业务容器执行不同在未来的数字化发展进程中，降本增效是企业必然要面对的事情，楼宇科技iBUILDING美的楼宇数字化平台在不断丰富和完善数字化能力，满足建筑智能化市场的需求，并不断地利用云原生技术进行创新，为市场带来性价比5.5陌陌基于容器技术实现资源成本优化我们发现相对传统虚机，容器在资源管理上粒度更细，更有助力提升资源的利用率，因此首先我们将相关业务•单节点上实例的平均部署密度非常低：平均每个节点只有10几个实例，主要受限于K8s原生静态调度缺陷导•在线业务集群的流量有明显的波峰波谷特征：晚高峰期间峰值足够高，但是凌晨又非常低，导致日平均利用节点负载长尾的问题不仅制约了资源利用率提升，还会影响业务的稳定性，所以我们优先针对节点负载长尾的问题和方案进行了分析。该问题的根因在于，实例调度时所参考的实例资源、节点资源申请量与业务在晚高峰时的解决这个问题的关键在于，调度实例时能预测出节点在下一个晚高峰时的真实使用率，考虑到节点所消耗资源是由运行在上面的服务实例所占用的，因此可以通过预测晚高峰时段服务因为同一服务每天利用率变化很小，所以我们通过某服务前一天晚高峰的利用率直接获取当天晚高峰的利用率，然后将所预测的服务晚高峰数据后，转化成实际的资源损耗，再聚合成节点粒度的资源损耗，最终得出节点的同时，为了解决节点上服务实例组合不断变化的问题，我们在系统初始化时将节点利用率的预测值设置为当前时刻节点上所包含实例在上一个晚高峰时段利用率的聚合，当实例有新增或者删除时，系统基于informer机制实时 在将服务晚高峰数据转换成节点数据过程中，会存在一些数据合并不准确的问题，如上图所示，如果只是把前一天服务实例晚高峰的利用率叠加，那么会得到预测曲线B的结果，但由于晚高峰期间节点上所有服务实例的负载以服务器的真实利用率要低于所有服务实例的max之和。为了解决这类问题，我们把聚合维度缩小到了10分钟，晚高峰从(19:00到23:00）每10分钟采集聚合1次，这样就能尽可能获取到接近真实利用率曲线的预测序列，序列形成基于以上方案，我们有效地解决了容器集群中的节点负载长尾的问题，上线后的实际效果如下基于底层的容器资源信息，构建上层的业务资源用量平台，帮助业务更清楚地了解到部门内资源开销都聚焦在定期制定成本运营目标：制定合理的年度、季度的成本优化目标，多维度多团队配合推进，从少买服务器到不围绕容器集群进行全面的指标体系建设：从调度、容量、画像多个角度进行精细化运营，及时发现存在的不合5.6顺丰基于资源精细化运营平台的降本实践顺丰作为物流行业龙头企业，海量数据的存储、计算成本占据IT成本的一大部分，通过探索和落地FinOps，顺丰建立了以资源数字化运营为基础的，成本可洞察、可优化的资源 •存算一体的基础设施架构无法进行存储或计算的定向按需伸缩•冗余数据、垃圾数据占据不小的存储资源，有很大.打造弹性大数据底盘能力我们以顺丰本地IDC机房为基础，打造跨机房+公有云弹性资源供给资源进行缩减，高峰时借助别的机房闲置资源和公有云资源进行补充扩容以满足业务需求，从而使资源利用率得到1)存储跨机房融合：数据多机房自动分布，数据副本异步实时自动分布到不同机房，对比传统方式，做到了2)缓存精细化、智能化：数据透明缓存，缓存的读写对用户透明无感，可以0门槛使用，缓存数据生命周期3)资源精