行业知识finance cmcc platform selection in-jimmy如何选择支持平台

1、中国移动应用如何选择支持平台Jimmy LiSystem Architect of China MobileCommunication Sector, IBM GCG议题选择硬件平台的考虑因素中国移动各类应用部署服务器的建议云计算在中国移动应用的使用建议一体机在中国移动的应用建议议题选择硬件平台的考虑因素中国移动各类应用部署服务器的建议云计算在中国移动应用的使用建议一体机在中国移动的应用建议4选择硬件平台的考虑因素IT战略硬件平台架构部署模式与规模非功能性需求成本模型IT战略BSS全网共性业务开始考虑大集中Page 5 第三阶段 （网状网NGBOSS,C/P分离）第二阶段 （二级运营体系，省集

2、中改造）第一阶段（GSM全球漫游）96年之前（模拟电话）：地市脱机采集、省市两级计费、营帐；移动电话漫游计费结算中心一期工程（国内跨省跨地市漫游）；业务驱动力：满足基本语音计费、国内漫游需求 96-98年（GSM）：省级联机采集、省市两级计费、营帐；计费结算中心二期工程（GSM全球漫游）；业务驱动力：GSM全球漫游要求的高额报告，通过计费结算二期实现省级联机采集98-01年：省级联机采集、集中计费、省市两级营帐，计费结算三期；业务驱动力：降低欠费风险、实时采集、计费99年：基于智能网的神州行预付费业务98年-01年：省级集中计费业务驱动力：省级管控、实时采集、计费 01-03年：BOSS1.0

3、，省集中改造。业务驱动力：预付费业务，客户品牌管理、集团省级管控04-05年：BOSS1.5(含INGW、容灾)，应用软件版本统一、系统整合（渠道、大客户）。业务驱动力：支持集团业务、预付费数据业务、市场营销支撑、欠费风险控制。容灾、网管工程实施，保障业务提供连续性和规范化管理。一级BOSS：通过枢纽与生产职能建成两级BOSS系统，支撑异地客服、账务、跨省业务开展06-07年：BOSS2.0，系统优化、流程优化。业务驱动力：集团客户、渠道管理、客服号码整合、初步的CRM能力。07-08年：BOSS3.0，满足市场奥运要求。与客服深度整合，加强客户服务能力。支撑3G业务。建立接口域数据同步稽核机

4、制。BOSS与DSMP部分功能的重新部署NGBOSS按照客户运营域C、产品运营域P、运营管理域M、运营分析域A进行规划建设08-09年NG1阶段一（包括NG1-CRM 1.0/NG1-BOSS1.0/NG1-经分1.0/NG1-BOMC1.0）：重点是C域的BOSS3.0营业与客服横向整合、纵向与计费账务解耦，形成CRM与短流程的BOSS10-11年NG1阶段二（包括NG1-CRM 2.0、NG1-BOSS2.0、NG1-宽带PBOSS1.0、NG1-经分2.0、NG1-BOMC2.0）：重点支撑长流程业务为代表的宽带业务（自建、铁通、广电合作、传统集团专线等）、家庭客户、融合套餐的支撑IT战

5、略OSS中国移动正在实施同时2个OSS战略目标一、集中管理从省级的地区性管理整合为集中管理一部分省由南方基地 (SB)集中管理，而其他省由北方基地 (NB) 集中管理作为大集中的一部分, 总部 (HQ) 功能会合并至北方基地NB二、在北方基地, 南方基地以及各省，从OSS 1.0架构向OSS 2.0 架构发展7硬件平台架构RISC设备X86设备性能在中高端设备仍具有明显优势。I/O能力能普遍高于X86设备。X86服务器的性能与RISC小型机相比，仍然有所差距。纯计算能力而言，近几年X86服务器的性能提升很快，与小型机差距正在缩小性价比用于需要更加稳定可靠、7x24小时满负荷运转的一些核心关键应

6、用，减少业务中断带来的高风险成本X86在硬件、软件、后期维护、升级等方面的支出都要比小型机低得多可靠性在硬件架构设计上使用了更多的冗余技术和高可用技术，可靠性更高（成本也更高）硬件质量水平参差不齐，有高有低，硬件做工上稍差。近几年X86服务器的可靠性也在不断提升售后服务IBM、HP等可以提升一站式的整套厂商级服务，小机厂商本身也确实拥有很强的技术支持队伍部分厂商的X86服务支持队伍水平参差不齐。对于x86+Linux用户而言，很多开源系统的服务跟不上是个问题。软件兼容性小机往往对自家厂商的软件有更好的支持与契合度，但容易被一家厂商绑定，迁移成本较高支持Linux、Windows、Solaris

7、等多种操作系统，软件厂商众多，迁移相对容易软硬件一体化程度设备各部件及周边软件一般由同一厂家研发生产、一体化程度较高，因此可以提供稳定的整套解决方案工业标准化产品，第三方生产的标准部件和软件比较多可扩展性单机的扩展能力小机具有优势，尤其是中高端设备在集群横向扩展领域，X86集群具有优势技术成熟度小型机发展历史更悠久，各项技术成熟度更高X86设备的技术成熟度也在不断提高易用性开发维护门槛高，对技术人员的要求更高，往往要经过专门的培训工业标准化产品，开发维护门槛低，维护管理起来也更容易8部署模式OSUserInterOSAppOSDataHypervisorOSOSOSUserInterAppDa

8、taOSUserInterAppData专用所有组件跨物理服务器放置服务器间不存在资源共享极为有限的负载管理作业集中式所有组件放在一起资源共享颗粒度非常小操作系统负责管理作业虚拟化所有组件跨逻辑分区放置资源共享比较粗旷Hypervisor 负责管理作业TMz/OSAIXWPAR共享/强壮程度9单个作业模型的假设:平均利用率: 20.7%; 峰值: 79% 随机发生当越来越多类似的作业增加的时候，平均利用率会接近峰值8:1 39% 平均, 峰值 76%16:1 48% 平均, 峰值 78%64:1 61% 平均, 峰值 78%所需要CPUs 的增长速度会减慢部署模式整合作业负载可以优化利用率大服

9、务器利用率更高10部署模式采用大服务器虚拟化利用率更高CPU & 内存I/O 口和板卡大或小的作业数据中心更节能电源和整流器冷却空间提高生产效率订购，跟踪，淘汰安装，布线，维护Hypervisor的补丁安装 更大的 系统RAS更多 RAS 特性更少部件随需计算能力11部署随着规模而改变数量会影响运维补丁周期，集群，布线, 新的实例容灾压力测试内部通讯和流程策略 标准化集中化和虚拟化的部署模型自动化Hit the earthMiss the earthApollo 132%12功能性和非功能性需求功能性需求“做什么”正确的业务结果输入输出行为外部接口屏幕展现非功能性需求“怎么做好”可用性需求每分

10、钟交易量安全需求部署的容易性和支持容灾需求未来增长基于非功能性需求选择平台13TCO模型IT 成本关键的直接成本运维人员软件数据中心间接成本故障停机安全复杂度业务灵活性IT架构风险新业务投产规划阶段非常重要升级步骤 /技术变更降低成本的步骤集中化/虚拟化提高使用率与技术发展一致自动化每单位作业的成本共享模式的成本趋于下降共享模式的成本趋于下降专用设备的成本趋于上升EstRun14总结很多因素影响平台的选择从整体企业的IT战略角度出发，选择更优的解决方案关注部署模式与部署规模大的服务器提供更好的虚拟化优点非功能性需求是平台选择的重要因素本地因素会影响平台选择（如：业务与应用特点）议题选择硬件平台

11、的考虑因素中国移动各类应用部署服务器的建议云计算在中国移动应用的使用建议一体机在中国移动的应用建议业务支撑类主要业务及特点分析BOSS、BI、CRM、客服安全管控平台处理能力类型交易型交易型单个业务处理能力要求高中业务交易量极高低存储容量极高低数据存储类型结构化非结构化为主平时业务负载高一般是否存在突发业务浪涌是否硬件容量要求变化频率一般一般实时性要求高高可靠性要求极高一般业务支撑类采用硬件平台的建议业务支撑类的硬件需求分析表明：该类应用以数据库应用为主，属于在线事务处理型业务，要求单台机器的处理性能越高越好。业务处理的数据量较大，而且需要快速地响应业务支撑类应用对可靠性要求比较高，需要持续地

12、为手机用户提供服务该类业务的不确定性较大，对于扩展性的要求极高，无论是纵向扩展还是横向扩展都需要。建议：服务器：以小型机为主网络支撑类主要业务及特点分析话务传输数据网管和信令监测、网络资源管理、电子运维、处理能力类型交易型单个业务处理能力要求高业务交易量高存储容量高数据存储类型非结构化平时业务负载高是否存在突发业务浪涌是硬件容量要求变化频率一般实时性要求高可靠性要求高网络支撑类采用硬件平台的建议网络支撑类的硬件需求分析表明：该类应用以数据库应用为主，属于在线事务处理型业务，要求单台机器的处理性能越高越好。业务处理的数据量较大，而且需要快速地响应业务支撑类应用对可靠性要求比较高，需要保证通信网络

13、的畅通该类业务的应用来自不同的开发商，所以在统一资源管理的同时要保证资源的相对独立性，应用的峰值错开，可以利用虚拟化技术提高资源的使用率。网络支撑类应用硬件平台选择的建议：服务器：以小型机为主，PC服务器为辅管理信息化系统主要业务及特点分析ERP、财务等专门化应用OA及邮件等通用应用处理能力类型交易型交易型、下载、浏览单个业务处理能力要求较高一般业务交易量少较少存储容量一般一般数据存储类型结构化非结构化为主平时业务负载低一般是否存在突发业务浪涌较少较少硬件容量要求变化频率低低实时性要求一般较高可靠性要求一般高管理信息化系统采用硬件平台的建议管理信息化系统的硬件需求分析表明：平台数量较多，但是单

14、个平台的负载偏低，因而资源利用率低是比较突出的问题。业务规模也比较确定，对于扩展性的要求并不突出。管理信息化系统硬件平台的建议：服务器：通过小型机提供更高的整合度。部分应用可以部署在PC服务器上，IDC与互联网应用主要业务及特点分析CDN自营增值业务集团客户业务处理能力类型高IO性能的下载、浏览交易型、下载型交易型、内容型单个业务处理能力要求低低较高业务交易量极高高低存储容量高一般低数据存储类型非结构化非结构化为主结构化、非结构化平时业务负载一般一般低是否存在突发业务浪涌是是否硬件容量要求变化频率高高较高实时性要求高高高可靠性要求一般，通过应用架构保证一般，通过应用架构保证较高IDC与互联网应

15、用采用硬件平台的建议IDC与互联网应用的硬件需求分析表明：单个业务请求的处理能力要求不高，但是整体的业务量庞大，导致整体的计算、存储需求庞大。该类业务的不确定性较大，对于扩展性的要求极高。结论：IDC与互联网应用适合采用以下硬件平台服务器：采用PC服务器为主，小型机为辅(满足部分高端集团客户的需求)，分别建立资源池，进行统一管理。移动增值业务主要业务及特点分析网络相关(短彩信等)互联网类增值业务(飞信等)处理能力类型交易型交易型、下载、浏览单个业务处理能力要求低低业务交易量极高高存储容量一般高数据存储类型非结构化非结构化为主平时业务负载一般一般是否存在突发业务浪涌是是硬件容量要求变化频率高高实

16、时性要求高高可靠性要求高一般，通过应用架构保证移动增值业务采用硬件平台的建议移动增值业务的硬件需求分析表明：单个业务请求的处理能力要求不高，但是整体的业务量庞大，导致整体的计算、存储需求庞大。该类业务的不确定性较大，对于扩展性的要求极高。该类业务对于上线周期要求很高，因此统一的资源池有助于降低在硬件基础平台上消耗的人力及时间成本。结论：移动增值业务适合采用：服务器：PC服务器为主26中国移动各类应用部署服务器的建议数据库层数据处理层应用层展现层接口层BSSUnixUnixUnix / x86Unix / x86Unix / x86OSSUnix / x86Unix / x86Unix / x8

17、6x86 / Unixx86 / UnixMSSUnix / x86Unix / x86Unix / x86x86 / Unixx86 / UnixVASUnix / x86Unix / x86x86 / Unixx86x86ICTx86/ Unixx86/ Unixx86 / Unixx86x86议题选择硬件平台的考虑因素中国移动各类应用部署服务器的建议云计算在中国移动应用的使用建议一体机在中国移动的应用建议28云计算的定义基础设施作为服务(IaaS)(计算, 存储,网络)应用, 流程和信息作为服务(SaaS/BPaaS)软件平台作为服务(PaaS)(优化的中间件 应用服务器, 数据库服务器

18、, 门户服务器, etc.)私有云(数据中心 内部网)公共云(服务提供商 互连网)混合云(公共和私有)Services as a service云计算是一种服务模式，让人们可以随时地、方便地、随需地利用网络访问一个共享的可配置的计算资源(比如，服务器，存储，网络，应用和服务)，这些资源可以被快速地部署和释放，只需要很小程度地管理或者服务供应商的参与美国国家标准与技术研究院(NIST)29云计算的探讨我们发现关于云计算的观点有：说法一：云计算就是x86不同的业务需要不同的硬件平台， 在大型企业部署私有云，小型机在可靠性上及可扩展性上是x86无法取代的云计算需要支持异构的资源池，从而支持不同类型的

19、业务说法二：云计算就是虚拟化云计算不是技术,是一个IT使用和交付模式实现云计算有不同的途径，包括IaaS/PaaS/SaaS虚拟化是IaaS的三个核心技术之一，另外两个是自动化和服务管理说法三：有云计算就能够容灾容灾是为了保证数据中心发生灾难时的业务连续性，要通过建立异地双/三中心来实现云计算的本质是利用共享的平台为不同的用户提供服务30云计算的探讨（续）说法四：云计算可以实现小机器合成大机器 (水平扩展) 云技术带来资源池动态调配的优势，但云并不能将几台小机器叠加成一台高处理能力机器一般地，Scale Up(升级扩展）和Scale Out(水平扩展）是提高系统处理能力的两种思路有ISV在Pa

20、aS/SaaS层面探讨过参照GOOGLE，用Scale Out分布式处理模式部署BSS应用，希望获取平行处理能力的扩展性及使用低成本服务器构建关键应用的可能性但是，分布式系统是有自身建设特征和限制的，并不适合所有应用需求分布式系统的限制来自于著名的“CAP”理论，即Consistency(一致性), Availability(可用性), Partition tolerance(分布) 三部分在系统实现只可同时满足二点，无法三者兼顾（Eric Brewer提出，由MIT学者Seth Gilbert与Nancy Lynch数学证明）31Eric Brewer的CAP理论Consistency 数据

21、一致性 Availability 可用性即响应速度不受限制Partition Tolerance 分区耐受性在任一时刻，分布式系统只有两项能同时成立不要浪费精力突破上面限制一些常见的应用场景C+A 传统OLTP系统A+P Web 2.0应用C+P 对响应时间不敏感应用如长交易、OLAP等可用性一致性 分区耐受性32中国移动核心应用云计算部署策略中国移动的核心应用都是以数据库为中心的BOSS计费库、帐务库等CRM营业库、客服库等数据库应用的关注点是一致性C和可用性A，互联网企业的应用大部分是基于页面与文件系统，如google, amazon, taobao等，关注点是P+A页面的特征是仅读取，数

22、据单向从服务端流向客户端，大量数据是无结构类型互联网应用一般不存在如计费帐务等批量性处理的应用类型应用特征的不同决定了中国移动核心应用系统的云计算部署策略与互联网企业不同核心应用系统重点关注IaaS方案33IaaS在中国移动应用的使用建议BOSS、CRM、客服分析类应用（BI,OSS)ERP、财务等专门化应用OA及邮件等通用应用OSS网管系统IDC集团客户业务互联网类增值业务(飞信等)作业负载特点在线交易为主数据分析在线交易为主以文件下载、浏览为主，交易为辅交易处理、实时数据处理交易型、内容型混合在线交易较少、下载、浏览为主单个业务处理能力要求高一般（应用可拆分）较高一般高较高(取决于最终用户

23、)低业务交易量极高一般少较少一般低高存储容量极高极高，数据分析量大一般一般高低高数据存储类型结构化为主结构化、非结构化结构化非结构化为主结构化，非结构化结构化、非结构化非结构化为主平时业务负载高高低一般高低一般是否存在突发业务浪涌是是较少较少一般取决于用户类型是硬件容量要求变化频率低低低低低较高高实时性要求高高一般较高高高(取决于SLA)高可靠性要求高高一般高高较高一般，通过应用架构保证云计算适用度低中中高低高高云计算技术采用建议Unix云/大型主机云(System z)Unix云，Linux云或者Windows云Unix + x86 混合云Unix + x86 混合云SoNASUnix +

24、x86 混合云Unix + x86 混合云 x86 云或者iDataPlexSoNAS34举例说明：IaaS在OSS网管系统的应用建议实时性要求可靠性要求目前应用运行的硬件平台（OSS 2.0的试运行或试验系统）云计算技术的采用建议业务开通系统较高较高数据库：Unix 应用服务器：x86Power + x86 混合云考虑业务规模，按应用或者按省统一建设云平台云平台统一管理Unix服务器和x86服务器数据库资源池：Unix 应用服务器以及Web服务器资源池：x86 资源在各池内部灵活调度综合网络资源管理系统较高较高数据库：Unix 应用服务器：x86网络激活系统较高较高投诉处理系统一般较高业务质

25、量监控系统一般一般综合监控系统高高数据库：Unix 应用服务器：x86无线网优平台一般一般综合分析系统一般一般数据库：Unix 应用服务器：x86网络业务监测系统一般一般数据库：Unix 应用服务器：x86电子运维系统较高较高数据库：Unix 应用服务器：x86运维知识管理系统低低议题选择硬件平台的考虑因素中国移动各类应用部署服务器的建议云计算在中国移动应用的使用建议一体机在中国移动的应用建议软硬件一体化解决方案概况典型软硬件一体化解决方案的发展情况TeraData：一直提供数据仓库（OLAP）软硬件一体化方案,有多款不同定位的一体机产品；Oracle：2008年推出基于HP x86服务器的面

26、向OLAP应用的Exadata V12009年推出基于SUN x86服务器的面向OLAP和OLTP应用的Exadata V2EMC： 2010年收购Greenplum数据库厂商后推出一体化方案GreenPulm Data Computing Appliance“软硬件一体化解决方案”：由厂商整合数据库软件、服务器、存储设备，提供给客户的软硬件标准化、预安装解决方案，主要面向OLAP（数据分析）应用。36IBM ConfidentialTeraData软硬件一体化解决方案37IBM Confidential单独软件版本Teradata v13小型数据集市（5）极大容量数据仓库（1）企业级数据仓库

27、（2）极高性能主机（4）企业级动态数据仓库（5）目标定位可运行于任何基于Intel CPU的服务器平台应用数据集市应用开发环境巨量数据的存储与分析企业级数据仓库超高性能实时分析平台企业级数据仓库EDW动态数据仓库ADW可扩展能力（节点据量）1节点1节点1024节点45节点24节点4096节点可扩展能力（驱动数据量）Up to 6 TBUp to 7 TBUp to 50 PBUp to 275 TB Up to 24TBUp to 86 PB适用于部门级、地市级数据仓库平台部门级、地市级分析平台， 入门级数据仓库分析型备份环境，超长历史周期数据分析战略性商务智能, 决策支持，快速扫描操作型商务

28、智能，较少数据量，超高性能动态混合负载管理，实时数据更新，同时满足战术型和战略型响应时间要求一体机的最早供应商，只面向OLAP应用，产品覆盖轻量级到重量级的不同应用场景；作为OLAP市场领先厂商之一，NCR TeraData一体机产品采用MPP（海量并行处理架构）技术架构。在一体机领域，其功能、性能较为领先，行业经验和实施经验较丰富；由于其很强的封闭性，目前在中国移动仅少数省份的BASS系统采用TeraData的一体化解决方案；Oracle Exadata软硬件一体化解决方案38IBM ConfidentialBasicQuarter RackHalf RackFull Rack2-8 Ful

29、l RacksDatabase Servers124816-64Exadata Storage Servers1371428-112Total Disk Capacity7.2 /24TB21/72 TB50/168 TB200 2688TBUser Data pressed)2 /7 TB6/21 TB14 /50 TB28/100 TB56 800 TBI/O Throughput (disks)1.5/.85 GB/sec4.5/2.5 GB/sec10.5/6 GB/sec21/12 GB/sec1.7 - 168 GB/secI/O Throughput (flash)3.6 GB/

30、sec11 GB/sec25 GB/sec50 GB/sec100 - 400 GB/secI/O per Second (IOPS)75,000225,000500,0001,000,0001M 8MRacksN/A1112-82009年收购SUN之后，Oracle推出了基于SUN X86服务器的Exadata V2Exadata V2运行Oracle 11g数据库软件，使用了InfiniBand、存储服务器、混合压缩、闪存缓存处理等技术，并对Oralce数据库架构进行了一定的改良；ExadataV2在国内电信行业应用案例较少，具体的实施需要依赖于国内的系统集成商；100/336 TBEMC GreenPulm软硬件一体化解决方案39IBM ConfidentialGreenPulm为数据仓库厂商，其GreenPulm数据库软件基于MPP架构，支持MapReduce云计算技术，于2010年7月被EMC收购；收购GreenPulm后，EMC推出了面向OLAP市场的GreenPlum Data Computing Appliance（DCA）一体化解决方案（X86+Linux+GreenPulm数据库软件+EMC存储）；EM