数据业务虚拟化平台模型的构建

数据业务虚拟化平台模型的构建

1主机资源、设备以及热资源整合现在，考虑到存储需求的快速扩展和数据处理数据的快速扩展，我们需要简单、快速、兼容地实现数据偏移，并快速完成文件备份。升级换代后,我们又将面临另外一个问题,原有的系统主机资源、存储设备是否还能够利旧并重复使用?有没有办法将新旧多个物理设备整合起来,共同使用?虚拟化技术可以将运算、网络与存储资源集中,构成可以动态分配的资源池(RescourcePool),从而能够应对大量运算单元的同时高速存取,能够动态扩充容量而不影响系统效能,并且具备高可靠度与复原能力。通过建设统一的数据业务虚拟化平台的模型,可以实现对资源的有效利用,在安全可靠和海量计算存储的基础上,在动态资源池中将运算、网络与存储资源集中,形成高效的应用软件开发和运行平台。2平台模型如何虚拟化数据业务2.1资源池及运营管理平台本文提出的虚拟化平台以云计算为依托,能够支持丰富的基于云计算的典型应用类型,整个系统架构分为资源池管理平台、资源池统一调度、主机资源池、存储资源池、网络资源池,如图1所示。⑴资源池管理平台也叫资源运营管理平台,它作为统一虚拟化平台中的核心模块,负责整个资源池资源的统一管理和调度,负责整个平台运行监控、运维以及整个资源的商业运营流程支撑。⑵资源池统一调度:统一平台中所有资源呈现和管理实体,接受资源池运营管理平台的指令。⑶主机资源池负责资源池中所有计算资源的管理和调度。资源池管理包括虚拟机资源、物理机资源部分。⑷存储资源池负责资源池中所有存储资源的管理和调度。存储资源池包括块存储和文件存储。块存储资源虚拟化支持不同厂商SAN设备的异构化,屏蔽各种设备硬件差异;文件存储通过业界成熟、流行的云存储技术来实现,屏蔽存储位置的差异,为业务平台提供按需分配、弹性扩展的存储服务。⑸网络资源池负责资源池中所有网络资源的管理和调度,为业务平台提供外部接入、设备访问、业务管理、网络隔离等所需要的网络连接服务。作为统一的应用系统,必须保障系统对用户的响应速度和服务质量,因此系统需要较高的可靠性,在系统发生故障或因事故造成中断后,能确保数据的准确性、完整性和一致性,并具备迅速恢复的能力。在进行本系统架构设计、应用设计、数据库设计、系统部署等工作时都充分考虑了性能问题,同时系统需要具有良好的开放性,保证系统具有较长的生命力,满足将来系统发展的要求。2.2接口协议及规则配置●平台模型采用了微内核设计技术。在微内核结构中,操作系统的内核只需要提供最基本、最核心的一部分操作,其他的管理程序被最大程度地置于内核之外,使得操作系统内部结构简单清晰,程序代码的维护非常方便。外部程序可以独立运行,只有当程序需要内核的协助时,才通过相关接口对内核发出请求调用,便于扩展和增加其他plug-in组件。●规则配置采用python语言实现。python语言语法简洁清晰,并且具有功能强大的类库,能够方便地把用其他语言编写的各种模块结合在一起,然后对其中有特别需要的部分采用更适合的语言改写,清晰而又一致的风格保证了产品的高扩展性和可定制性。●平台采用OSGi插件框架,区别于目前大多数基于MVC的分层设计,具有高可复用性、高效性,可以动态改变系统行为。具有热插拔的插件体系结构可以方便地插入第三方插件,可对特定的软件开发特定的插件,进行监控管理。●数据业务虚拟化平台采用JMX进行监控和配置,可以跨越一系列异构的操作系统平台、系统体系结构和网络传输协议,灵活地开发无缝集成的系统、网络和服务管理的应用,提高了系统的可管理性。3平台模型如何实现数据服务3.1资源池用户通过统一数据业务虚拟化平台能够提供资源的各种视图,供各类人员查看了解,同时平台可提供各种功能管理和使用资源池。数据业务虚拟化平台分为管理门户和服务门户,管理门户供统一平台的各类管理员使用,服务门户主要面向统一平台的各种用户。设备管理用来接入和管理统一平台资源池中的各种物理设备,包括主机设备、存储设备和网络设备。资源池中的每一台物理设备在管理门户进行基本的配置后,纳入管理平台统一管理。为了满足用户对资源的各种不同需求,达到资源共享、软硬件解耦的目的,资源池中的各种设备进行虚拟化后纳入资源池中,供用户使用。管理平台能够管理现有主流的虚拟化产品,通过这些虚拟化产品对外提供各种规格的虚拟机。根据属性不同,资源池中的各种物理资源和虚拟资源可组成不同的资源池,管理平台对资源池统一管理、监控、调度等,满足用户的资源使用要求。平台可以对系统中各项资源的运行情况和操作进行监控记录,为系统的日常维护提供依据,包括资源池拓扑展示、资源监控、告警管理、日志管理、备份恢复等。3.2不统一主机的资源池构建实验为验证本文提出的数据业务虚拟化平台利用资源,提高处理效率的能力,下面介绍两个验证性测试。测试一:将4种不同数量的数据集分组,分别在本地与虚拟化平台上运行。本地环境为SUSELinux、Intel四核2.6GHz、8GByte内存,实验验证结果见表1。由表1可以看出,虚拟化平台的执行效率大大高于单机系统的执行效率,而且数据量越大,这种优势就越明显。测试二:选择上海移动为测试局点,搭建数据业务虚拟化平台,构建资源池,用37台服务器主机和304个CPUcore,虚拟化替代原有的78台物理服务器主机,在Cluster中将物理和虚拟设备统一进行管理。通过物理设备查看其上的每一台虚拟机,可以看出,在业务的高峰值CPU的最大利用率与以前相比不仅没有升高,反而有了降低,虚拟化平台的峰值最大使用率最高不超过40%。上述两个测试充分论证了本文提出的数据业务虚拟化平台能够有效解决业务平台的重复建设多、资源利用率低、维护难度大、安全级别差等多个问题,实现了闲置资产、资源的有效利用。4基于mazdapc机的促销创新本文提出的数据业务虚拟化平台模型将已有设备进行梳理,使得闲置资源得到有效利用,全面支撑业务平台的平滑割接和弹性扩展。该平台通过各种虚拟化技术将服务器资源、存储资源、网络资源整合起来,构建了一个组织完善的资源池,动态管理和分配各项设备和资源,实现了对所有资源的统一化、集中化、智能化调度和管理。同时考虑系统安全、负载均衡、数据备份等需求,利旧现网设备,充分利用现有的网络资源。Aspect为马自达车主提供平板电脑应用程序全球客户联络和微软平台解决方案提供商Aspect公司近期开发了一款平板电脑应用程序——MazdaConnect,帮助马自达加拿大公司提升消费者体验,并进一步提升该公司与用户之间的服务体验。MazdaConnect为用户提供的功能包括经销商地址导航、车主手册以及与社交媒体平台的即时连接。这款双语应用程序是马自达加拿大公司2011年12月销售业绩成为史上最佳的助力之一。作为马自达加拿大公司经销店促销活动的一部分,凡在2011年12月购买马自达公司车辆的车主,都获得了一台预装有MazdaConnect应用程序的平板电脑。马自达公司开展此次促销的目的是让消费者了解其MazdaConnect技术,这套技术设计用于改善驾驶性能以及节油效率。Aspect的数字团队专注于不断提升用户体验,为众多公司开发数字社区和移动应用,使其能够为最终用户提供渗透式、互动品牌体验。凭借对于用户独特需求的全面了解,Aspect的数字解决方案可帮助各公司进一步密切与客户的联系。华为完成全球首个LTECategory4商用网测试2012年5月4日,全球领先的信息与通信解决方案供应商华为技术有限公司在欧洲完成全球首个基于商用LTE网络的Category4测试。该测试呈现了完美的LTE性能,数据下载速率达到理论值150Mbit/s。此次商用网测试是基于华为在欧洲部署的商用LTE网络及Category4终端。该终端采用业界首款支持LTER9协议的海思LTE多模芯片。此次测试对LTE技术发展具有重大意义,将有助于应对移动宽带时代的数据流量快速增长,从而将为最终用户提供无与伦比的移动宽带新体验。华为一直