BGP高性能并行存储系统技术方案

1、BGP高性能并行存储系统技术方案目录 TOC o 1-3 h z u HYPERLINK l _Toc487399093 BGP高性能并行存储系统技术方案 PAGEREF _Toc487399093 h 1 HYPERLINK l _Toc487399094 1 项目需求分析 PAGEREF _Toc487399094 h 4 HYPERLINK l _Toc487399095 1.1 概述 PAGEREF _Toc487399095 h 4 HYPERLINK l _Toc487399096 1.2 高性能计算机集群存储系统的需求和特点： PAGEREF _Toc487399096 h 4

2、HYPERLINK l _Toc487399097 2 存储系统方案设计 PAGEREF _Toc487399097 h 5 HYPERLINK l _Toc487399098 2.1 存储系统方案拓扑 PAGEREF _Toc487399098 h 6 HYPERLINK l _Toc487399099 2.2 方案概述 PAGEREF _Toc487399099 h 6 HYPERLINK l _Toc487399100 2.3 DDN SFA12K-20存储系统 PAGEREF _Toc487399100 h 7 HYPERLINK l _Toc487399101 3 DDN服务支持 P

3、AGEREF _Toc487399101 h 11 HYPERLINK l _Toc487399102 3.1 DDN售后服务支持方案 PAGEREF _Toc487399102 h 11 HYPERLINK l _Toc487399103 3.2 培训 PAGEREF _Toc487399103 h 13 HYPERLINK l _Toc487399104 4 成功案例 PAGEREF _Toc487399104 h 14 HYPERLINK l _Toc487399105 4.1 DDN在全球石油气领域客户 PAGEREF _Toc487399105 h 14 HYPERLINK l _T

4、oc487399106 4.2 中国石油东方地球物理公司（BGP）高性能存储方案 PAGEREF _Toc487399106 h 15 HYPERLINK l _Toc487399107 4.3 中国石化石油勘探开发研究院高性能存储解决方案 PAGEREF _Toc487399107 h 17 HYPERLINK l _Toc487399108 4.4 Saudi Aramco地震数据处理存储方案 PAGEREF _Toc487399108 h 18 HYPERLINK l _Toc487399109 5 DDN公司简介 PAGEREF _Toc487399109 h 19 HYPERLINK

5、 l _Toc487399110 6 附录 PAGEREF _Toc487399110 h 22 HYPERLINK l _Toc487399111 6.1 技术规格书逐条响应表： PAGEREF _Toc487399111 h 22 HYPERLINK l _Toc487399112 6.2 技术评价关键条款和一般条款逐条应答表 PAGEREF _Toc487399112 h 34 HYPERLINK l _Toc487399113 6.3 投标方案配置表及技术偏离表 PAGEREF _Toc487399113 h 36 HYPERLINK l _Toc487399114 6.3.1 方案配

6、置表 PAGEREF _Toc487399114 h 36 HYPERLINK l _Toc487399115 6.3.2 技术规格响应/偏离表 PAGEREF _Toc487399115 h 37项目需求分析概述为了满足BGP（东方地球公司）业务系统对存储性能和容量扩展需求，DataDirect（DDN）凭借全球HPC及石油勘探领域的丰富经验为用户提供基于DDN SFA12K-20高效能存储系统方案，搭配GPFS并行文件系统，满足用户对大容量高带宽存储应用需求，它可以在业务需求改变时，线性灵活独立的扩展性能和容量，不仅能够降低横向扩容存储的复杂性，还能够通过移除存储群集的延迟元素，以提高存储

7、的响应性，以最大限度的灵活性，应对其大数据对系统架构海量数据的规模和吞吐量需求。高性能计算机集群存储系统的需求和特点：高性能计算集群中在多个节点进行大规模并行计算的同时，需要进行大量文件及数据访问，对系统的存储性能也提出非常高的要求，系统对存储系统要求主要归结为以下几点：全局统一命名空间高性能集群相比较于其它应用而言，一个显著的特点是为了保证与集群中个节点间具有一个统一的命名空间，也就是说在集群中任何一个节点，对一个文件的读写、修改都会在其它节点生效，实现这一个功能，往往需要通过网络文件系统来实现，比较常见的实现方式是NFS。当前，由于集群规模的不断增大和对存储访问性能的要求逐渐提高，并行文件

8、系统在高性能集群中的使用也越来越广泛。高性能对于集群规模较大，或高IO应用的集群用户，由于对存储的访问量很大，对共享存储的访问性能也提出了很高的要求。通常在硬件方面，可以通过提升存储磁盘阵列的性能、存储介质的性能、存储阵列访问接口性能和IO节点网络性能等，来提高整个共享存储的性能，而对于更高IO需求的系统，可以在软件层，通过并行文件系统来实现海量文件高速并发读写。高密度、大容量、可扩展性由于高性能集群规模不断扩大、数据处理能力惊人、业务数据成倍增长，对高性能存储容量需求也是非常惊人，在某些对海量存储需求的系统中，存储量往往可达到TB级甚至PB级。高密度、大容量、可扩展性存储系统，在用户管理、能

9、耗、扩容性为用户提供了未来存储系统发展的最佳选择。高可靠、高可用性高性能集群承担着重要的业务和科研任务，用户的数据具有极高的价值，同时，存储系统为全局系统，一旦出现故障，将导致整个系统不可用。所以在高性能存储系统中，无论是IO节点、存储交换机、还是存储磁盘阵列、存储介质等，每个环节都要尽可能的保证高高可靠和高可用性。存储系统方案设计根据BGP研究院并行存储项目建设要求，DDN提供高效能存储系统方案如下：DDN SFA12K-20高效能存储系统，以DDN SFA12K-20产品为硬件平台，配置GPFS并行文件系统，并配置8台服务器作为文件系统NSD Server节点。存储系统方案拓扑DDN SF

10、A12KX-20高效能存储系统拓扑方案概述方案建议采用Datadirect Networks（DDN）的SFA12K-20高效能存储存储系统，配置一对互为冗余的SFA12K-20控制器，3个DDN SS7700扩展柜（每个扩展柜有60个磁盘插槽），132块4TB 7.2K RPM 6Gb/s NL SAS硬盘（另提供10同型号、品牌块冷备不计入总存储容量），其裸存储容量为512TB，可用容量大于等于400PB。方案使用GridScaler（GPFS）文件系统，配置有8台IO节点服务器，每台服务器配置1个双端口FDR HCA卡，用于GPFS NSD服务器节点与SFA12K存储系统直接存储互联；2

11、*10GbE万兆网卡，用于GPFS NSD服务器节点与计算节点之间数据交换，方案裸设备实测带宽约12GB/s,文件系统实测读写带宽约10GB/s，IOPS实测持续读写平均值大于100000。方案架构各部分采用全冗余设计，最大程度上保障整个存储系统文档性，另外DDN SFA12K-20 存储系统具有高可扩展性，支持在线扩容，可最大程度保障用户扩容需求。本方案中存储系统NSD服务器节点通过万兆与计算节点相连，同时如果计算节点配置Infiniband网络，也可选用高速、低延迟的IB网络与计算节点相连，进行高速数据交换（连接方式可参加方案系统拓扑虚线部分）。DDN SFA12K-20存储系统DataD

12、irect Networks SFA12K-20: 直接提供给应用系统裸设备，裸设备读写带宽可达20GB/s，支持EXascaler（lustre）、Gridscaler（GPFS）并行文件系统。参数说明AppliancesActive/Active Block ServersCPU4 x Intel Ivy Bridge, 8 Cores per CPUPerformance高达20GB/s裸设备读写带宽Battery-Backed Cache128GB DDR3Up to 64GB MirroredSFX Flash cacheUp to 12.8 TB Write Intensive S

13、SDs RAID LevelsRAID 1/5/6IB Host Connectivity16 x 56Gb (FDR)FC Host Connectivity 32 x 16Gb/sDrive Support2.5” and 3.5” SAS, SATA, SSDMax Enclousre ExpansionUp to 20Supported EnclousreSS7000, SS8460DDN SFA12K存储系统磁盘柜连接方式如下图： 行业领先技术优势DDN存储在解决极端存储挑战方面有着行业所认可的丰富经验，DDN存储在高性能计算和富媒体行业处于霸主地位，被用于全球最大型网站、存档设备、

14、数百处全球最大的超级计算机和超过600家媒体。SFA12K-20DDN大规模多线程处理存储架构，将当今最先进处理器技术、总线技术和内存架构技术融为一体，并搭配最最优化的RAID引擎和数据管理算法；SFA12KX-40E采用内置存储系统处理流程，减少用户基础设施建设、降低用户存储系统总体使用成本；可满足对都延迟要求较高的应用系统的需求；存储内部采用冗余、无阻塞内部SAS光纤网络，以支持数据的并发访问和保护；存储高密度，单机柜（42U）最大可支持840块硬盘；在同一磁盘存储柜内，可支持任意比例的SSD、SAS和SATA同时使用；支持16个FDR（56GB/s）Infiniband网络端口；为高事务

15、性和高带宽应用提供无与伦比的性能均衡。大容量/体积小高密度存储机箱: 每个存储机箱最大容量为336TB（4U机箱，4TB磁盘），每个存储机柜最大可容纳840块硬盘（42U机柜）；每个机柜高达3.36PB存储容量（42U机柜，4TB磁盘）；高达40GB/s带宽，以进行读写操作；4KB随机IOPS读写缓存性能高达170万，超过140万到存储持续读写性能；超过960Gb/s存储系统内部光纤带宽；高达64GB高速镜像缓存；DDN REAct可提供即时数据优化和缓存管理功能。高可用性存储系统采用active/active双控制器模式，保障存储系统的高可用性；采用Raid技术保障系统可用性，可支持最多损失

16、机箱内20%磁盘；存储系统支持冗余、热插拔的硬件组件，可最大程度存储系统的可用性；高速存储缓存、镜像和备用电池保护DDN自主DirecProtect+技术。数据保护高效能Raid1，5，6技术；DDN 磁盘错误检测和校正功能（DIF）；日志快速驱动器重建。高效能相比较传统的存储系统，SFA20k高密度结构设计，减少不必要的存储机柜、转换开关、电源和风扇，可节省成本高达50%。易管理SNMP；基于Web图像界面；CLUI；电子邮件告警；DDN12K-20 存储系统配置一览表：DDN服务支持DDN售后服务支持方案作为SAN 基础设备技术的领导者，DDN 很好的理解关键任务数据的重要性，最大程度的提

17、供247365 的工作需求。我们根据客户需求，提供弹性的、人性化的支持方案。免费的标准服务承诺：DDN 提供3 年的硬件有限质保和90 天的软件产品支持。在质保期内，提供无限制的电话技术支持，30 天内承担故障机器维修和运输。技术支持时间为周一到周五的7:00AM6:00PM（节假日除外）。以下内容包含在免费的标准服务承诺： 支持 30 天内部件的邮寄更换服务 电话技术支持：周一到周五的 7:00AM6:00PM 90 天的软件技术支持 技术服务简报 90 天的私有网页及软件升级下载 质保部件在质保期内免费维修及设备维修的运费除了标准服务，DDN 还为部件邮寄更换和上门服务提供三种额外增加的支

18、持服务。扩充服务 包括备用部件的交换，724 小时的电话支持，进入私有技术支持网页权限。 这种方案适合想要自己执行现场维修或是想快速更换替换部件的用户。电话技术支持提供24 小时服务。此项支持方案包括软件支持和软件的网页下载。这个方案是以年为单位来销售。以下内容包含在本方案中： 核准的 24 小时内替换部件邮寄更换服务 724365 电话技术支持 软件技术支持 技术服务简报 私有网页和软件升级下载高级服务 包括上门服务，多余备件的邮寄更换，724365 电话技术支持，私有技术网站的接入权限。DDN 有一支高服务质量的SAN 专家来为您服务，可很好的解除您的维修烦恼。我们全球支持能力保证您一个电

19、话可避免现场支持。软件支持和软件的网页下载包含在此支持包中。此方案是以年为单位来销售。以下内容包含在本方案中： DDN 服务工程师的下一工作日的现场技术维修支持 核准的 24 小时内替换部件邮寄更换服务 724365 电话技术支持 软件技术支持 技术服务简报 私有网页和软件升级下载关键任务服务 这项服务方案是为承担不起长时间宕机的DDN 苛刻用户而设。这项服务需要同时购买DataDirect 公司及我们的关键任务服务合作伙伴Anacomp公司的服务。方案服务包括，本地的备件，4 小时到达现场，备件的邮寄更换，724 小时的电话支持，软件支持和升级，以及进入我们私有支持网页的权限。DDN 有一支

20、高服务质量的SAN 专家来为您服务，可很好的解除您的维修烦恼。我们全球支持能力保证您一个电话可避免现场支持。软件支持和软件的网页下载包含在此支持包中。此方案是以年为单位来销售。以下内容包含在本方案中：DataDirect 或者Anacomp 的服务工程师提供4 小时上门技术维修支持 当地“城市”备件支持 高级别的备件支持 核准的 24 小时内替换部件邮寄更换服务 724365 电话技术支持 技术服务简报 软件技术支持 私有网页和软件升级下载培训DDN可为用户提供专业存储系统硬件管理、维护管理、用户使用、文件系统管理和使用内容，培训计划安排如下：序号课程课时讲师备注DDN存储系统介绍0.5DDN

21、存储系统产品线0.5DDN存储系统结构0.5DDN存储系统的安装0.5DDN存储系统的调试1.0DDN存储和GPFS的使用1.0DDN存储管理和日常维护1.0DDN存储和GPFS故障排除1.0DDN存储和GPFS性能调优1.0GPFS安装0.5GPFS设置与调试1.0合计课时 =SUM(ABOVE) 8.5成功案例DDN在中国石油气领域，为以下单位提供了高速存储系统：中石油东方物探中石油兰州西地所中石油长庆油田中石化南京物探院中石化胜利物探院中石化北京研究院DDN在全球石油气领域客户DDN在全球为几大石油公司提供10PB以上的存储系统，例如，Saudi Aramco一次购买16套SFA12KE

22、系统，其中15套用于生产系统，一套用于测试系统。中国石油东方地球物理公司（BGP）高性能存储方案DDN提供高效能存储解决方案，主要解决了中国石油东方地球物理公司在石油勘探领域对高性能、大容量存储需求，运行主要业务平台为GeoEast。高性能存储方案配置如下：2套DDN SFA7700存储盘阵：2台DDN SFA7700主盘柜，每个主盘柜带一个SFA7000副盘柜；每台SFA7700有2个控制器，每个控制器有2个56Gb/s FQR Infiniband接口与IB交换机相连；240块 4TB 7200转硬盘；共计24个 Pools(8+1 Raid5)IO节点基本配置：共计8台IO节点；每台IO

23、节点2个Intel CPU（Intel(R) Xeon(R) CPU E5-2640 0 2.50GHz）每台IO节点64GB Memory每台IO节点通过一个双端口56GB FQR Infiniband接口与IB交换机相连文件系统采用GPFS实测峰值：最大总聚合读带宽：9.71GB/s最大总聚合写带宽：13.04GB/s单节点服务器实测读带宽：4.6GB/s单节点服务器实测写带宽：5.23GB/s存储系统拓扑如下： HYPERLINK /link?url=E-PKzaCK8zAdK-tXN8KsI14SsYdMNzE8TPZRWITkZLafrMPN-8PGo95Vbh8SjKwxrxFV0

24、w3IhEQrQJdA18NrTFzH-ef626SBxqxgxtoJjhy t _blank 中国石化石油勘探开发研究院高性能存储解决方案DDN中石化石油勘探开发研究院高性能存储解决方案，主要满足用户OMEGA软件对高性能存储需求。存储方案配置如下：1套DDN SFA7700存储盘阵：1台DDN SFA7700主盘柜，每个主盘柜带一个SFA7000副盘柜并配置2个DDN SFA8460副盘柜；DDN SFA7700主盘柜配置有2个控制器，每个控制器有2个56Gb/s FQR Infiniband接口与两台IO节点直连；168块 4TB 7,200 RPM 6Gb/s SAS硬盘；1台EF30

25、15存储，用作文件系统元数据。IO节点基本配置：共计2台IO节点；每台IO节点2个Intel CPU（Intel(R) Xeon(R) CPU E5-2620 0 2.00GHz）每台IO节点64GB Memory每台IO节点通过一个40Gb万兆卡与交换机相连，每台IO节点通过一块双端口HBA与EF3015存储相连。并行文件系统Exscaler（lustre）方案拓扑：Saudi Aramco地震数据处理存储方案沙特石油公司是全球最大的油气田公司，DDN提供的高效能存储解决方案解决了其上千节点集群对存储系统高速并发访问的需求。从2007年至今，DDN已为沙特石油公司提供约500GB/s的文件系

26、统持续读写带宽，设备类型包括DDN S2A9550，S2A9900，SFA10K和在2012年采购的基于GridScaler并行文件系统SFA10K-E（万兆存储解决方案）和SFA12K-20E（万兆和40GB QDR存储解决方案）。存储系统承载的应用如下：CSSP (Focus, Paradigm, Disco) since 2007PSDM, PSTM, PSDM Like (GPT)Reservoir Simulation (P/GP)R&D, SimulationPetrelSaudi Aramco 2012 2nd ProcurementRequirement 260GB N/N 7

27、900TB useable + Test Frame15套 SFA12KE-20 one for test frame7800 client licenses300 x 3TB SAS NL 7K, Total 4580 hdd40GE ports (8 per SFA)配置大概 200 I/O nodes x 10GE clients New Extreme Networks BDX8 10GE/40GE FabricDDN公司简介DataDirect Networks（DDN）是一家提供高性能存储的专业存储公司，总部位于美国洛杉矶，DDN提供的存储系统主要服务于大容量和高带宽应用。DDN

28、是内容存储和大数据，以及云计算时代可高度扩展的存储方案之先驱，他的产品完美解决各种复杂的存储系统难题，尤其适用于云计算，Internet 内容托管、数据备份、计算机建模和模拟、磁带置换以及影片和视频的制作及分发等领域。DDN 已经成全球第四大专业存储供应商，特别在高性能计算领域得到了广泛采用，已成为超级计算机的存储霸主。每一次的TOP500 排名中的前100 名HPC 系统，都有约60%的系统，使用DDN 的存储。例如，两次排名第一的日本的”京”就使用了15PB的DDB 存储。在2010 年11 月的全球最快的TOP500 排名中，DDN 的业绩为：排名前 10 个系统中，8 个使用DDN 存

29、储排名前 20 个系统中，15 个使用DDN 存储排名前 100 个系统中，57 个使用DDN 存储美国一些重要的国家实验室都是DDN 的客户。其中包括美国国家超级电脑应用中心、美国国家海洋和大气局预测系统实验室、美国白沙导弹基地、美国国家大气研究中心、圣地亚哥超级计算机中心、美国陆军研究实验室等。为美国的Oak Ridge 国家实验室的超级计算机提供了读或写速度为250GB/s 的带宽。 DDN 为法国的CEA 超级计算机系统提供了世界最快的文件系统，其存储的读或写的带宽可超过350GB/s。欧洲最快的德国莱布尼茨超级计算中心（LRZ）使用了DDN 的最新的SFA12K 存储产品，SFA12

30、K 针对的是大数据市场。美国橡树岭国家实验室的TITAN 系统，配置了全球最快存储系统，使用36 套DDN SFA12KX-40 系统， 其读写速度可达1400GB/s。DDN 不仅是全球高性能计算（ HPC）行业的存储霸主，还是内容核心(视频，音频，图片等)解决方案的领军者，针对具有大量内容文件和非结构化数据的应用，能解决现今最为苛刻的存储要求，包括对共享数据池的高速访问、降低大规模归档的数据中心空间和存储成本、降低模拟计算时间、以及采集和伺服海量数字内容。DDN 是全世界500 多个广播电视和后期制作公司的数据架构供应商。 DDN 的产品在中国广电市场得到了广泛应用，已经有逾三百家广电用户

31、将DDN 存储集成到其数据管理解决方案中，来满足吞吐密集的需求，包括中央和多家省级电视台。中国最大的电视网络中国中央电视台(CCTV)选择了DDN 公司的硅存储架构(S2A)平台，实现了向10亿多观众直播北京奥运会，同时，CCTV 还要向国外众多广播电视机构提供电视信号，这都给数据带宽、吞吐能力和扩展性提出了前所未有的高要求，而DDN 的产品完全满足了其需求。DDN 还是云存储的先驱，2010 年既开始为用户提供基于对象的云存储装置-WebObject Scaler（WOS）。基于Web 的面向对象的存储（WOS）在澳大利亚，英国，美国等的视频监控，政府数字安全等领域得到了广泛应用。被大大应用

32、于基于云的平台，例如：欧洲最大的在线照片共享服务网站PhotoBox（拥有超过1100 万会员，并在近15 个国家），微软Xbox live 在线游戏的网站（2300 万会员），社交游戏网站Slide，美国在线照片分享服务提供商Shutterfly 的网站（50 亿幅照片），韩国三星的手机服务。DDN 的存储系统采取了并行存储技术，高度并行端口技术（HPPT），这消除了交换机制所带来的不可避免的时间延迟，能够提供持续不变的可以充满端口带宽的数据吞吐量。DDN 的RAID 控制器内部的四个主机通道之间采用虚拟的并行DMA 体系结构，通过提供并行处理和并行数据读写途径，使在多主机的SAN 环境中具

33、有非常高的不受多主机环境影响的使用性能。此外，它还在磁盘通道之间采用了并行处理的RAID技术，从而使系统的校验计算和磁盘的访问可以并发进行。DDN 为客户提供其他厂家无法提供的服务针对高吞吐量、高实时性要求的用户, DDN 在行业中处于绝对领先地位后期制作及广播网络媒体, 实时 Web 2.0高性能计算针对需要存储的高扩展性同时具有性能一致性的用户,其他存储与DDN 的产品无可比性归档工程和生命科学石油和天然气SFA/S2A（Storage Fusion Architecture/Silicon Storage Architecture）的独特优势：为应用而优化的技术支持超大容量,极高的扩展性

34、并行存储技术（整体多线程存储处理能力）Power LUNs 和DirectRAID 技术（智能并行写入技术）虚拟端口技术无可匹敌的存储密度高效节能附录技术规格书逐条响应表：技术规格书条款详细描述响应响应参见投标文件（页码）统一开放集群式并行存储系统, 直接网络存取使用NAS，支持多种多台异构的主机系统同时连接和使用，支持的系统平台包括各Linux和Unix（IBM-AIX和Oracle/SUN- Solaris）及其不同的版本。国内外石油勘探领域成熟使用的著名厂商产品；在未来增容扩展不再增（追）加任何许可证费用。方案采用基于DDN SFA12K并行存储系统，配置GPFS并行文件系统，支持多种多

35、台异构的主机系统同时连接和使用，支持的系统平台包括各Linux和Unix（IBM-AIX和Oracle/SUN- Solaris）及其不同的版本。DDN 高速存储系统及GPFS在国内外石油勘探领域都有广泛的应用，且在未来扩容不在增（追）加任何许可证费用。参见P15并行集群分布式NAS存储系统。方案并行存储系统，具备横向扩展和纵向扩展的智能存储系统。参见P16并行集群存储架构，统一的文件系统,支持单一命名空间,支持跨存储节点的同一命名空间，并且提供单个命名空间达到PB级，对客户端用户使用完全透明。支持在线无业务中断扩展,系统能动态自动均衡所有存储节点的数据负载。并行存储系统，是一个统一的文件系统

36、，,支持单一命名空间, 支持跨节点的同一命名空间，并且提供单个命名空间达到PB或以上,对客户端使用完全透明，支持在线无中断扩展,系统能自动均衡所有节点的数据负载,。参见P2NAS存储服务器，每个服务器的配置不低于下述指标(专用固定系统者1、9、10项可变更):CPU：X86，2*Intel Xeon Haswell E5-2640v3，2.6GHz主频，8核。C610系列芯片组。内存：64GB(4GB4通道4条) DDR4-1866 RDIMM ECC，限Kingston品牌并须原厂认证、测试通过。SAS 12G控制器,2GB Cache,支持Raid0、1、5。硬盘：2块*300GB，15K

37、 RPM，SAS 6G，做RAID1。硬盘限HGST或Seagate品牌。2*10GbE光口网卡，每卡双口双活，支持RDMA。限Intel或Mellanox品牌，HPC服务器用。带SFP+多模光模块和SFP+光缆。集成显卡。无光驱。集成远程管理端口（RJ45口），支持IPMI2.0或更高。带CAT6线缆。配数字式KVM和监控网络管理，支持全功能和远程；带相应零部件。高效绿色电源模块,80PLUS白金（Platinum）或钛金（Titanium），具有主动式PFC；能效比95%。电源满配冗余,风扇冗余。2U高全宽，可用于HPC集群的机架服务器。CentOS-V6.5/RHEL-AS-V6.5（2

38、.6.32）版系统（只英文版)。服务器冷备盘:与上述硬盘同品牌同型号*1块/台。方案配置8台IO服务器作为文件系统NSD服务器，具体配置如下：CPU：X86，2*Intel Xeon Haswell E5-2640v3，2.6GHz主频，8核。C610系列芯片组。内存：64GB(4GB4通道4条) DDR4-1866 ECC，为Kingston品牌并通过原厂认证、测试通过。SAS 12G控制器, Cache2GB,支持Raid0、1、5。硬盘：HGST 2块*300GB，15KRPM，SAS/12G，做RAID1。2*10GbE光口网卡，每卡双口双活，支持RDMA，带SFP+多模光模块和SFP

39、+光缆。1 双口 FDR 56Gb HCA卡，与SFA12K存储系统连接。集成显卡。无光驱。集成远程管理端口（RJ45口），支持IPMI2.0，带CAT6线缆。配数字式KVM和监控网络管理，支持全功能和远程。高效绿色电源模块,80PLUS白金（Platinum）或钛金（Titanium），具有主动式PFC；能效比92%。电源满配冗余,风扇冗余。2U高全宽，可用于HPC集群的机架服务器。RHEL-AS-V6.5（2.6.32）版系统服务器冷备盘，提供与上述硬盘同品牌型号*1块/台参见P2多控全活，互为冗余，负载均衡。集中控制器模式则全局共享cache64GB。多个独立存储单元模式则每个控制器ca

40、che16GB。全部冗余路径硬盘须可热插拔，冗余路径到所有存储单元。DDN SFA12K专有存储系统其存储控制单元（控制器）与存储单元（存储磁盘柜）采用分离模式，SFA12kx存储系统控制器相比较于传统控制器性能更加强大，且满足一下条件：多控全活，互为冗余，负载均衡。集中控制器模式则全局共享cache64GB。多个独立存储单元模式则每个控制器cache16GB。全部冗余路径硬盘须可热插拔，冗余路径到所有存储单元。参见P2存储机箱不得采用任何串联、共享或通过JBOD连接其它机箱方式。所有存储单元须具有专用、独立并冗余的控制器。全部冗余路径到所有控制器。高效绿色电源模块,80PLUS白金（Plat

41、inum）或钛金（Titanium），具有主动式PFC；能效比92%。机箱电源须满配并多路冗余；风扇冗余。DDN SFA12K 作为专用存储设备，存储系统控制器与存储磁盘柜采用分离方式，每个存储磁盘柜通过IOM（IO模块）与控制器相连，单个存储单元并不具备独立控制器，控制单元与存储单元之间直接采用SAS高速互联。具备以下条件：存储控制器与存储磁盘柜采用高速直连方式；所有存储磁盘柜直连至存储控制器，全部冗余路径到控制器高效绿色电源模块,80PLUS白金（Platinum），具有主动式PFC；能效比92%。机箱电源须满配、多路冗余；风扇冗余。参见P2，P16首选：4TB SAS，12Gb/s，7.

42、2K RPM，3.5” Near Line 。次选：4TB SATAIII，6Gb/s，7.2K RPM，3.5”（确实不支持Near Line SAS者可投报同容量SATA盘）。全部在线活化并可使用（此处不含任何冷备盘数量）。须为高端企业级存储专用盘，经过存储厂商筛选和认证。品牌选HGST或Seagate。支持热插拔。磁盘数量为132块，类型如下：4TB 7,200 RPM 6Gb/s SAS全部在线活化并可使用（此处不含任何冷备盘数量）。品牌为HGST，为高端企业级存储专用盘，经过存储厂商筛选和认证。支持热插拔参见P2裸容量：512TB。文件系统下实际可用容量（以客户端“df -h”命令测

43、量为准）：400TB裸存储容量为：512TB文件系统下实际可用容量大于等于400TB参见P15数据交换：(2*10GbE绑定)。管理监控：2*1GbE。前端主机接口(数据交换)：2*10GbE(SFP+) /机头，支持绑定管理监控：2*1GbE。参见P2，P15数据交换网：配置24端口10GbE多模光口 + 4*40GbE端口上连到集群核心交换机。管理和监控网：配置24端口10/100/1000MbE交换机，满足监控、管理、存储、KVM等非计算网络千兆铜缆电口连接，并以2*10Gb SFP+光缆直接级连到本机群核心交换机。可与数据网合为1台交换机。须为全双工、全线速、无阻塞、低延迟HPC用网络

44、交换机。请选择Arista或Cisco或Extreme或Force10或华为产品设备。KVM控制台：配置KVM交换机（型号与计算节点机柜所配相同）并链接到集群KVM控制台上。数据交换机采用24端口10GbE多模光口+ 4*40GbE端口上联到核心交换机。1. 管理和监控网络：配置24端口10/100/1000MbE交换机，满足监控、管理、存储、KVM等非计算网络千兆铜缆电口连接，并以2*10Gb SFP+光缆直接级连到本机群核心交换机。可与数据网合为1台交换机。2. 交换机为全双工、全线速、无阻塞、低延迟HPC用网络交换机。3. VM控制台：配置KVM交换机（型号与计算节点机柜所配相同）并链接

45、到集群KVM控制台上参见P15支持存储控制器、风扇、电源等部件冗余热插拔更换；支持多块全局热备硬盘；支持多（冗余）链路（管理软件）；支持链路故障转移；负载均衡;后备供电部件能够支持缓存中的数据48小时不丢失；系统意外断电支持在线缓存备份。支持存储控制器、风扇、电源等部件冗余热插拔更换；支持多块全局热备硬盘；支持多（冗余）链路（管理软件）；支持链路故障转移；负载均衡;后备供电部件能够支持缓存中的数据48小时不丢失；系统意外断电支持在线缓存备份。参见P16支持在线动态操作，性能和容量同步线性增加。支持在线动态操作，性能和容量同步线性增加。参见P16支持存储控制器、风扇、电源等部件冗余热插拔。电源和

46、风扇须M+N冗余。支持存储控制器、风扇、电源等部件冗余热插拔。电源和风扇须M+N冗余。参见P1610GbE：实际读写聚合带宽8GB/s（读写平均，可实测）实际读写聚合带宽10GB/s（读写平均，可实测）参见P1510GbE：持续读写平均值100000。持续读写平均值100000参见P15分别提供在客户端（计算节点）Linux系统下述3类数据读/写性能值（1、64和128计算节点分别实测）：dd：模仿串行（常规处理）作业IO测试。fio：模仿不同方式存取文件的IO操作。iozone：模仿并行（偏移处理）作业IO测试。验收时将以上述指标进行符合性测试（1、64和128计算节点分别实测）。可在客户端

47、分别进行以下性能测试：dd：模仿串行（常规处理）作业IO测试。fio：模仿不同方式存取文件的IO操作。iozone：模仿并行（偏移处理）作业IO测试。验收时将以上述指标进行符合性测试（1、64和128计算节点分别实测）可以在最终验收测试集群存储操作系统应该具有硬件的镜像保护。不存在单点故障。存储保护级别采用不低于RAID6或不低于N+3:1冗余。方案存储系统，具有以下特点：集群存储操作系统应该具有硬件的镜像保护。不存在单点故障存储保护基本采用Raid6，全局热备方式参见P16支持在不停机情况下，向存储群集中增加节点存储；支持在线容量扩展及在线数据迁移。支持在不停机情况下，向存储群集中增加节点存

48、储；支持在线容量扩展及在线数据迁移。参见P16按目录（或子目录）进行使用存储文件系统容量限额管理。按用户组和用户个人进行使用存储文件系统容量限额管理。存储系统具备以下配额管理方式按目录（或子目录）进行使用存储文件系统容量限额管理。按用户组和用户个人进行使用存储文件系统容量限额管理。参见P15提供CLI和GUI WEB及SNMP网络远程监控管理及全局监控管理软件；提供图形化存储管理软件和存储性能分析工具。方案存储系统可提供CLI和GUI WEB及SNMP网络远程监控管理及全局监控管理软件；提供图形化存储管理软件和存储性能分析工具。参见P16NFS-V3和V4 (UDP和TCP),PNFS, HT

49、TP, FTP, SNMP, LDAP, NIS,HDFS，QUOTA，并行存储客户端软件协议等。方案存储系统支持NFS-V3和V4 (UDP和TCP),PNFS, HTTP, FTP, SNMP, LDAP, NIS,HDFS，QUOTA，并行存储客户端软件协议等。参见P16提供商业化专业并行分布式文件系统。提供满足服务器端软件和不受许可限制客户端软件。具有创建单一文件系统和单一全局命名空间功能。具备完全日志化管理能力。支持全功能容量限额。提供安装IBM公司的GPFS（或OneFS或PanFS）正版产品。提供GPFS商业化专业并行文件系统。提供满足服务器端软件和不受许可限制客户端软件。具有创

50、建单一文件系统和单一全局命名空间功能。具备完全日志化管理能力。支持全功能容量限额提供IBM公司的GPFS正版产品参见P2NFS-V3和V4(TCP和UDP)、PNFS。GPFS（或原厂商专有架构文件系统）的专用客户端（不限制客户端用户数目）。(CentOS/RHEL-AS)-V5.0（2.6.18）以上至V6.x（2.6.32）版本操作系统。NFS-V3和V4(TCP和UDP)、PNFS。GPFS（或原厂商专有架构文件系统）的专用客户端（不限制客户端用户数目）。(CentOS/RHEL-AS)-V5.0（2.6.18）以上至V6.x（2.6.32）版本操作系统。参见P2整套集群存储系统应具备高

51、可用性和冗余。整套存储系统无单点故障；接口模块、控制器、连接部件和磁盘等关键部件故障不影响计算集群访问数据。该方案提供存储系统在高可用方面具有以下特性：整套集群存储系统应具备高可用性和冗余。整套存储系统无单点故障；接口模块、控制器、连接部件和磁盘等关键部件故障不影响计算集群访问数据。参见P1519工业标准，42U高，深度为1100mm,下走线，优质冷轧钢板型材，最大静载荷1000kg；前后面通孔率80%。含电源PDU和分别独立的强、弱电线槽、导轨、托架和托盘；提供满足机柜内供电要求的PDU和电源输入电缆，每2个机柜提供一套独立的3相380V进线电源控制开关模块；每机柜电源进线为3相（380V）

52、电源线，电缆线为阻燃、无卤,长度最长20米左右。机柜电源PDU的用户接入端为2组各自独立的3路220V单相10A和16A并须具备智能监控功能。配备连接部件（航空接头等）和空位前挡风面板及其它配、附件。考虑机柜重量，机房设计承重650KN/M2。电源分配系统（机柜PDU，须具备CCC认证）须具备智能化监控能力和防止启动电流冲击的功能。强弱电线缆须分别（机柜左右两侧）独立布线；互不干扰。提供机架安装套件。方案中机柜和供电系统符合以下要求19工业标准，42U高，深度为1100mm,下走线，优质冷轧钢板型材，最大静载荷1000kg；前后面通孔率80%。含电源PDU和分别独立的强、弱电线槽、导轨、托架和

53、托盘；提供满足机柜内供电要求的PDU和电源输入电缆，每2个机柜提供一套独立的3相380V进线电源控制开关模块；每机柜电源进线为3相（380V）电源线，电缆线为阻燃、无卤,长度最长20米左右。机柜电源PDU的用户接入端为2组各自独立的3路220V单相10A和16A并须具备智能监控功能。配备连接部件（航空接头等）和空位前挡风面板及其它配、附件。考虑机柜重量，机房设计承重650KN/M2。电源分配系统（机柜PDU，须具备CCC认证）须具备智能化监控能力和防止启动电流冲击的功能。强弱电线缆须分别（机柜左右两侧）独立布线；互不干扰。提供机架安装套件。方案提供标准机柜及供电投标产品应在GeoEast和Ge

54、oLightning石油地震数据处理-解释一体化应用软件系统中有稳定、可靠、高效应用，投标提供一个应用实例。相关实例可参见，方案技术标中成功案例部分。参见P22满足本技术要求而提供的整套存储系统内部配套的网络和数据交换机、非易失性RAM（NVRAM）、元数据服务器和存储性能加速器等必要的组件和软件。*所投报的全部产品须通过CCC或CE、UL认证。DDN存储系统作为专用存储系统，满足本技术要求而提供的整套存储系统内部配套的网络和数据交换机、非易失性RAM（NVRAM）、元数据服务器和存储性能加速器等必要的组件和软件。且所投报的全部产品都通过CCC/CE/UL认证。参见P2同型号同批次磁盘（如投P

55、anasas应为1个备用刀片）。全部离线并不计入在可用容量和数量内。方案提供的10块冷备盘满足如下要求：同型号同批次磁盘；全部离线并不计入在可用容量和数量内。参见P15产品性能不低于技术需求和约束条件的品牌产品，如：可选：1.DDN-SFA12K-20E或更高;2.DELL-MD3460或更高;3.EMC-Isilon-X410或更高;4.IBM-SOSS-DCS3700PM或更高;5.Panasas-ActiveStor12或更高。产品选型采用DDN SFA12K-20产品，符合招标要求参见P2技术评价关键条款和一般条款逐条应答表技术评价条款具体应答应答参见投标文件（页码）NAS存储服务器方

56、案采用8个引擎服务器作为GridScaler（GPFS）并行文件系统引擎服务器，且相关配置满足招标需求。参见P2控制器DDN SFA12K专有存储系统其存储控制单元（控制器）与存储单元（存储磁盘柜）采用分离模式，SFA12kx存储系统控制器相比较于传统控制器性能更加强大，每个控制器可提供2 X Intel Ivy Bridge 8 core CPU; 128GB DDR3 Battery-Backed Cache; 8个FDR IB高速端口等，该项DDN作为专用存储设备控制器数量不受限制.参见P2存储单元方案采用DDN SFA12K 3个存储单元，存储单元与控制器分离，采用直连方式相连，作为专

57、用存储系统满足存储招标要求。参见P16磁盘方案采用132个NL SAS硬盘参见P2容量方案存储裸容量为512TB，文件系统实际容量大于400TB，优于系统招标要求参见P2网络连接方案后端与存储连接部分采用56Gb FDR 高速IB网络连接，前端与集群计算节点之间采用2*10GbE万兆网络相连，满足招标要求参见P2聚合带宽方案设计存储系统聚合带宽大于等于10GB/s，远优于存储方案招标需求参见P15IOPS方案设计存储读写IOPS性能为100000，符合招标需求IOPS性能参见P15IO吞吐率方案设计满足招标IO吞吐率要求参见P15客户端IO性能可通过Iozone，FIO，dd等标准测试工具进行

58、测试，且达到客户招标需求。参见P15文件系统文件系统采用DDN GridScaler（GPFS）并行文件系统，各项指标满足存储招标需求。参见P2保护级别方案存储系统，具有以下特点：集群存储操作系统应该具有硬件的镜像保护。不存在单点故障存储保护基本采用Raid6，全局热备方式参见P18冗余该投标方案全冗余设计，符合招标需求P15扩展型该方案所采用DDN SFA12K存储系统具有高可扩展性，支持在线扩容，满足招标需求。P15机柜和供电方案提供标准机柜和供电系统，符合招标需求。P15产品适应性DDN SFA系列产品广泛应用于全球石油石化领域，有着丰富的行业应用经验，产品适用性符合招标需求P22整解决

59、方案及其他部分投标方案所提供高效能存储方案符合招标需求招标技术方案投标方案配置表及技术偏离表方案配置表DDN System:ProductDecriptionQty12K20D-56IBSFA7700 Active/Active Redundant Block Appliance, with 60 drive slots, 4x 56Gb/s FDR IB ports, 64 GB memory, dual power-fail protection modules, power cables and rail kit.1SS7K-SBODSS7000 60-Slot 6Gb/s SAS/SA

60、TA/SSD enclosure. Includes 2x I/O modules, redundant power supplies, power cables, rail kit for rack mounting and cable management arms.37K-4T6SX3UN4TB 7,200 RPM 6Gb/s SAS drive module for SS7000 enclosure, Gen 2132CBL-HMSMS-3M6Gb/s HD mSAS to mSAS cable, 3m12File System Infrastructure:ProductDecrip