D-JET存储技术白皮书

1、谷数科技D-JET 6000光纤SAN存储系统技术白皮书谷数科技（中国）有限公司 HYPERLINK 版本号：CDMS-WP1010-0120目录 TOC o 1-5 h z HYPERLINK l bookmark25 o Current Document 简介1 HYPERLINK l bookmark29 o Current Document 系统架构2 HYPERLINK l bookmark33 o Current Document D-JET 6000系统性能分析3 HYPERLINK l bookmark37 o Current Document IOPS 性能4 HYPERLI

2、NK l bookmark43 o Current Document 带宽性能4 HYPERLINK l bookmark49 o Current Document D-JET存储操作系统6 HYPERLINK l bookmark52 o Current Document 双活动控制器模式6 HYPERLINK l bookmark55 o Current Document Failover64.1.2动态数据路径6 HYPERLINK l bookmark60 o Current Document 带电池Write-Back写Cache和写缓存镜像8 HYPERLINK l bookmar

3、k63 o Current Document 动态缓存技术(Dynamic Cache Technique)8 HYPERLINK l bookmark66 o Current Document 存储资源虚拟化9 HYPERLINK l bookmark72 o Current Document 自动精简配置(ThinProvisioning)11 HYPERLINK l bookmark75 o Current Document 4.6数据保护124.6.1数据一致性12 HYPERLINK l bookmark79 o Current Document RAID 保护12 HYPERLIN

4、K l bookmark86 o Current Document 快照134.6.4热备存储块14 HYPERLINK l bookmark90 o Current Document 4.6.5 多路径I/O通道14 HYPERLINK l bookmark93 o Current Document D-JET 6000 硬件平台15 HYPERLINK l bookmark97 o Current Document 5.1.1处理器15 HYPERLINK l bookmark101 o Current Document I/O 通道15 HYPERLINK l bookmark105 o

5、 Current Document Cache 16 HYPERLINK l bookmark109 o Current Document 5.1.4磁盘扩展单元16 HYPERLINK l bookmark112 o Current Document 总结17简介近年来，信息及数字革命使得企业数据量呈爆炸式增长。以企业数据中心大 规模数据库和联机事务处理(OLTP)为代表的交互密集型应用，以计算仿真、气 象预报、石油勘探、动漫渲染等高性能计算和富媒体为代表的吞吐密集型应用， 使得企业需要更高性能、更大容量的集中在线存储系统以满足多种业务需求。据IDC预测，到2012年，企业80%的数据将为“

6、非结构化”数据，“非结构 化”数据主要是以文档、图片、视频等为代表的各类型数据文件，这些数据尺寸 较大，对数据的访问通常是大块数据连续的读写操作，需要集中存储系统提供很 高的带宽。同时，企业仍存在着大量“结构化”数据，如企业订单处理系统、预定 系统、数据库系统、产品管理系统、作业批处理系统等，这些系统处理大量的“结 构化”数据。“结构化”数据尺寸较小，以小块数据存储为主，通常主机端对此类数 据的访问多为随机性访问，需要存储系统提供很高的IOPS性能。现有的存储系统能提供较好IOPS性能或者带宽性能，但目前还没有两者俱 佳的存储系统。目前，在大规模业务应用中，以集群系统为例，顶级的计算集群 有超

7、过20万颗CPU核，在系统写入过程中会产生数万并发的写操作。大型的 数据系统拥有数以百亿计的文件，在任何时间都会产生每秒数十万的文件访问操 作。随着处理器内核数量的增长，多线程并行处理技术的成熟，允许主机端发起 并发I/O访问的数量越来越多。大规模多线程I/O访问会产生越来越多的随机访 问，并且需要对系统元数据进行频繁的访问。同时，存储系统往往用于多种业务 存储，这些业务可能包括大量的“结构化”数据和“非结构化”数据。据此，就需要 存储系统提供足够的带宽资源以满足海量并发I/O访问的数据传输需求；同时提 供很高的IOPS性能满足大规模随即I/O访问、元数据和其他“结构化”数据的访 问需求。本文

8、所述的D-JET 6000存储系统是谷数科技针对各种交互密集型应用和吞 吐密集型应用所推出的高性能光纤SAN系统。D-JET 6000是面向大规模多核 计算环境而设计开发的海量数据存储系统，采用多种技术进行优化，支持混合工 作负载模式，提供无与伦比的IOPS和带宽性能。同时其卓越的扩展性和前所未 有的投资保护为其提供了无可比拟的适应性，可以满足各种不断变化的需求。系统架构D-JET系列光纤SAN存储系统层次结构如图2-1所示。D-JET系统底层采 用SSD、FC、SATA磁盘作为存储介质，依托于D-JET 6000高性能系统硬件 平台，通过D-JET存储操作系统对存储资源进行虚拟化整合，并发挥

9、出系统各 组件效能，对上层HPC、数据库、数字媒体等业务提供数据块级存储访问，满 足各种业务应用对存储系统高带宽和高IOPS的性能需求。HPC、数据库、富媒体业务应用D-JET存储操作系统D-JET基础架构D-JET 6000D-JET硬件平台D-JET存储介质图2-1 D-JET 6000光纤SAN存储系统层次结构D-JET 6000是D-JET系列面向高端用户推出的光纤SAN存储系统，它采 用最先进的硬件平台，在多个方面进行技术革新，面向多任务并发处理设计，采 用基于内存一致性的Active-Active存储集群，具有大规模并行I/O通道。使得 D-JET 6000存储系统可以提供业界领先

10、IOPS和带宽性能，同时具有高安全可 靠性，可用性强等特点。D-JET 6000系统体系结构如图2-2所示。Storage 1Controller llllllll32 x 8Gb FC Host PortsHost Channel Interfaceost Channel InterfacefCPU CPU)QPU CPU)Read CacheWriteCache80Gb/sInternal Cache LinkWriteCacheInternal FC InterfaceActive / ActiveModeC (CPU) CPURead CacheJ (CPU) (CPU)Interna

11、l FC Interface32 x 8Gb FC Disk PortsSSDFCSATAUp to 1024 Disk Driver,Support RAID 0 1、5、6、10、50、60图2-2 D-JET 6000体系结构D-JET 6000单控制器可配置4颗Intel 7500系列6核心处理器,32512GB ECC读缓存，32GB带电池写缓存。双控制器之间部署80Gb/s的内部Cache 数据传输链路（ICL）用于内部通信。双控制器共可提供32个8Gb光纤主机端 口，32个8Gb光纤磁盘端口，后端可支持高达1024块磁盘。D-JET 6000支持 SSD、FC、SATA磁盘，支持

12、不同类型磁盘的混合使用，支持RAID 0、1、5、 6、10、50、60等多种RAID数据保护形式。D-JET 6000系统内部提供高达256Gb 的数据交换和传输能力，每个传输通道均可实现点对点直连方式。相对于共享总 线的方式大大提升系统内部数据交换能力。D-JET 6000对外可提供高达 300,000的磁盘IOPS性能，12.8GB/S的持续稳定读写带宽，1024TB的海量存 储空间。D-JET 6000系统性能分析存储系统的性能主要分析其IOPS和带宽性能。D-JET 6000系统可提供目 前业界最高的IOPS和带宽性能。满足交互密集型、吞吐密集型或者混合负载型 业务数据的海量存储。3

13、.1 IOPS 性能D-JET 6000单控制器系统可提供高达150,000的磁盘IOPS处理能力，双 活动(Active-Active)控制器系统可提供高达300,000的磁盘IOPS性能，700,000 来自于Cache的IOPS性能。在数据库等应用环境中，数据大部分为随即访问，Cache的命中率很低， 需要存储系统提供很高的磁盘IOPS性能。ORION (Oracle I/O Calibration Tool) 是Oracle公司推出的存储系统I/O性能测试工具，广泛用于测试运行Oracle数 据库的存储系统I/O性能。ORION可以很好的模拟实际使用过程中Oracle数据 库、OLTP

14、和数据仓库的I/O负载。D-JET 6000在使用ORION进行的乱序I/O 读写(数据块大小为4K)的测试过程中，对外可提供高达300,000的磁盘IOPS 性能。单套D-JET 6000双控制器系统即可满足当前大型数据库、OLTP和数据 仓库等交互密集型业务系统的随机IOPS性能需求。具体而言，每块15k rpm FC磁盘可提供200250的IOPS性能，每块7200 rpm SATA约为 60100。D-JET 6000 支持 FC、SATA和 SSD 磁盘。SSD 即固 态硬盘，相对于FC光盘，具有无可比拟的随机数据读取功能，单SSD磁盘的 IOPS性能即可达到数万全数十万。D-JET

15、 6000采用的SSD随即读IOPS性能 为35,000，随机写IOPS性能为6,600。D-JET 6000支持1024块磁盘，同时 支持不同类型磁盘的混合使用。D-JET 6000控制器可将磁盘IOPS性能几乎无 损的输出，随着磁盘数量的增加，系统对外输出的磁盘IOPS性能呈现近似线性 的增长，可提供超过300,000的磁盘IOPS性能。D-JET 6000双控制器系统对外可提供高达700,000的Cache IOPS性能， 完全满足各种业务应用中连续或随机I/O文件的大规模突发读写需求。3.2带宽性能D-JET 6000单控制器系统可提供高达6.4GB/S的持续稳定带宽，双活动控 制器系

16、统可提供12.8GB/S的持续稳定带宽。每个LUN(卷)可提供高达1.6GB/S 的持续稳定带宽。D-JET 6000系统实际使用中，每块15k rpm FC磁盘可提供80120MB/s （7200 rpm SATA磁盘约为60100MB/s）的持续稳定读写带宽，具体的带宽 数值根据具体应用而定。D-JET 6000系统的输出带宽随着磁盘数量的增长而近 似线性的增加，当磁盘达到一定数量后，D-JET 6000存储系统主要取决于存储 控制器能够输出的带宽。D-JET 6000存储系统系统在混合读写环境中可提供 12.8GB/S的峰值带宽。D-JET系统通过多种技术手段对存储系统进行优化，对外提供

17、业界领先的性 能，具体技术措施相见下文所述。4. D-JET存储操作系统D-JET存储操作系统是面向多核心处理器，多线程并发处理环境而设计的高 性能智能存储操作系统。D-JET 6000存储系统由控制器、光线磁盘扩展柜、磁 盘等多个组件构成。存储操作系统运行于D-JET 6000控制器之上，需要充分发 挥出系统内各个组件的性能，并对系统资源进行虚拟化整合。D-JET存储操作系统在集群控制、Cache数据引擎、数据完整性、算法调 度、硬件驱动等多个方面进行了优化，使得D-JET系统具有优秀的并行操作和 多线程处理能力，可以提供非常高的带宽和IOPS性能，并具有良好的可扩展性， 满足业务系统日益增

18、长的高性能、高安全可靠性、可用性和可管理性的需求。4.1双活动控制器模式D-JET存储系统采用双活动控制器（Active/Active）模式设计。双活动控制 器模式可以实现两台控制器并行工作，提升系统性能，同时实现故障转移 （Failover），增强系统安全可靠性。FailoverD-JET双控制器存储系统每隔10ms进行对方控制器的状态检测，如果超过 一定的时间（一般设为5个10ms，具体时间间隔根据不同业务应用而定）未检 测到对方控制器的响应，则认为对方控制器发生故障，启动Failover程序。通过 ICL，将故障控制器写缓存中的数据镜像到本机Cache中，实现双机写缓存数据 一致，同时对

19、故障控制器正在执行的用户操作进行接管，实现Failover。D-JET 6000双控制器存储系统可在8秒之内完成故障转移。如果检测到故障控制器恢 复正常工作，则将接管的负载进行转移，进入双控制器并发工作状态。动态数据路径D-JET 6000双控制器系统中，每个逻辑磁盘（LD，详见4.4节“存储资源 虚拟化”）均与两个控制器相连，但同时仅有一个控制器对这个LD具有优先控 制权，这个控制器称为宿主控制器（Host Controller），另一控制器为从属控制器(Slave Controller)。宿主控制器控制该LD的Cache,并控制着包含于该LD 的物理磁盘的访问通道。当从属控制器收到客户端对

20、该LD的I/O请求时，此请 求将会交由LD的宿主控制器进行处理。客户端在对该LD的I/O请求的过程中， 将宿主控制器与客户端的链路称之为优先访问路径(Prior Access Link)。如图4-1所示。在客户端数据读取的过程中，读取数据的传输路径将按请求 路径进行传输。在客户端数据写入的过程中，如果客户端从优先访问路径进行写 操作，则需要进行写缓存镜像，保持双控制器写缓存一致性。如果客户端从非优 先路径进行写操作，则写入数据按请求路径进行传输，在传输的过程中实现写缓存镜像。Logical DiskRead From Non-Prior Access LinkLogical DiskWrite

21、 to Non-Prior Access LinkA Data Transfer Link A Cache Mirror图4-1双活动控制器数据传输路径每个逻辑磁盘有一个属性以标识当前哪个控制器为宿主控制器，这个标识位在系统运行的过程中会动态的改变，如在Failover和Failback过程中。客户端 的设备驱动程序应设计成能够适应此变化的I/O驱动程序，这样客户端将大部分 I/O请求通过优先访问链路发送至LD当前的宿主控制器，减少了大负载环境中 ICL频繁通讯影响性能的问题。很好的提升了系统性能。采用动态数据路径的方式可以很好的实现两个控制器并行的工作，提升系统 性能，并且简化数据传输路径，

22、降低复杂度，增强数据完整性。4.2带电池Write-Back写Cache和写缓存镜像D-JET系统可配置32512GB ECC读缓存，32GB带电池write-back写缓 存。使得系统在数据写入过程中，如果发生掉电情况，write-back带电池写缓存 能够保证Cache中的数据在一段时间内不丢失（通常为72小时），系统启动后 相关数据仍能够正常使用，不会造成断电时系统数据丢失，最大限度保证系统数 据完整性。D-JET双控制器系统在控制器之间部署写缓存镜像。主机在向其中一个控制 器写缓存写入数据的过程中，写入的数据自动通过80Gb/s的ICL传输到另外一 个控制器写缓存，只有镜像成功后，系统

23、才会向主机确认写入成功。此机制保证 了系统在数据写入的过程中双控制器数据的一致性，防止由于单个控制器损坏造 成的数据丢失和业务中断。双控制器系统中，如果一个控制器正在数据写入的过程中发生掉电等故障， 另一个控制器启动Failover处理程序，将故障控制器中写缓存中的数据镜像到本 地写缓存中，防止数据丢失，同时接管故障控制器正在运行的业务，不影响用户 正常使用。存储管理员可以根据需要关闭镜像缓存机制以进一步提升系统性能，当然， 这会造成系统安全可靠性和业务连续性的下降。4.3 动态缓存技术（Dynamic Cache Technique）D-JET存储系统利用动态缓存技术（DCT）显著的提高IO

24、PS性能和带宽， 在混合负载环境中具有优异的性能表现。数据访问可概括为顺序I/O操作和随机 I/O操作，需要存储系统提供Cache和Cache Mirror以提供高性能和高可靠性。 如果启动Cache Mirror功能，顺序I/O操作会产生大量ICL通信，对系统整体 性能产生一定影响。随机I/O操作的Cache命中率很低，操作系统会对Cache 中的数据进行频繁的置换，这也会影响性能。针对这个问题，D-JET存储操作系 统采用一种独特的DCT技术，动态的利用Cache，大大提升系统性能。DCT技 术如图4-2所示。Aligned I/OUnaligned I/O图4-2动态缓存技术如图4-2所

25、示，启动LUN的动态缓存技术功能。对于写对齐的全条带数据， 系统采用Write Through的方式直接写入物理磁盘，不经过缓存；对于非对齐的 部分条带化数据，将数据写入写缓存中，通过Cache Mirror镜像到另一个控制 器写缓存中，然后告知主机此次写操作完成，最后D-JET系统在适当的时候将 写缓存中的数据写入物理磁盘(即Write Back方式)。动态缓存技术对于全条带写入方式采用Write Through的方式直接将用户数 据写入物理磁盘。因为用户数据没有被缓存，仅对写操作产生的元数据产生 Cache镜像，元数据数据量非常小，这样大大降低ICL负载损耗，提升系统性 能。这种方式尤其适

26、用于大文件的连续I/O写操作，显著提升系统性能。4.4存储资源虚拟化D-JET存储系统采用三层虚拟化技术对磁盘资源进行管理整合，分别为：物理磁盘(Physical Disks)、逻辑磁盘(Logical Disks)和卷(LUN)。第一层映射把所有物理硬盘分成多个存储块池，这种设计提高了整个存储的 资源利用率，每个存储块都可被访问。同时有利于提升前端应用性能，不管这个应用需要的存储空间是多大，也许是一个很小的应用，只需分配很少几个存储块， 但这些数据块也可以分布在多个，甚至上百个硬盘上，利用更多的硬盘资源以提 升性能。第二层映射把所有存储块映射成逻辑硬盘。这一步可以基于RAID类型和存 储块位

27、置等属性创建逻辑硬盘。根据要求可以定制不同成本、容量、性能和可靠 性的逻辑硬盘。第一层映射和第二层映射一起可以使系统工作平均分摊到所有硬 盘和光纤连接上。第三层映射使一个逻辑硬盘或多个逻辑硬盘映射成一个虚拟卷，或者根据需 要将一个逻辑磁盘映射成多个虚拟卷，以LUN的形式输出给前端主机。三层映射机制如图4-3所示。采用这种方式可大大增加系统性能，增强系统 灵活性，提高系统资源利用率。通过D-JET存储操作系统，用户只需要指定虚 拟卷的名字、RAID类型和大小，系统就可自动的根据需求，智能地创建相应逻 辑硬盘，完全无需用户的更多干预。图4-3 D-JET存储操作系统三层存储虚拟化架构物理磁盘（PD

28、）系统把每个PD分成8K份，每存储块大小视磁盘存储容量而定，如1TB SATA磁盘分成8K份后，每存储块大小为128MB； 600GB FC磁盘划分后每存 储块大小为76MB； 160GB SSD磁盘划分后每存储块大小为20MB。这些存储 块组成存储块池。逻辑磁盘（LD）和RAIDLD由存储块组成，而不是整个物理硬盘，这样使LD的创建和组合非常灵活。LD在D-JET存储架构中负责RAID计算，每个LD即一个RAID组。每个 LD映射到多个存储块，进行RAID1 （镜像）、RAID0C条带化）或RAID50CRAID 5 +条带化）计算。D-JET系统可以自动创建用户所需要的性能、可靠性和大小

29、的LD。D-JET系统默认每个RAID1为2D,在2个存储块上做镜像；RAID5为 8D+1P，由9个存储块组成，8个为数据块，1个为校验块;每个RAID6为8D+2P, 由10个存储块组成，8个为数据块，2个为校验块。组成一个RAID组的存储 块一般来自不同磁盘扩展柜的硬盘，这样可以避免整个磁盘柜损坏造成的数据丢 失；另外访问一个RAID组的数据时，可以并行利用不同的通道，有利于访问性 能的改善。RAID组是由多个RAID组成，它可以更进一步把数据分散到多个存储上。 例如，一个组数为2的RAID5实际把数据有效分布在了 16个磁盘上，即实现 了 RAID50。每个RAID组内可以包含不同类型

30、的硬盘。虚拟卷（LUN）LUN的具体大小根据用户需求设定，一个LUN由一个LD或多个LD组成， 或者根据需要将一个LD映射成多个LUN。如一个LUN由一个组数为2的RAID5 LD构成，存储块大小为128MB，则LUN的尺寸为2048MB （128MB/存储块* 8存储块/RAID组* 2组）。4.5 自动精简配置（Thin Provisioning）如上节所述，D-JET存储系统采用三层虚拟化技术对磁盘资源进行管理整 合，逻辑磁盘和虚拟卷的创建使得自动精简配置成为可能。D-JET存储系统采用 存储池的概念，管理员可以在现有物理存储上，创建比实际物理存储能力大好几 倍的LUN。这样创建LUN，

31、是考虑到用户实际是在相当长的一段时间内逐渐写 入数据到LUN中的。比如说，用户可以创建一个3TB的LUN，但在后端实际只 使用了 1TB的物理存储，这样做用户可以极大提高物理资源的利用率，并且可 以推迟购买投资，在某些情况下，甚至可以节省这部分投资。同时管理员可在存储池之上创建数量不限的LUN，每个LUN的尺寸可以无 限制。自动精简配置功能可以动态扩展LUN尺寸，无需预设LUN容量，不影响系统运行，极大提高空间利用率。为了避免存储资源被无限至的使用，管理员可 以灵活设置LUN的阈值，一旦达到阈值，D-JET系统会发出警报。系统管理员 可以有充分的时间去规划或增加新的存储空间。如果真的达到了存储

32、最大空间， 系统会认为空间已满，新的数据将无法写入，直到增加新的存储空间。4.6数据保护数据一致性D-JET存储操作系统将所有的数据操作均进行日志记录，保证了系统的一致 性和系统崩溃后的快速恢复。D-JET存储操作系统对所有数据，不管是用户数据 还是操作系统自身的元数据，对每个数据块均提供256位SHA-1的Checksum， 充分保证了数据的一致性，防止由于数据不一致而引起的系统崩溃等现象的出 现。D-JET存储操作系统是采用COW(Copy-On-Write)机制。COW是不会 对硬盘上现有的数据进行重写，保证所有硬盘上的文件都是有效的。所以不会有 文件系统不一致(inconsistent

33、)的现象出现。RAID 保护D-JET存储操作系统支持RAID 0、1、5、6、10、50、60等多种RAID方 式，详见4.4节所述。D-JET系统的RAID控制由操作系统实现，采用软件RAID 的方式，不仅提供了完善的RAID磁盘保护功能，同时相对于硬件RAID减少了 部署RAID过程中对系统的性能损耗。传统RAID5有一个重大缺陷：RAID5写漏洞(Write Hole)。RAID 5在写 数据的时候，是分为两步的，首先将数据写到磁盘阵列上，然后将该stripe上数 据的校验码记录到阵列上，如果在刚写完数据的时候，系统断电，那么该数据对 应的校验码就没有机会再恢复了。如果接下来磁盘发生故

34、障，RAID重建流程就 会出现错误数据。D-JET存储操作系统是采用COW(Copy-On-Write)机制。COW是不会 对硬盘上现有的数据进行重写，保证所有硬盘上的文件都是有效的。同时为每个数据块提供256位的Checksum,就完全消除了 RAID 5的Write Hole缺陷。采用硬件RAID卡的存储系统存在一种潜在威胁，这个问题称作Silent Data Corruption。现有存储系统遇到如RAID卡的硬件问题或者驱动bug，往往只是 简单的把错误数据直接交给上层，而上层操作系统往往无法察觉这个错误的存 在，这就为系统的安全埋下隐患，如果这个错误发生在元数据中，则会直接导致 系统

35、的Panic。而在D-JET存储操作系统，对所有数据不管是用户数据还是文件 系统自身的元数据都进行256位的Checksum （校验），会主动发现这种Silent Data Corruption，然后通过RAID磁盘组中其他硬盘得到正确的数据返回给上层 应用，同时自动修复原硬盘的Data Corruption。D-JET系统RAID的创建时间极快，通常不超过10秒钟。D-JET系统的RAID 盘组可进行动态在线扩容，同时可以在线的对RAID进行更换。磁盘的位置与 RAID组无关，可任意打乱磁盘顺序。当系统升级或设备搬迁时，磁盘可直接插 入新的控制器，无需进行存储设备之间的数据迁移。快照D-JE

36、T系统提供业界性能最优的快照机制，该快照是针对于操作系统的卷 （LUN）级快照，每次快照只需几秒钟就可以生成，每个卷支持的快照数量不限， 可在几乎不影响系统性能和空间的前提下进行本地磁盘备份和快速恢复。如图4-4所示，D-JET系统采用COW机制，无需预留快照存储，系统始终 往主存储中新的区域写入数据，用户执行删除操作后，被删除的数据位置并未改 变，改变的是数据指针和快照指针。而其他厂商的存储系统在快照过程中，需要 将原有删除的数据迁移到快照存储，然后在主存储原有位置写入新的数据，这种 方式需要预留快照存储空间，同时在快照过程中需要执行更多的I/O操作，因此 性能较差。图4-4 D-JET系统

37、与其他厂商存储系统快照技术对比4.6.4 热备存储块D-JET系统存在全局热备存储块的，当RAID组检测到故障盘时，会自动将 故障盘上对应存储块的数据转移到热备存储块上，增强系统安全可靠性。在系统 初始化的过程中，可根据用户需求将一部分物理磁盘划分成热备存储块。4.6.5 多路径I/O通道D-JET 6000单控制器对外可提供高达16个8Gb FC主机通道，对内同时 可提供16个8Gb FC磁盘通道。D-JET存储操作系统采用多路径I/O技术在多 个光纤链路之间实现负载均衡和故障转移，提升光纤链路传输性能，同时提升系 统安全可靠性，保证数据链路安全。综上所述，D-JET存储操作系统提供了多种技术手段以提升系统性能、安全 可靠性，同时该系统具有很好的可扩展性，可管理性。为上层应用提供优秀的数 据管理和虚拟化能力，支持各种业务运行。D-JET 6000硬件平台近年来，计算机硬件技术水平取得长足发展。8核CPU已经出现，CPU多 核技术仍在不断推进。AMD的HT( HyperTransport)技术和Intel QPI技术已 经取代了速度较慢的FSB，同时进一步降低延迟。PCI-E技术的也日趋成熟， 第二代PCI-E总线速度大幅提升。D-JET 6000系统将当前最先进的