V7000配置要点.docx_第1页
V7000配置要点.docx_第2页
V7000配置要点.docx_第3页
V7000配置要点.docx_第4页
V7000配置要点.docx_第5页
已阅读5页,还剩9页未读 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

一. Power750做HA的相关配置: 解答:(1) 双以太网卡:推荐使用双卡,以实现网卡的冗余。双网卡并不是HACMP的最小配置,但是使用双网卡可以在某个网卡失败的时候只做本机的网卡切换,而不必做主机切换。推荐连接双以太网交换机,避免网络的单点故障;(2) 双HBA卡,避免HBA卡的单点故障;(3) 双SAN 交换机,避免交换机的单点故障;(4) 串口卡和心跳线,用于建立第二网络,传递心跳信息,避免在IP网络失败的情况形成主机孤岛;(5) 每台机器配置1套PowerHA软件。 二. Power720硬盘背板介绍: 解答:Power720有两种类型的硬盘背板,fc#5618和fc#5630。 具体介绍如下: fc#5618,支持6块SFF 的SAS硬盘(HDDs/SDDs),一个SATA DVD光驱,一个半高的磁带机或者USB的移动硬盘。该硬盘背板支持背板的分离,需要配置fc#5631来实现背板分离,每个SAS通道支持3块硬盘,其中,由fc#5631管理的三块硬盘支持RAID10。该硬盘背板不支持RAID5,6,不支持对外的SAS端口。 fc#5630,支持8块SFF的SAS硬盘(HDDs/SDDs),一个SATA DVD光驱,一个半高的磁带机或者USB的移动硬盘。支持RAID功能,175MB的写缓存,支持RAID5,6,一个对外的SAS端口。但是该硬盘背板不支持背板的分离。 三. 如何在Power740上配置3个以上分区: 解答:在Power 740中,内置硬盘能实现2个分区,要实现3个及以上分区,需要通过IO扩展实现。 1.前两个分区,需要配置支持分离的硬盘背板的编号为:fc#5618,同时还需要配置fc#5631的分离背板的选件,该选件为第二个分区提供了SAS Controller,且不占用PCI槽位,可以支持背板的分离,实现两个分区。每个分区支持3块SFF的SAS硬盘。其中,由fc#5631管理的分区支持RAID10。 2.第三个及以上分区主要的配置,有如下两种方法:a) 通过SAS卡和fc#5886的SAS硬盘扩展柜实现。 fc#5912/fc#5901的SAS卡,fc#5886的SAS扩展柜,以及相应的YO的SAS的线,在e-config中,可以配置如下的YO线: fc#3691 - SAS Cable (YO) Adapter to SAS Enclosure, Single Controller/Dual Path 1.5 M fc#3692 - SAS Cable (YO) Adapter to SAS Enclosure, Single Controller/Dual Path 3 M fc#3693 - SAS Cable (YO) Adapter to SAS Enclosure, Single Controller/Dual Path 6 M fc#3694 - SAS Cable (YO) Adapter to SAS Enclosure, Single Controller/Dual Path 15 M 一般来说,e-config工具将自动添加fc#3692 YO的SAS线。另外,放到fc#5886中的硬盘为3.5英寸的硬盘,与背板fc#5618上支持的硬盘不同,需要单独选择。 b) 通过添加fc#5802的IO抽屉实现。 fc#5802支持最多18块SFF SAS硬盘,每个fc#5802支持1,2或者4个硬盘通道(可通过fc#5802上的Switch进行通道数量的选择)。当为1个分区时,最大的硬盘数为18块 SFF SAS硬盘;当为2个分区时,每个通道支持的最大9块SFF SAS硬盘;当为4个分区时,每个通道支持最大的SFF SAS 硬盘数分别为:5,4,4,5。每个分区的硬盘通道都需要配置fc#5901的SAS卡以及相应数量的fc#3688 SAS 的线(AT)。 四. Power 770在一个CEC中如何配置2个分区: 解答:Power 770一个CEC中的磁盘由两个集成的SAS控制卡连接,可以划分到两个分区中。内置光驱由单独的SAS控制卡连接,可以在各个分区间浮动,所以当配置了内置光驱后,不需要再配置其它部件就可以支持两个分区。 五. V7000 软件的配置: 解答:1在配置完成了V7000的硬件后,双击e-config窗口中中间栏的software Products2在下列窗口中,不做任何修改,直接点击next按钮.3. 在下列窗口中,确保Disk Virtualization选项打上了钩,然后点击next按钮 4在下列窗口中,有3个选项可以选择,其中 5639-VM1 IBM Storwize V7000 Software V6.1 是必须配置的软件,包含:Thin Provisioning,FlashCopy,Easy Tier等基本功能。 5639-EV1 IBM Storwize V7000 External Virtualization Software V6.1是可选的软件,允许V7000连接外置光纤盘阵,并且提供虚拟化软件的全部功能.5639-RM1 IBM Storwize V7000 Remote Mirroring Software V6.1是可选的软件,允许在V7000之间实现同步/异步远程镜像功能。 做完选择后,直接点击next按钮。 5在下列窗口选择上面所选的软件(5639-EV1)的warranty时间,缺省是1年,也可以选择3年等其他年限。 6在下列窗口定义上面所选的软件(5639-EV1)的数量license,该license的数量必须是使用V7000虚拟化功能的外置盘柜的个数。 V7000虚拟化功能的外置盘柜必须符合下列条件: 是一个外置的控制器盘柜或扩展柜。 该外置的控制器盘柜或扩展柜必须至少包含一块硬盘(包括SSD硬盘)。 该license缺省数量是1,须根据客户的实际应用环境选择。 7在下列窗口选择上面所选的软件(5639-RM1)的warranty时间,缺省是1年,也可以选择3年等其他年限。 8在下列窗口定义上面所选的软件(5639-RM1)的数量license,该license的数量必须是按照V7000所管理的盘柜的个数来收费的,V7000所管理的盘柜除了包括V7000本身的控制器盘柜和V7000的扩展柜,还包括使用V7000虚拟化功能的外置盘柜的个数。 V7000虚拟化功能的外置盘柜必须符合下列条件: 是一个外置的控制器盘柜或扩展柜。 该外置的控制器盘柜或扩展柜必须至少包含一块硬盘(包括SSD硬盘)。 该license缺省数量是1,须根据客户的实际应用环境选择。 9在下列窗口选择上面所选的软件(5639-VM1)的warranty时间,缺省是1年,也可以选择3年等其他年限。 5639-VM1没有数量的个数可选,因为(5639-VM1) IBM Storwize V7000 Base Software license是按照V7000的盘柜个数来收费的。每添加一个V7000的控制器盘柜或V7000的扩展柜,都会自动在硬件的基础上生成一份5639-VM1的软件。 10下列软件配置完成的窗口,直接点击configure按钮完成软件配置 六. DS5020 e-config中Features选项配置:解答:配置注意事项: a)DS5020默认2GB缓存,即每个控制器1GB,当添加fc#2070时,就变成4GB缓存,即每控制器2GB。该缓存扩展模块只能在出厂前设定,后期不可升级; b)DS5202当添加到33-64块硬盘时,需要添加fc#7393的磁盘数量许可(license); c)DS5202当添加到65-112块硬盘时,需要添加fc#7394的磁盘数量许可(license); d)fc#7401为DS5020快照(Flash Copy)功能的激活,该功能激活后,对同一个逻辑卷(LUN)只可保留4个时间点的快照数据。一般客户没有特殊数说明,配置该激活即可; e)当客户需要对同一个逻辑卷(LUN)保留4个以上时间点的快照数据时,则需要添加fc#7402。把对同一个逻辑卷(LUN)的快照个数扩展到8个时间点; f)fc#7403为卷拷贝(Volume Copy)的功能激活许可; g)fc#7404快照(Flash Copy)和卷拷贝(Volume Copy)功能的打包许可,包含了fc#7401和fc#7403; h)fc#7405为DS5020远程镜像(Enhanced Remote Mirror)功能的激活,该功能激活后,可实现32组逻辑卷(LUN)之间实现镜像。一般客户没有特殊数说明,配置该激活即可; i)当客户需要对大于32组逻辑卷(LUN)进行镜像的时候,则需要添加fc#7406。把远程镜像的镜像对从32组扩展到64组; j)当客户需要配置加密硬盘的时候,必须添加fc#7410加密激活许可(license); k)目前,DS5020支持两种扩展柜,EXP520及EXP810。当需要连接EXP810扩展柜时,需要添加fc#7414许可,确保EXP810的正常连接。另,在DS5020的配置界面中并没有EXP810的配置界面,需要单独配置; l)fc#8S1106是一个只有内部sales可以订购的特殊许可,需要走产品部的RPQ流程。该许可为并行访问的功能。 参考资料: 名称:DS5020销售手册(Sale Manual) 链接:/common/ssi/rep_sm/4/872/ENUS1814-_h04/index.html七. N3400 支持的硬盘种类、数量及相关问题:解答:1. N3400主柜支持12块 SAS或SATA硬盘。目前,N3400支持以下容量、类型的硬盘- 300GB 15K转SAS硬盘- 450GB 15K转SAS硬盘- 600GB 15K转SAS硬盘- 500GB 7.2K转SATA硬盘- 1TB? 7.2K转SATA硬盘- 2TB? 7.2K转SATA硬盘注意:主柜中的硬盘必须是相同类型、相同容量的硬盘2. N3400支持以下类型的扩展柜- EXN1000,支持SATA硬盘,每个扩展柜支持最少5块、最大14块SATA硬盘- EXN4000,支持FC硬盘,每个扩展柜支持最少5块、最大14块FC硬盘- EXN3000,支持SAS和SATA硬盘,每个扩展柜支持最少5块、最大24块SAS或SATA硬盘最大支持连接6台EXN1000或EXN4000,或者4台EXN30003. N3400初始订单最大支持108块硬盘、升级订单最大支持136块硬盘4. EXN1000扩展柜目前支持以下类型、容量的硬盘- 1TB? 7.2K转SATA硬盘- 2TB 7.2K转SATA硬盘EXN3000扩展柜目前支持以下类型、容量的硬盘- 300GB 15K转 4Gpbs SAS硬盘- 450GB 15K转 4Gpbs SAS硬盘- 600GB 15K转 4Gpbs SAS硬盘- 1TB? 7.2K转SATA硬盘- 2TB 7.2K转SATA硬盘EXN4000扩展柜目前支持以下类型、容量的硬盘- 300GB 15K转 4Gpbs FC硬盘- 450GB 15K转 4Gpbs FC硬盘- 600GB 15K转 4Gpbs FC硬盘注意:同一个扩展柜中的硬盘必须是相同类型、相同容量的硬盘,同一个环路中必须使用相同类型的扩展柜5. 目前,在Data ONTAP 7.x版本下,N3400最大支持136TB物理容量。6. N3400配置EXN4000扩展柜时,还需要在e-config中选择fc#9558,即FC扩展柜环路数;N3400配置EXN1000扩展柜时,还需要在e-config中选择fc#9559,即SATA扩展柜环路数;N3400配置EXN3000扩展柜时,由于其板载集成了SAS端口,因此不需要增加接口选件。7. 由于N3400上FC端口数量的限制,如果配置了扩展柜,对于N3400-A11,由于无法配置fc#9557,即没有FC端口用于连接前端主机,将不能使用FCP协议;对于N3400-A21,可以支持FCP,但是fc#9557和fc#9560(冗余连接扩展柜)不能并存。支持与下载IBM V7000 线缆及模块的配置V7000默认都带有8个8Gbps的短波(SW)主机端口,在e-config配置中,能配置2-8根光纤线,无需再配置短波模块。V7000的主机接口,支持长波(LW)的直接连接。在e-config配置时,如果选择8Gbps 长波(LW)模块(fc#5608),那么在出厂时,会把短波(SW)模块换成长波(LW)模块。Storwize V7000的控制器盘柜一共有8个8 Gbps FC host ports, (每个RAID controller 有4个 8 Gbps FC ports ) 且缺省每个8 Gbps FC host port都已经插有短波(SW)的SFP transceivers。一般情况下,不需在该页面选择,即#5608的数量为0。如果客户有特殊的长波SFP transceivers连接需求,此页面中可以选择另外订购最多8个#5608 8Gbps长波(LW)的SFP transceivers。StorwizeV7000解析之外观 IBMStorwizeV7000是一款2U高的双控制器存储系统,控制器处理核心为英特尔至强C5500/3500(代号为JasperForest)四核处理器,由于管理核心软件为SVC6.1版本,所以双控制器架构实际上相当于过去IBMSVC两个节点。 图二:IBMStorwizeV7000两款产品盘柜正面图。2076-112/212为采用12个3.5英寸磁盘驱动器的控制盘柜和扩展盘柜;2076-124/224为采用24个2.5英寸磁盘驱动器的控制盘柜和扩展盘柜,V7000系统一共能够扩展到10个盘柜,因此,最大磁盘驱动器支持数能从120个到240个之间。 图三:StorwizeV7000能够让不同规格的盘柜混合搭配。如上图所示,机柜插满十个StorwizeV7000系统,其中两个是标配2.5英寸磁盘驱动器规格的系统(型号即2076-124/224),爸个为标配3.5英寸磁盘驱动器规格的系统(系统即2076-112/212)。 图四:StorwizeV7000系统控制盘柜和扩展盘柜后端图。控制器系统带有4个8GbpsFC端口,2个USB2.0端口,2个1Gbps以太网端口,2个6GbpsSAS扩展端口,未来还可能增加4个10Gbps以太网端口。扩展系统4个6GbpsSAS端口。 图五:IBMStorwizeV7000控制系统后端端口示意图,图中1为八个GbpsFC端口,图中2为两个USB2.0端口,图中3为两个1Gbps以太网端口,图中4为两个6GbpsSAS端口。 实际上,IBMStorwizeV7000是一款典型的按照SBB2.0规范来设计的存储系统,在2U机柜中实现了双控制器设计,相当于过去SVC的双节点设计,SVC存储系统系统标配即为两个节点,实现冗余。下面我们将继续分析IBMStorwizeV7000控制器结构。 StorwizeV7000解析之控制器 衡量一款中端存储系统是否优秀,很大程度是在于其核心控制器架构是否优势。IBM过去的DS4000/5000系列之所以能够获得成功,很大程度要归功于LSI在控制器设计上的优势。LSIEngenio产品已经是第六代,LSI在控制器设计方面的经验不可忽视,然后其第六代产品(也即DS5300)在前端仍然是采用的是ASIC架构,具备高带宽和大容量等特点,运算能力已经不能够满足中端存储上日渐丰富的软件应用(比如说自动精简配置、自动分层存储等。),而在后端磁盘驱动器方面,DS5300仍然采用的是4GbpsFC-AL共享环路方式,对于后端SAS大行其道的今天,已经显得落后了。 图六:IBMStorwizeV7000核心模块架构图。IBMSVC存储虚拟化软件带有的如快照、镜像、自动精简配置、虚拟化、复制等功能都具有;此外,IBM还将DS8000RAID代码栈添加进入,方便本地磁盘和SSD管理;另外一个特色就是将XIV的简单界面融入到StorwizeV7000的管理之中。 图七:IBMStorwizeV7000控制器架构示意图,控制器设计的核心思路即CPU与48LanePCIe交换芯片连接(图中蓝框位置),通过PCIe交换芯片分别链接到SAS控制器、FC控制器、SSB高速背板、PCIe前端接口卡(未来预留给10Gb主机接口)此外CPU与PCH(英特尔3420芯片组,图中绿框位置)连接,支持BMC管理、两个千兆以太网控制器的支持 最关键的SAS交换部分(见图中红框位置),通过SAS控制器和SAS扩展器分别引出一条6GbpsSAS*4链路到SAS扩展端口,再通过SAS扩展端口连接到扩展盘柜,SAS扩展器还引出一条链路与控制盘柜的SBB高速背板连接,通过次SBB高速背板来连接磁盘驱动器。 IBMStorwizeV7000系统在控制器设计上采用的是Active-Active架构,跟DS5000系列的负载均衡架构区别很大,StorwizeV7000两个控制器类似于过去SVC两个节点,而且设计思路和控制器使用的处理器来看,Storwize非常像SVC的一个入门级解决方案。笔者在今年的StorwizeV7000春季巡展上就StorwizeV7000推出之后,用户该如何选择存储虚拟化解决方案时,IBM系统与科技部存储产品线经理戴晓英表示:“IBMSVC过去有两个解决方案:企业级和入门级。事实上,IBMStorwizeV7000推出之后,IBMSVC入门级解决方案就停止了,StorwizeV7000取代了SVC入门级解决方案,并且还具备着存储系统的诸多功能。” StorwizeV7000解析之扩展 StorwizeV7000的扩展核心思路就是在控制器由SAS控制器和SAS扩展器引出的两条6GbpsSAS*4交换链路进行扩展,SAS控制器引出SASChain1,控制器内的SAS扩展器引出SASChain2,每条链路可以扩展成一个独立的SASDomain。 图八:IBMStorwizeV7000控制系统SAS扩展示意图:控制柜中的磁盘属于SASChain2这条链路。控制节点下面的SAS扩展端口为SASChain1,控制节点上面的SAS扩展端口为SASChain2,通过这两条链路分别于扩展柜进行扩展连接。 图九:IBMStorwizeV7000控制盘柜与扩展盘柜的连接示意图。如图七所示,SAS控制器和SAS扩展器引出的两条6GbpsSAS*4链路连接到SAS扩展端口,通过SAS线缆连接,就很好的实现了控制盘柜扩展到扩展盘柜。 图十:IBMStorwize一个控制系统+9个扩展柜连接示意图。每一条SASChain可以连接5个扩展盘柜,从图中可以看到SASChain2这条链路只连接到4个扩展盘柜,但是由于控制系统的磁盘连接到了SASChain2,所以把控制系统的磁盘算上,SASChain2同样也是连接到5个。 IBMStorwizeV7000通过这种设计,如果采用2.5英寸、24驱动器的盘柜,则最大可支持磁盘数量为240个。虽然从感觉上比IBMDS5300的480个少,但是千万别以DS5300的眼光来看待StorwizeV7000,因为StorwizeV7000带有丰富的软件功能是DS5300所不具备的,而丰富软件功能的加入也让用户开始以容量、带宽之外的角度来看待中端存储系统的发展方向。 StorwizeV7000带存储虚拟化功能的中端存储 IBM认为未来的存储模式为“资源池式”,通过虚拟化技术的应用来打破传统模式的资源壁垒问题,使得应用系统能够共享各类处理资源,支持随业务应用压力变化灵活调整资源供应,并通过集中化管理来提升管理效率。SVC解决方案正式IBM基于此理念推出的产品。目前,IBMSVC存储虚拟化软件已经在市场上多年,装机量早已过万,在StorwizeV7000推出之前,IBMSVC具有两套解决方案:SVC企业级和SVC入门级。 图十一:IBMSVC存储虚拟化解决方案采用带内处理方式,一般标配为两个节点,企业级版本为IBMX3550M2服务器上作为安装SVC软件的节点,通过X3550M2上运行SVC软件来实现池化各个不同品牌的存储设备,并通过SVC的界面来管理不同品牌的存储资源。 正如上文所说,随着IBMStorwizeV7000的推出,IBMSVC入门级解决方案将停止,IBM方面也宣称StorwizeV7000是中端存储系统第一个将存储虚拟化功能引入的。据了解,SVC多项应用功能是免费的,除了存储虚拟化和远程镜像之外,像快照、VdiskMirror、自动精简配置这些功能都是免费的,对于用户来说,在之前的DS5300上是不可能获得的。 图十二:IBMSVC5.0版本支持服务器和存储产品示意图。从图中我们可以看到,市场上大多数的服务器和存储产品都支持SVC,这还是SVC5.0版本,当前的SVC6.1版本相信对市场上其他存储品牌产品的支持会更加全面。 中端存储系统追去大容量、高带宽的时代已经过去,追求功能化、高效率、管理简单化会成为中端存储系统下一个大趋势。事实上,从当前用户的数据增长情况来看,单靠容量上的增长已经逐渐不能够满足数据增长的需求;像惠普3PAR、EMCVNX等系列产品,也开始逐渐开始强调中端存储系统功能化的作用,比如3PAR的系列产品都强调自动精简配置所带来的诸多好处。IBMStorwizeV7000同样符合了这种趋势,SVC提供的快照、自动精简配置、VDiskMirror等功能全部免费,无疑让用户看到了实现高效存储的一条捷径。 EasyTier让中端存储更加自动化 中端存储走向功能化另外一个比较明显的现象就是自动分层存储技术的加入,比如说EMC已经在其最新的中端存储系统VNX系列中加入了自动分层技术FastSuite;3PAR也早已将分层存储技术融入到产品当中,IBM也将EasyTier自动分层技术融入到StorwizeV7000之中。在高端存储系统上运行的自动分层存储技术下移使得中端存储系统走向自动化和智能化。 IBMEasyTier自动分层存储技术由IBM中国实验室(上海)开发,之前运行在IBM高端存储系统DS8000上,希望借助该项技术提升DS8000上效率,并让用户获得最高性能。 图十三:IBMEasyTier自动分层存储技术的自动数据迁移示意图。目前主流的自动分层存储技术已经实现了对存储的自动优化,比如EasyTier就能够做到自动优化,无需人工调优,无需根据工作负载变化而改变定制的策略,会自动计算热点数据容量,估计将热点数据迁移时间,并且迁移最小颗粒度能够达到1Gb。 图十四:IBM认为EasyTier能够充分利用SSD的性能,只有13%的SSD+IBMEasyTier自动分层技术即能够达到全部采用SSD性能的78%,EasyTier让SSD和HDD混搭成为用户提升存储性能、降低成本的最佳选择。 当然,IBM率先将EasyTier用在高端存储DS8700上,说明该项技术可能需要耗费较多的计算资源,事实上在去年的IBMDS8700交流会上,IBM存储专家庞文峥也表示认同。为什么IBM没在去年就将EasyTier技术融入到中端存储系统DS5300呢?首先DS5300采用的PowerPC架构运行EasyTier的计算能力并无优势,另外时机也是问题,LSI下一代中端存储产品采用IA架构,也许IBM会将EasyTier技术加入其中,但是LSI的计划是2011年年中推出新产品,并且随着LSIEngenio业务被NetApp收购,EasyTier是否会在DS5400中更变得朴素迷离。 XIV界面让StorwizeV7000操作更加简单 我们知道XIV以其创新的架构以及简单的管理界面为用户提供了一款优秀的高端存储系统,其优秀、简单的管理界面使得用户在存储管理方面获得了极大的简便。此次,IBM将XIV这种简洁明了的管理界面用到了StorwizeV7000上。而IBMStorwizeV7000从定位上来看,中小企业用户将是主力群体,中小企业存储管理人员相对较低的水平也对管理简单的存储系统有更多的诉求。 图十五:IBMStorwizeV7000管理界面非常简单明了。IBMStorwizeV7000采用简单友好的用户管理界面,系统管理通过简单的点击鼠标就能够轻松的简洁管理和配置存储。 图十六IBMStorwizeV7000管理界面降低了用户使用门槛,符合中端存储系统管理走向简单化的趋势。 中端存储系统另外一个不可忽视的趋势就是走向管理简单化,EMC和IBM等存储大厂商无不开始走这条路线,EMC全新一代中端存储产品VNXe系统,即使是没有IT经验的人也能够在短短几分钟内完成一些配置,IBMStorwizeV7000简单的管理界面实际上也是这种趋势的体现,目的就是让广大存储管理人员简化管理工作、提升管理效率。 StorwizeV7000能否独挡一面? 上文从控制器架构、扩展能力、软件功能等方面对IBMStorwizeV7000进行了浅析,相信大家跟笔者一样,还是对StorwizeV7000有着较多的疑问,特别是StorwizeV7000能否让IBM在中端存储市场独当一面呢? 首先,StorwizeV7000的存储虚拟化功能是收费的,这意味着用户如果选择StorwizeV7000首先是把它当做一款中端存储系统,其次才是一款存储虚拟化引擎。对于用户来说,如果选择IBM存储虚拟化解决方案,那么用户是该选择Storwize还是SVC企业级解决方案(上文已经阐述StorwizeV7000推出之后,IBM将用它取代之前的SVC入门级版本解决方案)?而在当前的企业级市场中,以EMC

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

最新文档

评论

0/150

提交评论