版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
S系列交换机SEP技术白皮书S系列交换机SEPS系列交换机SEP技术白皮书目录PAGE\*romaniii01(2013-06-30)PAGE\*romaniii01(2013-06-30)目录SEP介绍 1介绍 1参考标准和协议 2原理描述 3SEP基本概念 3SEP段(Segment) 3控制VLAN(ControlVLAN) 3节点(Node) 3端口角色(Portrole) 3SEP端口报文转发状态(Portstatus) 6SEP协议报文 7SEP实现机制 13邻居端口协商机制 13SEP链路状态同步及拓扑显示 15主边缘端口选举 17阻塞端口机制 18端口抢占方式 21SEP故障处理机制 25拓扑变化通告和抑制 25故障倒换 30故障回切 34SEP负载分担 38产品能力 42各形态支持情况 42性能规格与限制 42应用场景 43配置SEP封闭环示例 43组网需求 43配置思路 44操作步骤 45配置文件 47配置SEP多环示例 50组网需求 50配置思路 51操作步骤 52配置文件 57配置SEP多实例 63组网需求 63配置思路 64操作步骤 64配置文件 67配置SEP与MSTP混组网 71组网需求 71配置思路 72操作步骤 72配置文件 76配置SEP与RRPP混组网 80组网需求 80配置思路 81操作步骤 81配置文件 88配置SEP与VPLS联动 93组网需求 93配置思路 94操作步骤 94配置文件 101故障处理案例 107SEP功能配置完成后,数据流量不能正常转发 1076FAQ 1086.1相比较于其他的环网协议,SEP的优势是什么? 108术语与缩略语 109参考资料 110S系列交换机SEPS系列交换机SEP技术白皮书1SEP介绍PAGE101(2013-06-30)PAGE101(2013-06-30)SEP介绍介绍定义EthernetProtection)SEP目的STP(SpanningTreeProtocol)STP的SEP。SEP50msSTP受益SEPSEPSEP参考标准和协议SEP是华为公司的私有协议。S系列交换机SEPS系列交换机SEP技术白皮书2原理描述PAGE301(2013-06-30)PAGE301(2013-06-30)原理描述SEP基本概念SEP段(Segment)SEPSEPSEPID和控制VLANSEPSEP段由以下元素组成:控制VLAN节点VLAN(ControlVLAN)控制VLAN是相对于数据VLAN来说的。在SEP段中,控制VLAN只用来传递SEP协议报文。与控制VLAN相对,数据VLAN只用来传输数据报文。每个P段都配有一个控制VP段内所有节点的控制VAN控制VLANIDSEP口会自动加入控制VLANSEP节点(Node)SEPSEP端口角色(Portrole)SEP中的端口角色主要有普通端口和边缘端口两大类。图2-1所示为开放环组网下的端口角色(主副边缘端口不在在同一个节点时,这类SEP。S系列交换机SEPS系列交换机SEP技术白皮书2原理描述PAGE4PAGE401(2013-06-30)图2-1开放环端口角色NetworkNetworkSEPNetworkSTPSEPNetworkSTPSEP普通端口在开放环中,端口角色有以下几种:−−−−2-2(SEP。图2-2封闭环端口角色SEPSEP普通端口在封闭环中,端口角色有以下几种:−−关于端口角色的具体说明,请参见表2-1。表2-1端口角色说明端口角色端口角色细分说明边缘端口(EdgePort)主边缘端口(PrimaryEdgePort)一个SEP段中只有一个主边缘端口,由用户配置并选举决定。主边缘端口的职责是发起阻塞端口抢占、终结报文、以及向其他网络发送拓扑变化消息。副边缘端口(Secondary Port)一个SEP段中只有一个副边缘端口,由用户配置并选举决定。副边缘端口的职责是终结报文、以及向其他网络发送拓扑变化消息。S系列交换机SEPS系列交换机SEP技术白皮书2原理描述PAGE601(2013-06-30)PAGE601(2013-06-30)端口角色端口角色细分说明无邻居主边缘端口( PrimaryEdge处于SEP段最边缘的端口是无邻居边缘端口,由用户配置决定。无邻居主边缘端口的职责是终结报文、以及向其他网络发送拓扑变化消息。无邻居主边缘端口一般用于与其他设备制造商设备互通或与不支持SEP协议的设备互通。阻塞端口抢占报文的发起由无邻居主边缘端口的兄弟端口是否是阻塞端口决定。SEP口为无邻居主边缘端口的兄弟端口。如果阻塞端口是无邻居主边缘端口的兄弟端如果阻塞端口不是无邻居主边缘端口的兄弟端口,那么由无邻居主边缘端口的兄弟端口无邻居副边缘端口(No-NeighborSecondaryEdgePort)一个SEP段中只有一个无邻居副边缘端口,由用户配置并选举决定。无邻居副边缘端口的职责是终结报文以及向其他网络发送拓扑变化消息。无邻居副边缘端口一般用于与其他设备制造商设备互通或与不支持SEP协议的设备互通。(CommonPort)-SEPSEPSEPSEP端口报文转发状态(Portstatus)SEP2-2所示。表2-2SEP的端口报文转发状态转发状态说明Forwarding转发状态说明Discarding在SEP段中,为了防止形成环路而被阻塞的端口处于DiscardingSEPSEPDiscardingSEPSEPDiscarding2-3表2-3可通过报文列表特性协议报文是否可以通过Eth-trunkLACP协议报文Yes802.3ah3AH协议报文Yes3AH测试报文YesDLDPDLDP协议报文YesLLDPLLDP协议报文YesCDP协议报文YesFlowcontrol流控报文Yes组播BFDBFD组播报文YesHGMPHGMP邻居发现报文(组播报文)YesHGMP邻居发现报文(广播报文)No802.1agCCM报文YesLBMLTMLBRLTRMACpingMACtrace报文NoSEP协议报文SEP的报文格式如图2-3所示。S系列交换机SEPS系列交换机SEP技术白皮书2原理描述PAGE8PAGE801(2013-06-30)图2-3SEP报文格式DstMAC SrcDstMAC SrcMACLength Pro.ID Ver Type Seg.IDVLANTagPortIDPortpriflagReservedTLV16Bytes其中各个字段的意义请参考表2-4。表2-4SEP报文各字段说明字段(Byte)填充值DstMAC6SEP报文目的MAC有以下几种:0025-9efb-3d6f0025-9efb-3d700025-9efb-3d6fLSAGREPATC报文。SrcMAC6系统MAC。VLANTag4SP报文的VNAN的D为SP的控制AN的ID,优先级为7。Length2报文长度,计算范围是整个报文。Pro.ID2SEP协议ID,用来标记SEP报文,固定为0000。Ver1SEP协议版本,当前为00。Type2SEP2-5。Seg.ID2SPsgentDSPsgetD。PortID8(6systemMAC+2,该节点上先加入该SEP0000,后0001。PortPri.28864SEP。S系列交换机SEPS系列交换机SEP技术白皮书2原理描述PAGE1001(2013-06-30)PAGE1001(2013-06-30)0025-9EFB-3D6FSysMACControlVLANLength00000000010001SysMAC+0001004000000000...00TLV0025-9EFB-3D6FSysMACControlVLANLength00000000010001SysMAC+0001004000000000...00TLV字段(Byte)填充值Flag1是否带有TC的标记:0TC1TCReserved30预留字段,填充全0。TLV不固定根据报文类型的不同,填充不同的TLV组合,TLV定义请参见表2-6。0025-9EFB-3D6FSysMACControlVLANLength00000000000001SysMAC+0001004000000000...00TLV表2-5SEP报文类型与子类型0025-9EFB-3D6FSysMACControlVLANLength00000000000001SysMAC+0001004000000000...00TLV类型报文用途子类型说明0-邻居报文SEP通过收发邻居协议报文(Hello报文60s。0-使能当端口配置上Segment时,发送的邻居报文16Bytes0 1 2 3 4 5 6 7 8 9101112131415161-去使能当端口退出Segment时,发送的邻居报文16Bytes0 1 2 3 4 5 6 7 8 910111213141516类型报文用途子类型说明1-LSA链路状态通告报文(Link0-INFOLSA的公告报文。StatusAdvertisement),有3种:16Bytes1.更新邻居状态数据库,当0 1 2 3 4 5 6 7 8 9101112131415160025-9EFB-3D6FSysMACControlVLAN端口启用SEP协议后开始Length00000001000001SysMAC+0001周期发送LSA报文给邻居004000端口,在端口邻居状态机状000000...00态进入Up后,开始更新各TLV自的LSA数据库。更新的内容是本端口所保存的所阻塞有链路拓扑信息。点公告该报文为点对点报文,每 16Bytes20s60s;当本地邻居状态数据1 2 3 4 5 6 7 8 910111213141560025-9EFB-3D70SysMACControlVLAN库发生变化时,立刻触发发Length00000001000001SysMAC+0001送报文更新。0040002.阻塞点公告,阻塞端口所000000...00在节点同时还会从该节点TLV的SEP端口发出阻塞点公用是通知所有其它节点阻TC塞点的位置。 16Bytes该报文为点对多点报文,发1 2 3 4 5 6 7 8 91011121314156送周期1s;0025-9EFB-3D70SysMACControlVLAN3.拓扑变化通告,拓扑变化Length00000001000001SysMAC+0001报文(TopologyChange),004001当本地SEP段中的拓扑发000000...00TCTLV通知SEP段内其它节点以及上下级网络,拓扑发生变LSA的应答报文,收到LSAinfo时的应答报文。16Bytes0 1 2 3 4 5 6 7 8 910111213141516化,SEP段内其它节点以及1-ACK上级网络中的节点需要更新MAC地址转发表和ARP表。0025-9EFB-3D6FSysMACControlVLAN该报文为点到多点报文。Length00000001010001SysMAC+0001004000000000...00TLV类型报文用途子类型说明2-抢占报文抢占报文用于阻塞指定端口。抢占报文由选举出的主边缘端口或无邻居主边缘端口的兄弟端口发起。用请求-应答机制,如果连续5志。0-请求抢占请求报文16Bytes0 1 2 3 4 5 6 7 8 9101112131415160025-9EFB-3D70SysMACControlVLANLength00000002000001SysMAC+0001004000000000...00TLV1-ACK抢占应答报文16Bytes0 1 2 3 4 5 6 7 8 9101112131415160025-9EFB-3D70SysMACControlVLANLength00000002010001SysMAC+0001004000000000...00TLV3-GR报文优雅重启报文(ReaPGRGR以通知其他节点把本地设LSAGR他节点把本地设备的LSA信息中的老化时间改为正常值。该报文为点对点报文,触发式发送。0-GR始开始GR,主备倒换开始。16Bytes0 1 2 3 4 5 6 7 8 9101112131415160025-9EFB-3D6FSysMACControlVLANLength00000003000001SysMAC+0001004000000000...00TLV1-GR束结束GR,主备倒换完成 16Bytes0 1 2 3 4 5 6 7 8 9101112131415160025-9EFB-3D6FSysMACControlVLANLength00000003010001SysMAC+0001004000000000...00TLV类型报文用途子类型说明4-EPA主边缘端口选举报文SEP符合参与主边缘端口选举1s,60s-(MACID、16Bytes0 1 2 3 4 5 6 7 8 9101112131415160025-9EFB-3D70SysMACControlVLANLength0000000025-9EFB-3D70SysMACControlVLANLength00000004000001SysMAC+0001004000000000...00TLV报文类型typelengthvalue邻居报文0x010008邻居端口ID,如果邻居关系未建立,则报文不含TLVLSAinfo/阻塞点公告0x6400010x64说明下面是LSA的TLV字段0x010008本端口PortID0x02长度变化本节点系统名0x03长度变化本端口端口名,简写0x040002本端口SEP优先级0x050001链路状态(0:DOWN,1:UP)0x060001邻居状态(0:DOWN,1:INIT,2:PREUP,3:UP,4:CONFLICT),该字段按2进制直接填充0x070001该端口转发状态(0:DISCARDING,1:FORWARDING)0x080001该端口的管理状态角色0x090001该端口的运行状态角色0x0a0008该端口的邻居端口portID0x0b0008该端口的兄弟端口portID0x0c0002该端口的老化时间0x0d0004该LSA报文的序列号0x0e0001该LSA的版本号,固定为0x01S系列交换机SEPS系列交换机SEP技术白皮书2原理描述PAGE1301(2013-06-30)PAGE1301(2013-06-30)报文类型typelengthvalueLSAACK0x640001TLV数量0x010008本端口portID0x0d0004该LSA报文的序列号TC0x650001LSAinfoTLVTCTLVTLV数50x010008该TC发生的链路端口1的portID0x020008该TC发生的链路端口2的portID0x030004该TC端口1的序列号,当前填充为全00x040004该TC端口2的序列号,当前填充为全00x050002该TC的segmentID抢占请求报文0x010008阻塞端口ID抢占应答报文0x010008主边缘端口IDEPA报文0x010008本端边缘端口ID0x020001超时标记0x030001邻居状态(0:DOWN,1:INIT,2:PREUP,3:UP,4:CONFLICT),该字段按2进制直接填充0x040001该端口的管理状态角色0x050001该端口的运行状态角色SEP实现机制邻居端口协商机制SEPDown。SEPSEPSEPS系列交换机SEPS系列交换机SEP技术白皮书2原理描述PAGE14PAGE1401(2013-06-30)SEPSEP图2-4邻居协商机制示意图LSW1 LSW2 LSW3 LSW4P2 P2 P1P2SEP使能后,双方互发邻居HELLO报文,初始携带本地信息,邻居信息为空HELLO(本地:LSW2/P2,邻居:NULL)P1P2 P1HELLO(本地:LSW3/P1,邻居:NULL)互相学习到邻居信息之后,周期性发送HELLO(本地:LSW2/P2,邻居:LSW3/P1)HELLO(本地:LSW3/P1,邻居:LSW2/P2)普通端口SEP图2-4表2-7链路状态数据库设备链路状态数据本设备名本设备端口端口直连邻居信息<设备名,端口>LSW1LSW1P2<LSW2,P1>LSW2LSW2P1<LSW1,P2>LSW2P2<LSW3,P1>LSW3LSW3P1<LSW2,P2>LSW3P2<LSW4,P1>LSW4LSW4P1<LSW3,P2>S系列交换机SEPS系列交换机SEP技术白皮书2原理描述PAGE1501(2013-06-30)PAGE1501(2013-06-30)SEP链路状态同步及拓扑显示SEP链路状态同步LSASA(SD邻居关系数据库中以系统MAC地址为系统唯一索引。图2-5SEP链路状态同步示意图LSW1 LSW2 LSW3 LSW4P2 P1 P2 P1 P2 P1LSW1,P2,PrimaryLSW4,P1,SecondaryLSW1,P2,PrimaryLSW4,P1,SecondaryLSW4,P1,SecondaryLSW3,P2,CommonLSW3,P1,CommonLSW1,P2,PrimaryLSW2,P1,LSW2,P2,
LSW1,P2,PrimaryLSW2,P1,CommonLSW2,P2,CommonLSW3,P1,CommonLSW3,P2,Common普通端口SEPSEPINFO-ACKACKLSAretransmitLSA报文,直到收到ACK;ACKkeep-alive1;LSAlife-timeLSALSASEPLSDB1LSA是新的信息,接下来会用该LSALSDBLSA信LSA4136时间>ieSALSASEPSEPLSALSALSAACK应答SEP拓扑显示
拓扑显示功能用于每台设备上都能够查看到当前网络连通性最大的拓扑。SEPSEP2-6是否存在主边缘端口YN是否存在副边缘端口是否存在主边缘端口YN是否存在副边缘端口YN是否存在邻居关系 Down的节点N选择所有节点中Sys-ID最小的一个作为起始节点,端口号小的端口作为起始端口选择该节点作为起始节点,以主边缘端口为起始端口选择这些节点中Sys-ID最小的作为起始节点,以副边缘端口为起始端口选择这些节点中Sys-ID最小的作为起始节点,以邻居关系Down的端口为起始端口YENDEND对于封闭环SEP段,拓扑显示规则如图2-7所示。选择这些节点中Sys-ID最小的作为起始节点,以邻居关系Down的端口为起始端口选择该节点作为起始节点,以主边缘端口为起始端口选择这些节点中Sys-ID最小的作为起始节点,以邻居关系Down的端口为起始端口选择该节点作为起始节点,以主边缘端口为起始端口是否存在邻居关系Down的节点是否存在邻居关系Down的节点是否存在主边缘端口N是否存在主边缘端口YN选择所有节点中Sys-ID选择所有节点中Sys-ID最小的一个作为起始节点,端口号小的端口作为起始端口END主边缘端口选举SEP在SEP段中,只有主边缘端口可以发起阻塞端口抢占。如图2-8所示,网络中链路无故障的情况下,端口启动SEP协议后:LSW1LSW5P1端口参与主边缘端口选举。−首先按照配置端口角色比较,如两个边缘端口配置角色不同,则按配置角色生效;−否则比较Pot(由6个字节的系统AC加2PortD大的端口将被选举为主边缘端口。(MAC图2-8主边缘端口选举示意图P1P1P1P1P2 P1P2 P1P2P1SEP配置完成,SEP段中两个边缘端口无论配置角色是什么,均显示为副边缘端口EPA(配置角色:主边缘端口;实际角色:副边缘端口;PortID:LSW1/P1EPA(配置角色:副边缘端口;实际角色:副边缘端口;PortID:LSW5/P1双方互发EPA报文,进行边缘端口选举。选举完成,按照比较规则,选出主副边缘端口之后,两个边缘端口继续对发EPA消息EPA(配置角色:主边缘端口;实际角色:主边缘端口;PortID:LSW1/P1EPA(配置角色:副边缘端口;实际角色:副边缘端口;PortID:LSW5/P1普通端口SEPLSW5上的P1LSW1上的P1SEP1周期为1秒)内完成新的主边缘端口选举。阻塞端口机制SEP端口优先级SEP1688(2-8。S系列交换机SEPS系列交换机SEP技术白皮书2原理描述PAGE1901(2013-06-30)PAGE1901(2013-06-30)表2-8系统优先级说明条件或事件置位情况用途本端口Down151211管理优先级8743用户优先级00xA0Down时的SEPSEPDown151211管理优先级8743用户优先级00x2040,SEPDownSEPDown邻居端口还未配置SEP的时候。指定阻塞端151211874300x0840,SEP端口被指定为阻口抢占管理优先级用户优先级塞端口时的端口优先级将自动变为该值。
RRPPERPS由主节点或者RPLownerSEPSEP2-9收到携带更高优先级的阻塞点公告图2-9端口阻塞机制示意图收到携带更高优先级的阻塞点公告端口阻塞优先级高于本地保存的端口阻塞优先级高于本地保存的端口放开端口阻塞根据上面SEP端口阻塞优先级以及端口阻塞机制的定义,在SEP段内,端口进入Discarding状态的决定顺序请参考图2-10。S系列交换机SEPS系列交换机SEP技术白皮书2原理描述PAGE20PAGE2001(2013-06-30)图2-10选择端口进行阻塞的流程示意图SEPSEP段内存在Down端口YNYSEP段内存在邻居端口Down的端口该端口阻塞NSEP段内指定为阻塞端口的端口YN用户优先级最高的普通端口YSEPSEPNSEP段内指定为阻塞端口的端口YN用户优先级最高的普通端口Y表2-9端口阻塞方式说明阻塞端口方式说明指定优先级最高的端口为阻塞端口比较端口优先级(。MACMAC地址桥MAC指定SEP段中间的端口为阻塞端口如果SEP段中端口数量为偶数个,则选择阻塞靠近主边缘端口的端口进行阻塞。根据用户配置的跳数指定阻塞端口。S系列交换机SEPS系列交换机SEP技术白皮书2原理描述PAGE2101(2013-06-30)PAGE2101(2013-06-30)阻塞端口方式说明根据设备名+端口名指定阻塞端口SEP根据设备名+端口名指定阻塞端口,如果用户在后续的操作中修改了对应的设备名或端口名,那么将导致抢占无法生效。不指定阻塞端口和指定阻塞端口两种方式的比较请参见表2-10。表2-10不指定阻塞端口和指定阻塞端口两种方式的比较比较内容不指定阻塞端口指定阻塞端口阻塞点最后完成邻居协商的链路或者最后发生故障恢复的链路两端端口比较优先级选取指定的端口进行阻塞可管理性低,阻塞端口可能出现在SEP段的任何位置高,阻塞端口位置固定端口抢占方式抢占模式选择。表2-11抢占模式选择说明抢占模式说明推荐应用场景不抢占模式SEP协通过互相发送端口阻塞状态报文选择最抢占模式说明推荐应用场景抢占模式(抢占模式又分为延时抢占和手工抢占两种模式)延时抢占适用于对网络业务走向规时延可以根据网络稳定程手工抢占定主边缘端口和副边缘端口的链路状态口或无邻居主边缘端口的兄弟端口发送同一台设备只允许两个端口加入同一个SEP段,如果其中一个端口是无邻居主边缘端口,那么另外一个接口为无邻居主边缘端口的兄弟端口。触发式操作,适用于链路维护、网络调试等场景。抢占流程
SEPLSW1~LSW5SEPLSW1的P1P2的P2,现在要通过命令行指定阻塞端口为LSW4的P2。S系列交换机SEPS系列交换机SEP技术白皮书2原理描述PAGE23PAGE2301(2013-06-30)图2-11SEP抢占过程示意(A)LSW1P1 P2P2P1P21
LSW2
P1LSW52P1 P2P2 P1LSW3 LSW412新阻塞端口12LSW1+端口名方式下发指定阻塞端口为LSW4的P2LSW12-12图2-12SEP抢占过程示意(B)LSW1P1 P2P2P1P21
LSW2
抢占请求
P1LSW5P1 P2P2 P1LSW3 LSW412新阻塞端口12LSW42-13LSW15LSW4的P2的阻塞端口转发状态置为Discarding图2-13SEP抢占过程示意(C)LSW1P1 P2P2P1P21
LSW2
P1LSW5抢占应答2P1 P2P2 P1LSW3 LSW412新阻塞端口12如2-14从P1和P22-5SEP报文类型为LSAMAC0025-9efb-3d70MACLSW4的MACSEP564SW2的P264SW2将端口P2oadngS系列交换机SEPS系列交换机SEP技术白皮书2原理描述图2-14SEP抢占过程示意(D)LSW1P1 P2P2P1P2LSW2
P1LSW5阻塞点公告2P1 P2P2 P1LSW3 LSW412新阻塞端口12LSW45P2SEP故障处理机制拓扑变化通告和抑制SEP拓扑变化通告SEP拓扑变化通告用于在SEPSEP2-12表2-12SEP拓扑变化通告说明SEP拓扑变化通告说明端口故障SEP故障恢复且抢占生效SEP段中存在故障。当最后一处端口故障恢复,同时进行了阻塞端口抢占。文档版本01(2013-06-30) 25S系列交换机SEPS系列交换机SEP技术白皮书2原理描述PAGE2601(2013-06-30)PAGE2601(2013-06-30)SEP2-15LSW4的P1端口CE1LSW4-LSW3-LSW2-LSW1-LSW5,这时CE1MAC地址将学习在LSW3、LSW2、LSW1、LSW5的P1图2-15SEP流量路径变化示意NetworkP2NetworkP2P1P1LSW1P2P1P2LSW2LSW5P2P2LSW3P1P1LSW4NetworkP2P1P1LSW1P2P1P2LSW2LSW5P2P2LSW3P1P1LSW4CE1 CE1主边缘端口副边缘端口阻塞端口LSW2LSW3LSW4-LSW5-LSW1-LSW2-LSW3LSW1MACLSW2CE1SPP段内发送TCAMC发送TCNewBockPor,简称NPC端口刷新MAC规则:MAC;接收或者发送TCLSA(BlockNBPMAC;否则清除本端口的MAC。如2-16LSW4的P1LSW2LSW3DownSEPDiscardingLSW4的P1端口将由DiscardingForwarding图2-16刷新机制示意P2P1P1P2P1P1LSW1P2TCNP1LSW2LSW5TCP2NLSW3P2P1P1LSW4P2P1P1LSW1P2P1P2LSW2LSW5P2P2LSW3P1P1LSW4CE1 CE1主边缘端口副边缘端口阻塞端口BPN新阻塞端口NBP根据上面描述的CSW2的P1和SW3的P2LSW2LSW3在SEP段中的两个分别向外发出TC报文,这两个端口是NBPMACLSW1的P1TCLSW1的的P2的方向在本地LSA中查找LSW2的P1LSW4的P1LSW1的P1LSW2的P1LSW1上要刷新P1MAC。以此类推,需要刷新MACLSW1的P1,LSW5的P1,LSW4的P2,LSW3的P2,LSW2的P1。网络拓扑变化通告2-13。S系列交换机SEPS系列交换机SEP技术白皮书2原理描述PAGE28PAGE2801(2013-06-30)表2-13网络拓扑变化通告说明网络拓扑变化通告场景说明解决方案下级网络运行SEP协议网络与运行如果人为更改了下级运行SEPSEP拓扑向上级发其他特性的网络混合组协议网络中指定的阻塞端口,此变化通送拓扑变网,且运行其他特性的网SEP段中的拓扑发生变化。由于告。化通告络位于上级网络。上级网络将感知不到此SEP段这里的其他特性包括:SEP、STP、RRPP。的拓扑发生变化,将导致流量中断。如果下级运行SEP协议网络中有端口发生故障导致拓扑变化,此时由于上级网络感知不到下级网络拓扑发生变化,将导致流量中断。用户通过SmartLink接入SmartLink的主备链路切换时会使能段上的设SmartLinkFlush能。运行SEP协议网络。发送SmartLinkFlush报文通知远端设备。如果SEP段上的设备不能识别SmartLinkFlush报文,即无法感知下游网络拓扑发送变化,将导致流量中断。上级网络向下级发送拓扑变化通告运行SEP持部署CFMCFM功当上级网络发生故障导致拓扑SEP的网络不能感知上级网络的拓SEP 与CFM联动功能。SEPCFM2-17上部署SEPCFMCFMCFM协议报文将故障消息通知OAMLSW1上绑定CFMSEP状Down。S系列交换机SEPS系列交换机SEP技术白皮书2原理描述PAGE2901(2013-06-30)PAGE2901(2013-06-30)图2-17SEP联动CFM示例NetworkLSW1NetworkLSW1SEPSegmentLSW5LSW2LSW4
阻塞端口CFMCFMLSW1上绑定CFMSEPDownLSW2上TCSEPSEP收到TCSEPTCSEPMAC地址转发表和ARPSEP拓扑变化抑制SEPSEPSEP链路闪断SEPSEP组网2-183ID3SEPLSW5LSW6时,LSW5LSW6ID2SEPSEP2ID2SEPSEP变化通告报文每经过一个SEP段,SEP。图2-18多级SEP组网图示例LSW2SEPLSW2SEPSegmentLSW5LSW3LSW4SEPSegment2LSW5LSW6LSW7SEPSegment3LSW8LSW9LSW10主边缘端口副边缘端口阻塞端口CPUSEPFLUSHFDB2秒钟内处理3个不同源的拓扑变化通告报文。(3级SEP故障倒换如2-19LSW1、LSW2、LSW3、LSW4、LSW5SEPLSW1的端口P1和P2分别为SEPLSW2的P2CE1的业务流量经由LSW4、LSW5、LSW1S系列交换机SEPS系列交换机SEP技术白皮书2原理描述PAGE31PAGE3101(2013-06-30)图2-19链路完整时SEP协议报文交互情况NetworkNetworkP1LSW1P2P1P2P2P1LSW2 LSW5P1P2P2 P1LSW3LSW4CE1阻塞端口链路完整情况下SEP协议报文交互情况为:LSW1P1和P2SEP段后分别到达并终结于P2P1端口,保证P11s。SEP1s。SEP端口均发出LSASEP20s。LSW2的P1和P2SEP1s。当LSW4和LSW5之间的链路故障时,报文交互情况为:LSW4LSW5将故障链路两边端口优先级设为DownLSW2的P2LSW4LSW5分别将P2和P1LSW4LSW5在此SEP2-201s。LSW2P2开P2LSW4的P2LSW5的P1MAC实际端口在DonACSW4的P1端口和LSW5的P2端口向外发出TCMAC2-21所TCLSASEPLSW1的P1和P2P1图2-20阻塞点公告发送示意NetworkNetworkP1LSW1P2P1P2P2P1LSW2 阻塞点公告LSW5P1P2P2 P1LSW3LSW4CE1阻塞端口图2-21发送TC报文示意NetworkNetworkP1LSW1P2P1P2P2P1LSW2 TC LSW5P1P2P2 P1LSW3LSW4CE1阻塞端口经过上述报文交互,SEP段放开原有阻塞端口,并正确刷新端口MAC表项,流量路径切换为CE1<->LSW4<->LSW3<->LSW2<->LSW1访问互联网,如图2-22所示。S系列交换机SEPS系列交换机SEP技术白皮书2原理描述图2-22流量路径切换示意NetworkNetworkP1LSW1P2P1P2P2P1LSW2 LSW5P1P2P2 P1LSW3LSW4CE1阻塞端口故障回切如图2-23所示,SEP环内有链路故障,业务走向为CE1<->LSW4<->LSW3<->LSW2<->LSW1访问互联网。当LSW4和LSW5之间的链路SEP文档版本01(2013-06-30) 34S系列交换机SEPS系列交换机SEP技术白皮书2原理描述PAGE35PAGE3501(2013-06-30)图2-23故障回切示例(A)NetworkLSW1P1 P2P2P1P2LSW2
P1阻塞点公告P1 P2P2 P1LSW3 LSW4CE1阻塞端口当故障链路恢复时,LSW4的P2和LSW5的P1端口恢复UP状态,此时的报文交互情况为:LSW4的P2LSW5的P1端口互相发送SEPLSW4LSW5LSALSALSW4LSW5UPMAC->IDLSW4的P2LSW5的P12-24LSW4从P1和P21s;LSW1的P1和P2LSW1的P1图2-24故障回切示例(B)NetworkNetworkP1LSW1P2P1P2P2P1LSW2 LSW5阻塞点公告P1P2P2 P1LSW3LSW4CE1阻塞端口如果SEP段没有配置端口阻塞方式或者延时抢占,链路故障恢复处理到此就结束了,LSW4的P2端口将成为新的阻塞端口。如果同时配置了指定阻塞端口和使能抢占功能的时候,主节点在所有链路故障均恢复后,会启动抢占的延时计时器。假设配置的指定阻塞端口为LSW3的P2端口,抢占延时时间为30s。报文交互情况为:LSW1口P12-25MAC和端口MACID放在抢占请求报文的1sLSW32-25S系列交换机SEPS系列交换机SEP技术白皮书2原理描述PAGE3701(2013-06-30)PAGE3701(2013-06-30)NetworkP1LSW1P2P1P2抢占请求P2P1NetworkP1LSW1P2P1P2抢占请求P2P1LSW2 LSW5P1P2P2 P1NetworkP1LSW1P2P1P2P2P1LSW2 LSW5抢占应答P1P2P2 P1LSW3 LSW4CE1LSW3LSW4CE1阻塞端口阻塞端口LSW3将P2端口置为阻塞状态,并从P1和P21s2-26LSW4LSW3LSW4的P2端口的用户优先级,将P2端口放开;LSW3MACLSW3的P1端口和P2TC2-26MAC地址。CE1LSW1-LSW5-LSW4NetworkP1LSW1P2P1P2P2P1LSW2 LSW5NetworkP1LSW1P2P1P2P2P1LSW2 LSW5阻塞点公告NetworkP1LSW1P2P1P2P2P1LSW2 LSW5TCP1P2LSW3P1P2LSW4CE1P1LSW3P2 P1P2LSW4CE1主边缘端口主边缘端口副边缘端口副边缘端口阻塞端口阻塞端口SEP负载分担如2-27所示,在普通的SEPSEPSEPSEPS系列交换机SEPS系列交换机SEP技术白皮书2原理描述PAGE39PAGE3901(2013-06-30)图2-27SEP单实例示例NetworkNetworkLSW1LSW2LSW5LSW3LSW4CE1 CE2阻塞端口SEPSEP段。每一个SEP段上VLANSEPSEPSEPVLANSEPVLANSEP段计算出的拓扑仅对该SEPSEP段,即某个SEP段的SEP段绑定的VLAN范围报文进行丢弃,对其它VLANSEPSEP段所保护的VLAN有VLAN图2-28SEP多实例示例NetworkNetworkLSW1SEP1LSW2LSW5SEP221LSW3Instance1VLAN100-200LSW4InstanceVLAN201-400CE1 CE212主边缘端口副边缘端口阻塞端口1阻塞端口12如图2-28所示,LSW1~LSW5组成的SEP多实例环上有两个SEP段。图中阻塞端口1ID1SEPID2SEPSEP11,保护对应的VLAN100~VLAN200LSW4->LSW3->LSW2->LSW1->LSW5P2SEP2VLAN201~VLAN400VLAN100~VLAN200SEP22,保护对应的VLAN201~VLAN400LSW3->LSW4->LSW5->LSW1->LSW2P1SEP1VLAN100~VLAN200VLAN201~VLAN400当节点或链路故障时,各SEPLSA2-29和LSW5SEP1VLAN200数据传输路径无影响,但是阻断了SEPVLAN201~VLAN400输路径。图2-29SEP多实例故障示例NetworkLSW1LSW2
SEP1SEP
LSW51LSW3 LSW4Instance1VLAN
Instance2VLAN201-400CE1 CE212主边缘端口副边缘端口阻塞端口1阻塞端口12LSW4LSW5SEP2LSW3LSASEP2LSA2VLAN201~VLAN400LSW3->LSW2->LSW1->LSW5。LSW3LSW42LSASEP2LSASEP2LSW3->LSW4->LSW5->LSW1->LSW2。S系列交换机SEPS系列交换机SEP技术白皮书3产品能力PAGE4201(2013-06-30)PAGE4201(2013-06-30)产品能力说明由于产品版本升级或其他原因,本节描述的产品能力会不定期更新。如需获取产品能力,请查阅产品《规格清单》。各形态支持情况表3-1。表3-1支持情况(以交换机V200R003版本为例)产品形态S2750S5700S6700S7700S9700是否支持SEPYYYYY支持最大Segment数量161616256256性能规格与限制在使用SEP特性时需要注意以下事项:SEPSEP12864SEP端口不支持配置VLANStacking。S系列交换机SEPS系列交换机SEP技术白皮书4应用场景PAGE4301(2013-06-30)PAGE4301(2013-06-30)应用场景SEP组网需求MACSEPSEPBlockPortVLAN100SecondaryEdgePortCE1PrimaryEdgePortGE1/0/1GE1/0/3BlockPortVLAN100SecondaryEdgePortCE1PrimaryEdgePortGE1/0/1GE1/0/3GE1/0/1 GE1/0/2GE1/0/2GE1/0/2LSW3LSW4LSW2GE1/0/1GE1/0/1SEPSegment1LSW5GE1/0/1GE1/0/3LSW1GE1/0/1GE1/0/2GE1/0/3GE1/0/2AggregationAccess如4-1LSW1~LSW5SEPAccessSEPSEP配置思路采用如下的思路配置SEP封闭环:SEP−在LSW1~LSW5上配置SegmentID为1的SEP段和VLANID为10的控制VLAN。−将环网上所有设备加入SEP段并配置LSW1上接口GE1/0/1和GE1/0/3SEP段的端口角色。−在端口角色为主边缘端口的设备上配置灵活指定阻塞端口的方式是依据端口优先级,优先阻塞优先级高的端口。−配置加入SEP段的端口优先级。−配置LSW3上的端口GE1/0/2优先级最高,SEP段上其他的端口均采用缺省优先级,确保阻塞优先级最高的端口。−在端口角色为主边缘端口的设备上配置SEP抢占模式是延时抢占。配置CE1、LSW1~LSW5操作步骤步骤1配置SEP基本功能SegmentID1的SEPVLANID10VLAN#LSW1。<Quidway>system-view[Quidway]sysnameLSW1[LSW1]sepsegment1[LSW1-sep-segment1]control-vlan10[LSW1-sep-segment1]protected-instanceall[LSW1-sep-segment1]quit#配置LSW2。<Quidway>system-view[Quidway]sysnameLSW2[LSW2]sepsegment1[LSW2-sep-segment1]control-vlan10[LSW2-sep-segment1]protected-instanceall[LSW2-sep-segment1]quit#配置LSW3。<Quidway>system-view[Quidway]sysnameLSW3[LSW3]sepsegment1[LSW3-sep-segment1]control-vlan10[LSW3-sep-segment1]protected-instanceall[LSW3-sep-segment1]quit#配置LSW4。<Quidway>system-view[Quidway]sysnameLSW4[LSW4]sepsegment1[LSW4-sep-segment1]control-vlan10[LSW4-sep-segment1]protected-instanceall[LSW4-sep-segment1]quit#配置LSW5。<Quidway>system-view[Quidway]sysnameLSW5[LSW5]sepsegment1[LSW5-sep-segment1]control-vlan10[LSW5-sep-segment1]protected-instanceall[LSW5-sep-segment1]quitVLANIDVLANVLAN的命令。S系列交换机SEPS系列交换机SEP技术白皮书4应用场景PAGE46PAGE4601(2013-06-30)SEP段必须配置控制VLANVLANSEPVLAN。Segment1如果端口上STP处于使能状态,在将端口加入SEP段之前,请先去使能STP。#配置LSW1的接口GE1/0/1端口角色为主边缘端口、接口GE1/0/3端口角色为副边缘端口。[LSW1]interfacegigabitethernet1/0/1[LSW1-GigabitEthernet1/0/1]stpdisable[LSW1-GigabitEthernet1/0/1]sep1edgeprimary[LSW1-GigabitEthernet1/0/1]quit[LSW1]interfacegigabitethernet1/0/3[LSW1-GigabitEthernet1/0/3]stpdisable[LSW1-GigabitEthernet1/0/3]sep1edgesecondary[LSW1-GigabitEthernet1/0/3]quit#配置LSW2。[LSW2]gigabitethernet1/0/1[LSW2-GigabitEthernet1/0/1]stp[LSW2-GigabitEthernet1/0/1]sep1[LSW2-GigabitEthernet1/0/1]quit[LSW2]gigabitethernet1/0/2[LSW2-GigabitEthernet1/0/2]stp[LSW2-GigabitEthernet1/0/2]sep1[LSW2-GigabitEthernet1/0/2]quit#配置LSW3。[LSW3]gigabitethernet1/0/1[LSW3-GigabitEthernet1/0/1]stp[LSW3-GigabitEthernet1/0/1]sep1[LSW3-GigabitEthernet1/0/1]quit[LSW3]gigabitethernet1/0/2[LSW3-GigabitEthernet1/0/2]stp[LSW3-GigabitEthernet1/0/2]sep1[LSW3-GigabitEthernet1/0/2]quit#配置LSW4。[LSW4]gigabitethernet1/0/1[LSW4-GigabitEthernet1/0/1]stp[LSW4-GigabitEthernet1/0/1]sep1[LSW4-GigabitEthernet1/0/1]quit[LSW4]gigabitethernet1/0/2[LSW4-GigabitEthernet1/0/2]stp[LSW4-GigabitEthernet1/0/2]sep1[LSW4-GigabitEthernet1/0/2]quit#配置LSW5。[LSW5]interfacegigabitethernet1/0/1[LSW5-GigabitEthernet1/0/1]stpdisable[LSW5-GigabitEthernet1/0/1]sepsegment1[LSW5-GigabitEthernet1/0/1]quit[LSW5]interfacegigabitethernet1/0/3[LSW5-GigabitEthernet1/0/3]stpdisableS系列交换机SEPS系列交换机SEP技术白皮书4应用场景PAGE4701(2013-06-30)PAGE4701(2013-06-30)[LSW5-GigabitEthernet1/0/3]sepsegment1[LSW5-GigabitEthernet1/0/3]quit#LSW1[LSW1]sepsegment1[LSW1-sep-segment1]blockportoptimalLSW3上的端口GE1/0/2[LSW3]interfacegigabitethernet1/0/2[LSW3-GigabitEthernet1/0/2]sepsegment1priority128[LSW3-GigabitEthernet1/0/2]quit#在主边缘端口位于的设备LSW1上配置抢占模式为延时抢占。[LSW1-sep-segment1]preemptdelay30[LSW1-sep-segment1]quit延时抢占时间没有缺省值,用户必须通过本命令配置延时抢占时间。当最后一个端口故障恢复后,边缘端口将不再收到故障通告报文。主边缘端口在3秒内没有收到故障通告报文,立即启动延时定时器。延时定时器超时后,SEP段中的节点设备执行阻塞端口抢占。所以,在此配置示例中,需要先人为制造端口故障,再恢复端口故障,延时抢占才能成功执行。例如:在LSW2设备上对接口GE1/0/2执行shutdown命令,模拟端口故障。然后再在端口GE1/0/1执行undoshutdown命令,端口故障恢复。步骤2配置CE和LSW1~LSW5的二层转发功能具体配置过程略。请参考本配置举例中的配置文件。步骤3验证配置结果对LSW3上的接口GE1/0/1执行命令shutdown模拟端口故障,在LSW3上执行命令displaysepinterface查看接口GE1/0/2能否从阻塞状态放开进入转发状态。<LSW3>sepinterfacegigabitethernet1/0/2SEPsegment1InterfacePortRoleNeighborStatusPortStatusGE1/0/2结束commonupforwarding配置文件LSW1的配置文件#sysname#vlanbatch10100#sepsegment1control-vlan10blockportoptimalpreemptdelay30protected-instance0to48#interfaceGigabitEthernet1/0/1porthybridtaggedvlan10100stpdisablesepsegment1edgeprimary#interfaceGigabitEthernet1/0/2porthybridpvidvlan200porthybridtaggedvlan100porthybriduntaggedvlan200#interfaceGigabitEthernet1/0/3porthybridtaggedvlan10100200stpdisablesepsegment1edgesecondary#returnLSW2的配置文件#sysname#vlanbatch10#sepsegment1control-vlan10protected-instance0to48#interfaceGigabitEthernet1/0/1porthybridtaggedvlan10100stpdisablesepsegment1#interfaceGigabitEthernet1/0/2porthybridtaggedvlan10100stpdisablesepsegment1#returnLSW3的配置文件#sysname#vlanbatch10#sepsegment1control-vlan10protected-instance0to48#interfaceGigabitEthernet1/0/1porthybridtaggedvlan10100stpdisablesepsegment1#interfaceGigabitEthernet1/0/2porthybridtaggedvlan10100stpdisablesepsegment1sepsegment1priority128#interfaceGigabitEthernet1/0/3porthybridtaggedvlan100#returnLSW4的配置文件#sysname#vlanbatch10#sepsegment1control-vlan10protected-instance0to48#interfaceGigabitEthernet1/0/1porthybridtaggedvlan10100stpdisablesepsegment1#interfaceGigabitEthernet1/0/2porthybridtaggedvlan10100stpdisablesepsegment1#returnLSW5的配置文件#sysname#vlanbatch10100#sepsegment1control-vlan10protected-instance0to48#interfaceGigabitEthernet1/0/1porthybridtaggedvlan10100stpdisablesepsegment1#interfaceGigabitEthernet1/0/2porthybridpvidvlan200porthybridtaggedvlan100porthybriduntaggedvlan200#interfaceGigabitEthernet1/0/3porthybridtaggedvlan10100200stpdisablesepsegment1#returnCE1的配置文件#sysname#vlanbatch100#interfaceGigabitEthernet1/0/1porthybridtaggedvlan100#returnSEP组网需求MACSEPSEPAggregation图4-2SEP多环组网图AggregationVLAN100VLAN200CE1CE2GE1/0/1GE1/0/1GE1/0/3VLAN100VLAN200CE1CE2GE1/0/1GE1/0/1GE1/0/3LSW10LSW7 GE1/0/3GE1/0/1LSW9GE1/0/1GE1/0/1GE1/0/2GE1/0/1GE1/0/1GE1/0/2GE1/0/2LSW11GE1/0/2LSW8LSW6GE1/0/2GE1/0/4GE1/0/1GE1/0/2GE1/0/1 GE1/0/3LSW4GE1/0/1GE1/0/2LSW3LSW2GE1/0/2SEPSegment1GE1/0/1GE1/0/1GE1/0/1LSW5GE1/0/3 GE1/0/3LSW1AccessSecondaryEdgePort BlockPort
ControlVLAN10ControlVLAN20ControlVLAN30如4-2SEPSEP配置思路采用如下的思路配置SEP多环:SEP−SegmentID3SEPID102030VLAN。在LSW1~LSW5上配置SegmentID为1的SEP段和VLANID为10的控制VLAN。在LSW2LSW6~LSW8和LSW3上配置SegmentID2的SEPVLANID为20的控制VLAN。LSW3LSW9~LSW11LSW4上配置SegmentID3SEPVLANID30VLAN。−SEPSEPSEP将LSW1~LSW5构成环网的接口加入SegmentID1的SEPLSW1GE1/0/1和GE1/0/3加入SEP将SW2上接口E1/02SW6~SW8上两个接口及SW3上的接口G102SegmentID2的SEPLSW2LSW3上接口GE1/0/2加SEP将SW3上接口E1/01SW9~SW11上两个接口及SW4上的接口GE1/01SegmentID3的SEPLSW3LSW4上接口GE1/0/1加SEP−在端口角色为主边缘端口的设备上配置灵活指定阻塞端口。Segment1采用的阻塞端口方式是依据端口优先级,优先阻塞优先级高的端口。Segment2采用的阻塞端口方式是依据设备名+接口名。Segment3采用的阻塞端口方式是依据用户配置的跳数指定阻塞端口。−在端口角色为主边缘端口的设备上配置SEP抢占模式。Segment1采用的抢占模式是延时抢占;Segment2和Segment3采用的抢占模式是手工抢占。−在SEP段之间相交的设备LSW2、LSW3和LSW4上配置SEP拓扑变化通告。配置CE1CE2、LSW1~LSW11操作步骤步骤1配置SEP基本功能SegmentID23的SEPVLANID10、20、30的控制VLAN#配置LSW1。<Quidway>system-view[Quidway]sysnameLSW1[LSW1]sepsegment1[LSW1-sep-segment1]control-vlan10[LSW1-sep-segment1]protected-instanceall[LSW1-sep-segment1]quit#配置LSW2。<Quidway>system-view[Quidway]sysnameLSW2[LSW2]sepsegment1[LSW2-sep-segment1]control-vlan10[LSW2-sep-segment1]protected-instanceall[LSW2-sep-segment1]quit[LSW2]sepsegment2[LSW2-sep-segment2]control-vlan20S系列交换机SEPS系列交换机SEP技术白皮书4应用场景PAGE53PAGE5301(2013-06-30)[LSW2-sep-segment2]protected-instanceall[LSW2-sep-segment2]quit#配置LSW3。<Quidway>system-view[Quidway]sysnameLSW3[LSW3]sepsegment1[LSW3-sep-segment1]control-vlan10[LSW3-sep-segment1]protected-instanceall[LSW3-sep-segment1]quit[LSW3]sepsegment2[LSW3-sep-segment2]control-vlan20[LSW3-sep-segment2]protected-instanceall[LSW3-sep-segment2]quit[LSW3]sepsegment3[LSW3-sep-segment3]control-vlan30[LSW3-sep-segment3]protected-instanceall[LSW3-sep-segment3]quit#配置LSW4。<Quidway>system-view[Quidway]sysnameLSW4[LSW4]sepsegment1[LSW4-sep-segment1]control-vlan10[LSW4-sep-segment1]protected-instanceall[LSW4-sep-segment1]quit[LSW4]sepsegment3[LSW4-sep-segment3]control-vlan30[LSW4-sep-segment3]protected-instanceall[LSW4-sep-segment3]quit#配置LSW5。<Quidway>system-view[Quidway]sysnameLSW5[LSW5]sepsegment1[LSW5-sep-segment1]control-vlan10[LSW5-sep-segment1]protected-instance[LSW5-sep-segment1]quit#LSW6~LSW11。LSW6~LSW11的配置与LSW1~LSW5的配置类似,主要区别在于不同SEP段配置的控制VLAN不同。具体配置过程略。请参见本示例的配置文件。VLANIDVLANVLAN的命令。SEP段必须配置控制VLANVLANSEPVLAN。按4-2SEP如果端口上STP处于使能状态,在将端口加入SEP段之前,请先去使能STP。#配置LSW1的接口GE1/0/1端口角色为主边缘端口、接口GE1/0/3端口角色为副边缘端口。[LSW1]interfacegigabitethernet1/0/1[LSW1-GigabitEthernet1/0/1]stpdisable[LSW1-GigabitEthernet1/0/1]sep1edgeprimary[LSW1-GigabitEthernet1/0/1]quit[LSW1]interfacegigabitethernet1/0/3[LSW1-GigabitEthernet1/0/3]stpdisable[LSW1-GigabitEthernet1/0/3]sep1edgesecondary[LSW1-GigabitEthernet1/0/3]quit#配置LSW2。[LSW2]gigabitethernet1/0/1[LSW2-GigabitEthernet1/0/1]stp[LSW2-GigabitEthernet1/0/1]sep1[LSW2-GigabitEthernet1/0/
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 电池制造中的人力资源管理与招聘培训考核试卷
- 海水淡化处理中的关键装备与材料考核试卷
- 植物油加工中的产品研发与创新考核试卷
- 仪器仪表制造业的品牌推广与传播考核试卷
- 区块链在教育中的应用考核试卷
- 春节团圆安全生产的领航者考核试卷
- DB11∕T 1767-2020 再生水利用指南 第1部分:工业
- 黄色梅花课件教学课件
- 谈心交流课件教学课件
- 淮阴工学院《理财规划》2022-2023学年第一学期期末试卷
- 船舶租赁尽职调查
- 统编教学小学语文课外阅读《细菌世界历险记》导读课课件
- 植物生理学-植物的逆境生理
- 【课件】比的基本性质
- 小学英语人教新起点五年级上册Unit3Animalsunit3storytime
- 2023年江苏省淮安市中考化学试卷
- 医疗质量管理与持续改进工作记录
- 小学英语名师工作室工作计划2篇
- 中国旅游嘉兴风土人情城市介绍旅游攻略PPT图文课件
- 出口退税培训课件
- 校外培训机构消防演练方案(精选10篇)
评论
0/150
提交评论