C证券公司方案及测试报告

附件3C证券公司方案及测试报告中国证券业协会信息技术委员会2021年1月

目录第一部分实施方案 111项目背景 121.1项目目标 121.2行业监管要求 121.3灾备系统建设标准 131.4实施模式 131.5覆盖范围 142总体技术方案 152.1基础平台概述 152.2上证云架构 162.2.1外部接入 172.2.2安全体系 182.2.3弹性扩容 182.2.4服务质量管理 182.3总体架构设计 192.3.1设计原则 192.3.2灾备中心架构 202.3.3VPC区域划分 212.3.4区域设计描述 212.3.5架构优化策略 222.4网络架构 222.4.1总体网络架构 222.4.2市场机构接入 242.4.3公司内部接入 252.5项目一期建设系统及云资源配置 262.5.1集中交易系统 262.5.2融资融券系统 282.5.3期权交易系统 292.5.4第三方存管系统 302.5.5场外市场交易系统 322.5.6账户管理系统 332.5.7法人清算系统 342.5.8鑫易通PC交易系统 352.5.9金罗盘手机交易系统 362.5.10中登平台 402.5.11数据备份系统 402.6系统安全策略 412.6.1网络安全 422.6.2主机安全 432.6.3应用安全 432.6.4数据库安全 442.6.5内网补丁服务器、YUM服务器和NTP 442.6.6运维操作安全 442.7数据同步策略 452.7.1数据库同步工具 452.7.2重要文件同步工具 462.7.3数据同步方案 462.8数据备份策略 482.9日常运维监控策略 492.9.1基础环境监控 492.9.2网络和云资源性能监控 492.9.3应用系统监控 503灾备中心管理 523.1值班管理 523.1.1人员与岗位 523.1.2值班职责 523.1.3值班计划 533.1.4物料资源管理 543.1.5现场管理 543.2云资源管理 553.2.1部署规划 553.2.2资源分配 553.2.3运行维护 553.2.4优化部署 553.3网络安全管理 563.3.1系统安全策略落实 563.3.2异地灾备信息系统的等级保护 573.3.3异地灾备信息系统的安全检测 573.4测试与升级管理 573.4.1测试与升级定义 573.4.2升级维护窗口 573.4.3升级的提交 583.4.4升级的批准 583.4.5升级的实施 583.4.6升级的确认 583.5变更发布管理 593.5.1变更的定义 593.5.2变更维护窗口 593.5.3变更的提交 593.5.4变更的批准 593.5.5变更的实施 593.5.6变更的确认 603.6演练与恢复管理 603.6.1前期准备 603.6.2演练 613.6.3恢复 623.7应急切换管理 623.8日常运维管理 643.8.1每日操作流程 643.8.2定期工作流程 684系统测试方案 704.1测试环境 704.1.1内部测试环境 704.1.2周边测试环境 714.1.3外部接入测试环境 724.2系统功能测试方案 724.2.1集中交易系统功能测试方案 724.2.2融资融券系统功能测试方案 774.2.3期权交易系统功能测试方案 824.2.4账户管理系统功能测试方案 854.2.5场外市场交易系统功能测试方案 914.2.6法人清算系统功能测试方案 934.2.7金罗盘手机交易系统功能测试方案 954.2.8鑫易通PC交易系统功能测试方案 984.2.9第三方存管系统功能测试方案 1004.3系统性能测试方案 1024.3.1集中交易系统性能测试方案 1024.3.2融资融券系统性能测试方案 1054.3.3期权交易系统性能测试方案 1074.3.4账户管理系统性能测试方案 1104.3.5场外市场交易系统性能测试方案 1124.3.6鑫易通PC交易系统性能测试方案 1144.3.7金罗盘手机交易系统性能测试方案 1164.4数据同步校验方案 1194.4.1集中交易系统数据同步校验方案 1194.4.2融资融券系统数据同步校验方案 1214.4.3期权交易系统数据同步校验方案 1224.4.4账户管理系统数据同步校验方案 1224.4.5场外市场交易系统数据同步校验方案 1244.4.6法人清算系统数据同步校验方案 1264.4.7金罗盘手机交易系统数据同步校验方案 1274.4.8鑫易通PC交易系统数据同步校验方案 1284.4.9第三方存管系统数据同步校验方案 1284.4.10中登平台数据同步校验方案 1284.4.11备份数据恢复验证方案 1294.5平行清算测试方案 1294.5.1集中交易系统平行清算测试方案 1294.5.2融资融券系统平行清算测试方案 1314.5.3期权交易系统平行清算测试方案 1354.5.4场外市场交易系统平行清算测试方案 1364.6备份系统切换及验证方案 1364.6.1集中交易系统切换及验证方案 1364.6.2融资融券系统切换及验证方案 1384.6.3期权交易系统切换及验证方案 1394.6.4账户管理系统切换及验证方案 1404.6.5场外市场交易系统切换及验证方案 1414.6.6法人清算系统切换及验证方案 1424.6.7金罗盘手机交易系统切换及验证方案 1424.6.8鑫易通PC交易系统切换及验证方案 1434.6.9第三方存管系统切换及验证方案 1434.6.10中登平台切换及验证方案 1444.7主系统恢复方案 1444.7.1集中交易系统主系统恢复方案 1444.7.2融资融券系统主系统恢复方案 1464.7.3期权交易系统主系统恢复方案 1464.7.4账户管理系统主系统恢复方案 1474.7.5场外市场交易系统主系统恢复方案 1484.7.6法人清算系统主系统恢复方案 1494.7.7金罗盘手机交易系统主系统恢复操作 1494.7.8鑫易通PC交易系统主系统恢复方案 1504.7.9第三方存管系统主系统恢复方案 1514.7.10中登平台主系统恢复方案 1515项目实施要点 1535.1总体进度规划 1535.1.1总体进度安排 1535.1.2第一期进度安排 1535.2需重点关注的事项 1555.3系统验收要点 1566制度与文档 1586.1管理制度 1586.2工作文档 158第二部分测试报告 162A.环境说明 1631概述 1632测试环境 1632.1系统总体架构 1632.1.1测试环境平台 1632.1.2灾备中心架构 1642.1.3VPC区域划分 1652.1.4网络安全控制 1652.2灾备环境与资源配置 1662.2.1总体描述 1662.2.2灾备资源配置 1662.3通信接入 1772.3.1市场机构接入 1772.3.2公司内部接入 1783灾备切换演练测试方案 1793.1测试目的 1793.2参测单位 1793.3参测系统 1793.4测试内容 1803.1.1灾备切换测试演练方案操作流程 1803.1.2灾备系统功能测试方案 1873.1.3灾备系统性能测试方案 202B.第一轮测试报告 2051验证结果 2051.1系统切换测试结果 2051.1.1集中交易系统切换测试结果 2051.1.2融资融券系统切换测试结果 2051.1.3期权交易系统切换测试结果 2061.1.4账户管理系统切换测试结果 2061.1.5场外市场交易系统切换测试结果 2061.1.6法人清算系统切换测试结果 2071.1.7金罗盘手机交易系统切换测试结果 2071.1.8鑫易通PC交易系统切换测试结果 2071.1.9第三方存管系统切换测试结果 2071.1.10中登平台切换测试结果 2081.2业务功能测试结果 2081.2.1集中交易系统业务功能测试结果 2081.2.2融资融券系统业务功能测试结果 2081.2.3期权交易系统业务功能测试结果 2091.2.4账户管理系统业务功能测试结果 2091.2.5场外市场交易系统业务功能测试结果 2091.2.6法人清算系统业务功能测试结果 2101.2.7金罗盘手机交易系统业务功能测试结果 2101.2.8鑫易通PC交易系统业务功能测试结果 2111.2.9第三方存管系统业务功能测试结果 2121.2.10中登平台业务功能测试结果 2121.3性能测试结果（集中交易系统） 2121.3.1测试内容 2121.3.2测试环境 2131.3.3压力测试 2131.3.4中间件高可用测试 2181.3.5性能测试结论 2191.4数据库压力测试结果 2191.5数据验证结果 2191.5.1集中交易系统数据验证结果 2191.5.2融资融券系统数据验证结果 2191.5.3期权交易系统数据验证结果 2201.5.4账户管理系统数据验证结果 2201.5.5场外市场交易系统数据验证结果 2201.5.6法人清算系统数据验证结果 2201.5.7金罗盘手机交易系统数据验证结果 2201.5.8鑫易通PC交易系统数据验证结果 2211.5.9第三方存管系统数据验证结果 2211.6业务验证结果 2211.6.1集中交易系统业务验证结果 2211.6.2融资融券系统业务验证结果 2211.6.3期权交易系统业务验证结果 2211.6.4账户管理系统业务验证结果 2211.6.5场外市场交易系统业务验证结果 2221.6.6法人清算系统业务验证结果 2221.6.7金罗盘手机交易系统业务验证结果 2221.6.8鑫易通PC交易系统业务验证结果 2221.6.9第三方存管系统业务验证结果 2221.6.10中登平台业务验证结果 2222测试总结 2232.1本次测试总结 2232.1.1总切换时间 2232.1.2异地灾备系统功能、性能与数据完整性 2232.1.3异地灾备切换RTO指标 2232.1.4异地灾备切换RPO指标 2232.1.5异地灾备系统性能指标 2242.1.6测试小结 2242.2需进一步完善的工作 225C.第二轮测试报告 2261验证结果 2261.1系统切换测试结果 2261.1.1集中交易系统切换测试结果 2261.1.2融资融券系统切换测试结果 2261.1.3期权交易系统切换测试结果 2271.1.4账户管理系统切换测试结果 2271.1.5场外市场交易系统切换测试结果 2271.1.6法人清算系统切换测试结果 2281.1.7金罗盘手机交易系统切换测试结果 2281.1.8鑫易通PC交易系统切换测试结果 2281.1.9第三方存管系统切换测试结果 2291.1.10中登平台切换测试结果 2291.2业务功能测试结果 2291.2.1集中交易系统业务功能测试结果 2291.2.2融资融券系统业务功能测试结果 2301.2.3期权交易系统业务功能测试结果 2301.2.4账户管理系统业务功能测试结果 2301.2.5场外市场交易系统业务功能测试结果 2311.2.6法人清算系统业务功能测试结果 2311.2.7金罗盘手机交易系统业务功能测试结果 2321.2.8鑫易通PC交易系统业务功能测试结果 2321.2.9第三方存管系统业务功能测试结果 2331.2.10中登平台业务功能测试结果 2331.3性能测试结果（集中交易系统） 2341.3.1测试内容 2341.3.2测试环境 2341.3.3压力测试 2341.3.4中间件高可用测试 2391.3.5性能测试结论 2401.4数据库压力测试结果 2401.5数据验证结果 2401.5.1集中交易系统数据验证结果 2401.5.2融资融券系统数据验证结果 2401.5.3期权交易系统数据验证结果 2411.5.4账户管理系统数据验证结果 2411.5.5场外市场交易系统数据验证结果 2411.5.6法人清算系统数据验证结果 2411.5.7金罗盘手机交易系统数据验证结果 2411.5.8鑫易通PC交易系统数据验证结果 2421.5.9第三方存管系统数据验证结果 2421.6业务验证结果 2421.6.1集中交易系统业务验证结果 2421.6.2融资融券系统业务验证结果 2421.6.3期权交易系统业务验证结果 2421.6.4账户管理系统业务验证结果 2421.6.5场外市场交易系统业务验证结果 2431.6.6法人清算系统业务验证结果 2431.6.7金罗盘手机交易系统业务验证结果 2431.6.8鑫易通PC交易系统业务验证结果 2431.6.9第三方存管系统业务验证结果 2431.6.10中登平台业务验证结果 2432测试总结 2442.1本次测试总结 2442.1.1总切换时间 2442.1.2异地灾备系统功能、性能与数据完整性 2442.1.3异地灾备切换RTO指标 2442.1.4异地灾备切换RPO指标 2442.1.5异地灾备系统性能指标 2452.1.6测试小结 2452.2需进一步完善的工作 246D.第三轮测试报告 2471验证结果 2471.1系统切换测试结果 2471.1.1集中交易系统切换测试结果 2471.1.2融资融券系统切换测试结果 2471.1.3期权交易系统切换测试结果 2481.1.4账户管理系统切换测试结果 2481.1.5场外市场交易系统切换测试结果 2481.1.6法人清算系统切换测试结果 2491.1.7金罗盘手机交易系统切换测试结果 2491.1.8鑫易通PC交易系统切换测试结果 2491.1.9第三方存管系统切换测试结果 2501.1.10中登平台切换测试结果 2501.2业务功能测试结果 2501.2.1集中交易系统业务功能测试结果 2501.2.2融资融券系统业务功能测试结果 2511.2.3期权交易系统业务功能测试结果 2511.2.4账户管理系统业务功能测试结果 2511.2.5场外市场交易系统业务功能测试结果 2521.2.6法人清算系统业务功能测试结果 2521.2.7金罗盘手机交易系统业务功能测试结果 2531.2.8鑫易通PC交易系统业务功能测试结果 2531.2.9第三方存管系统业务功能测试结果 2541.2.10中登平台业务功能测试结果 2541.3性能测试结果（集中交易系统） 2551.3.1测试内容 2551.3.2测试环境 2551.3.3压力测试 2561.3.4中间件高可用测试 2781.3.5性能测试结论 2781.4数据库压力测试结果 2781.5数据验证结果 2781.5.1集中交易系统数据验证结果 2781.5.2融资融券系统数据验证结果 2791.5.3期权交易系统数据验证结果 2791.5.4账户管理系统数据验证结果 2791.5.5场外市场交易系统数据验证结果 2791.5.6法人清算系统数据验证结果 2801.5.7金罗盘手机交易系统数据验证结果 2801.5.8鑫易通PC交易系统数据验证结果 2801.5.9第三方存管系统数据验证结果 2801.6业务验证结果 2801.6.1集中交易系统业务验证结果 2801.6.2融资融券系统业务验证结果 2801.6.3期权交易系统业务验证结果 2811.6.4账户管理系统业务验证结果 2811.6.5场外市场交易系统业务验证结果 2811.6.6法人清算系统业务验证结果 2811.6.7金罗盘手机交易系统业务验证结果 2811.6.8鑫易通PC交易系统业务验证结果 2811.6.9第三方存管系统业务验证结果 2811.6.10中登平台业务验证结果 2822测试总结 2822.1本次测试总结 2822.1.1总切换时间 2822.1.2异地灾备系统功能、性能与数据完整性 2822.1.3异地灾备切换RTO指标 2822.1.4异地灾备切换RPO指标 2832.1.5异地灾备系统性能指标 2832.1.6测试小结 283E.综合分析及结论 2851、云平台可用性与稳定性 2852、RTO与RPO指标 2883、网络通信与安全 2884、其他应注意的事项 290

第一部分实施方案

项目背景项目目标信息系统是证券公司各类业务运行的基础，为防范因信息系统或其所依托的主用数据中心发生故障或灾难，造成业务中断，证券公司必须做好异地灾备中心的规划及建设工作。C证券本项目的建设目标，是遵循《证券基金经营机构信息技术管理办法》（以下简称《办法》）的要求，以上交所技术公司提供的云平台为基础，构建公司的异地灾备中心，以有效提升业务连续性的保障水平，降低因发生故障或灾难性事件而造成损失的风险。行业监管要求《办法》要求，证券公司的重要信息系统应当具备灾难及重大灾难应对能力，以确保在发生故障后，有较快的系统恢复能力，并尽量减少丢失数据。证券公司的重要信息系统，按其实时性特征，可简要分类如下：系统分类重要信息系统实时信息系统集中交易系统、第三方存管系统、内存交易系统、QFⅡ交易系统、股转做市商系统、期权交易系统、场外市场交易系统、PB业务交易系统、账户管理系统、非现场开户系统、网上业务办理系统、移动终端业务办理系统、投资交易系统、短信系统、网上交易系统、手机证券系统、呼叫中心系统、融资融券系统等非实时信息系统估值核算系统、法人清算系统、财富管理系统、私募基金托管外包系统、私募基金法人清算系统、投行业务管理系统、资管份额登记系统等《办法》要求，实时信息系统的故障应对能力应达到四级，非实时信息系统的故障应对能力应达到二级，所有信息系统的灾难应对能力应达到五级，重大灾难应对能力应达到六级，各级别的技术指标在《证券期货经营机构信息系统备份能力标准》（以下简称《标准》）中有详细规定。灾备系统建设标准《办法》规定，证券公司的异地备份系统应提供与主用生产系统同等的处理能力，灾备环境应能完全承受生产切换时的所有业务负载，以确保实施灾备切换后，业务能依托异地灾备中心正常运行。同等能力指异地部署的所有备份系统，其性能指标（如TPS、响应时间等）具有与生产环境同等的水平。同等处理能力不要求异地备份系统具备与主用生产系统完全一致的物理设备和系统架构。如果具备弹性条件，异地备份系统可以在日常运行时采用最小资源运行模式，并在实施灾备切换时，在规定的RTO时间内完成资源弹性扩容，达到同等能力处理能力要求。C证券的异地灾备系统，参照《标准》及《信息安全技术信息系统灾难恢复规范GB/T20988—2007》规划建设。实施模式异地灾备系统所依托的异地灾备中心，其建设可以分为自建机房、租用托管机房和租赁可信机构云服务三种模式，本方案采用租赁上交所技术公司的云服务实施建设的模式。与自建机房、租用专业托管机房相比，租赁交所技术公司的云服务，无需自行建设机房及采购服务器、网络、存储等硬件设备，可直接购买上交所技术公司提供的各类云资源建设灾备系统，后期也无需投入对基础环境与硬件设备的维护费用。建设周期短，前期建设与后期维护投入成本低。可信机构云服务按实际资源使用量付费，可灵活快速扩缩容。当业务负载下降时，可适当降低灾备系统的处理能力，节省成本，当业务快速发展时，可快速提升灾备系统的处理能力，满足业务负载需求，可扩展性强。三种建设模式的简要对比见下表：指标自建机房租用托管机房租赁可信机构云服务初期成本高中低建设周期长中短可扩展性低中高运维成本高中低C证券的主用数据中心位于C市建邺区，距离上交所技术公司云平台的建设地点上海市浦东新区的直线距离超过300公里，且C市不处于地震带，可以避免异地灾备中心与主用数据中心遭受相同的重大自然灾害，出现同时不可用的风险。覆盖范围C证券的异地灾备中心及异地备份系统，根据公司的实际业务情况，综合考虑系统重要程度和复杂度，拟分三期实施建设，并以确保经纪业务（特别是零售业务）的连续性为一期建设目标，并在实施过程中逐步积累云环境下异地灾备系统的建设和运维经验,不断提高管理水平。分期建设涉及的系统清单如下：批次类别系统实例一期实时信息系统中涉及核心业务的系统集中交易系统、PC网上交易系统、APP手机交易系统、行情及资讯系统、结算系统、账户管理系统、非现场开户系统等二期实时信息系统中涉及其他业务的系统PB系统、自营交易系统等三期非实时信息系统估值系统、托管及外包系统、TA系统等项目实施过程中，将根据对应技术系统的具体特点，制定相关的适应性改造计划。

总体技术方案基础平台概述异地灾备中心包含了基础设施建设、IT系统、业务系统、技术保障、财务分析、人员管理、灾备中心运营管理、安全管理等方面，是一个涉及到多专业、多学科的综合性系统工程。正因为灾难备份系统建设的综合性、复杂性，所以灾难备份系统的建设也存在诸多难点。证券公司通过云灾备中心模式，可快速实现异地灾备建设。下图给出了异地灾备模式（两地两中心）的券商系统架构：上证技术上交所技术行业云（以下简称上证云）是上交所技术有限责任公司面向证券、基金等金融机构推出的云计算服务，在技术上采用阿里飞天架构，全新建设于金桥中心。涵盖计算、存储、网络、安全及增值等五大类产品，满足行业客户生产、灾备、办公等系统随时接入、弹性扩展、按需付费、数据安全的上云需求，为金融机构统一提供技术领先、稳定可靠、安全合规的云上服务。C证券经过不断地研究论证，在上证技术配合下利用宁桥路环境反复进行POC测试，最终得到的指标能够满足异地灾备核心交易应用。C证券采用上证云的全云模式异地灾备中心建设方案，主要基于如下考虑：1．此方案券商无需在异地自行建设机房，也无需采购服务器、网络、存储等硬件设备，直接购买上证云服务提供商的计算、存储和网络资源，建设筹备时间短，随申请随用，资源可弹性扩展。2．总体成本较低，异地灾备中心按年付费，并可根据实际业务量调整；业务上线可远程部署，灵活方便；无需考虑机房及硬件维护；交易所及银行专线可租赁云服务商资源。3．建设标准符合监管要求。在运维方面，本方案为全云模式，物理服务器、存储、网络设备等传统硬件均由上证云提供监控、维护以及快速修复服务，业务系统以及数据库维护、系统上云部署由顶点公司提供专业技术支持。整体架构采用混合灾备云部署的容灾架构。券商生产机房多为自建IDC，当容灾系统部署在上证云上，即组成如上图所示的混合云架构。在IDC和上证云同时部署应用系统服务，可通过上证云强大的弹性伸缩和安全防护能力，满足容灾系统初期低成本建设以及后期可以根据实际需求扩展为主生产中心。上证云架构上证云平台网络拓扑根据总体思路的规划分为专有云业务网，云下业务网，外部接入网（包括外联接入区和互联网接入区），和带外管理网专有云区域（如下图所示）。网络架构划分为云盾流量防护区、云生产内网区与平台专线接入区。系统架构术语说明系统术语描述ISW互联交换机，互联ISP或用户网络骨干。CSW内网接入交换机（CustomerSwitch），接入用户内网骨干，实现云网络内外部的路由分发交互，包括VPC专线接入DSW核心交换机，下挂LSW与各云产品接入交换机。ASW接入交换机，接入云服务器，上行互联汇聚交换机PSW。LSW综合接入交换机，接入各云产品的各类服务网关设备。VPC虚拟专有云（VirtualPrivateCloud）是一种可以实现在云网络上划分私有云的云虚拟化技术。外部接入上证云提供IT系统基础资源服务:依托行业优势，上证云面向云租户提供了沪深交易所报盘、沪深交易所行情、证联网及BGP互联网线路，满足异地灾备数据中心所需的沪深交易、各类行情、第三方存管系统、中登、FDEP、Prop、Dcom、CCnet、股转、中证报价等各种接入服务。详见下表：服务项目服务内容IT系统基础资源服务提供应用系统部署所需的IT系统基础资源服务，仅限于以下资源及服务：服务器资源；专用存储资源；提供所需的路由器、交换机、防火墙、VPN设备的网络设备资源；对以上IT系统基础资源提供运维服务；云资源；提供上交所及深交所行情网络接入配合、上交所及深交所报盘网络接入配合、深证通FDEP的网络接入配合；提供上证通卫星、VSEP、证联网、专线的接入配合；提供业务系统涉及的互联网专线、云联网的接入配合；安全体系上证云基础设施资源服务平台专有云区域网络架构划分为云盾流量防护区、云生产内网区与平台专线接入区。云盾流量防护区由云盾产品+分光分流设备组成，部署云盾流量清洗Aliguard，用于防御网络DDOS攻击；云生产内网区主要部署弹性计算(ECS)、负载均衡（SLB）、分布式存储（OSS）、关系型数据库（RDS）、中间件等云产品；平台专线接入区主要由VPC的网络虚拟化网关服务器与专线接入交换机组成。上证云在用户侧安全提供了多个层面的安全保障，其中包括了账户安全