1项目简介-九江银行

1、九江银行大数据平台-基础平台及历史数据平台建设项目招标范围说明书1项目简介随着大数据技术的日益成熟，人们对数据价值的认识越来越深， 金融渠道不断拓宽，大数据在金融服务中的价值日益显现， 九江银行 希望借助大数据技术进一步推动业务的发展，为我行在金融业大数据 的竞争过程中取得先机，为后续的应用建设和业务发展打下良好基 础。2项目建设目标本次项目建设目标是希望为我行建立可扩展的大数据基础平台，并基于大数据基础平台建设我行的历史数据凭条。通过引入业内领先的大数据基础平台、应用平台，借鉴他行建设经验结合我行实际情况，构建符合我行的发展需求的大数据平台3总体内容本次项目实施内容包括如下几部分：大数据基础

2、平台建设、历史 数据平台。3.1大数据基础平台建设引入基于HADOO技术体系的大数据平台、建设分布式计算系 统，提高数据分析、挖掘的能力，同时降低数据存储和计算的成本。 本次大数据平台主要通过采购市场上主流的商业发行版Hadoop平台，对于大数据发行厂商及平台要求如下：商务要求1、 投标大数据平台的软件产品所属公司注册时间大于3年。2、 投标大数据平台的软件产品所属公司需具备：注册资金5000 万元以上，并提供证明文件。3、 投标大数据平台的软件产品所属公司需具备：具有IS09001管 理体系认证或CMMI3软件能力成熟度模型3级认证及以上，并提供 证明文件。4、投标大数据平台的软件产品需具备

3、：中华人民共和国国家版权 局自主知识产权的计算机软件著作权等级证书，并提供证明文件。5、投标大数据平台的软件产品需具备：国内银行总行级客户大数 据平台案例不少于15个，并提供证明文件。6、投标大数据平台的软件产品需具备：单个用户200个节点以上 的国内客户案例，并提供证明文件。7、依据产品成本进行合理报价，首次购买需要提供一年免费服务，服务期满后每年服务费不高于产品成交价格的10%。8参与投标产品必须为最新的发行版本，包括全部的组件，需列明组件及版本清单。9、能够在平台遇到开源组建 bug的时候提供快速的开源组建代 码研发、bug修复能力，为用户提供安全、可靠的平台运行软件。10、根据生产6个

4、节点，开发4个节点，测试4个节点，给出合 理的价格及计费方式（单价，总价，开发测试节点是否收费，开发测 试环境与生产环境版本一致）,给出后续购买节点单价。技术要求平台功能：1、支持SQL2003语法规则95%以上，支持 Oracle PL/SQL存储过 程；2、 支持批量增删查改、Merge into等语法，并支持ACID分布式 事务处理，保证数据最终一致性；3、支持非结构化数据检索；4、支持界面化安装及管理；5、兼容标准Hadoop及相关组件API接口；6、支持对接常见BI工具，如SmartBI、Tableau、帆软等软件；7、 平台支持完整的多租户权限管控体系，支持基于用户、用户组 和角色

5、的权限管控，支持资源与数据两层权限管控；8支持通过Kerberos认证协议进行用户身份认证；9、支持基于数据层面的用户操作审计日志，并支持审计告警。10、大数据平台软件能支持运行在主流 x86架构通用服务器、一 体机之上，并能支持运行在基于 Power芯片的Power Linux服务器之 上。11、大数据平台软件能兼容主流 Linux操作系统，例如SuSe RedHat、CentOS等；平台高可用：12、系统中不允许存在单点故障，任何一个角色故障后都应有备 份机器承担原失效节点工作，并在监控页面上对错误状态进行显示标 识；13、系统发上硬件故障时支持自动监测错误并修复数据，无需人 工干预，并支

6、持细粒度的任务出错处理，对长时间的数据处理任务在 运行中发生故障后，无需重新运行整个应用任务，只需要运行失败的 子任务即可完成数据处理任务；14、支持分布式数据库表异地远程复制，并支持双向复制，实现 异地灾备。平台性能：15、在常见的2-路服务器上，平均每个CPUCore不低于每秒1000 万记录的扫描速度，不低于每秒100万记录的聚合速度；16、按关键字检索单表记录延时小于 200ms,单个节点并发度超过1000；17、按关键字检索多表关联记录延时小于 1s,单个节点并发度超 过 1000；18、多表关联检索并汇总统计延时小于 1s,单个节点并发度超过100；19、 流数据处理在万兆网络条件

7、下，单节点不低于200MB/S的处 理吞吐能力，简单业务处理延时能达到毫秒级；20、性能要求在招标前可通过其他测试记录或证明文件证明，入 场后必须在我行使用的通用2-路服务器和4-路服务器上达到要求。服务要求1、投标大数据平台的软件产品需提供原厂售后服务承诺函并加盖公章2、 投标大数据平台的软件产品需提供原厂售后人员社保证明，并 保证后续服务人员和投标承诺的人员一致。3、技术支持：5X 8 服务响应时段为：9:00 - 18:00、400电话7x24小时待机、邮件回复、IM远程服务、论坛支持、企业论坛账号服务、技术专家电话直连、配置优化咨询、完整配置手册、紧急问题现场服务、提供 年度和季度巡检

8、及巡检报告、月度电话回访；4、培训：提供一个月的原厂培训，包括大数据平台及架构培训、大数据平台开发培训 、大数据平台数据挖掘培训等。3.2历史数据平台基于大数据基础数据平台构建我行历史数据平台，提高历史数据 的存储和查询效率，对历史数据进行统一管理，为下游系统提供数据 查询接口。数据查询柜面网银接口服务历史数据平台建设内容包括但不限于以下内容:1、结构化数据存储，迁移和保存行内各业务系统或外部接入的 重要数据，完成必要的数据加工，提升数据查询效率和查询 范围。2、提供可扩展的配置化数据接入形式， 支持多种数据源，包括 但不限于：文本（固定分隔符、定长形式）、关系型数据库、 API 等。3、支持

9、对接Cog nos、SmartBI、帆软等常用BI工具。4、提供对外服务接口，支持对接我行 ESB为下游系统提供数 据查询接口，支持单笔查询、批量查询、异步查询等多种形 式，如支持网银系统账单查询、报表系统报表查询等。5、提供数据目录服务，展示平台中已接入的数据内容，支持元 数据管理，及其他的统计信息。6、其他管理功能，如用户管理、角色管理、权限管理、任务调 度、系统配置管理，接口管理等，其中任务调度需支持对接 我行统一调度工具。7、完成历史流水数据迁移，给出其他历史数据迁移规划和建 议。8基于上述要求，给出我行历史数据平台建设规划和技术方案提供可落地的知识转移方案。4 总体需求4.1商务需求

10、能够根据上述总体内容完成我行大数据平台建设，并根据上述内容给出总体规划和各模块规划及落地方案。投标可由应用厂商和平台厂商联合投标，一家应用厂商只能选择 一家平台厂商进行联合投标，对于重复出现（含完全控股或子公司） 的应用厂商直接取消投标资格。投标公司与实施公司必须为同一公 司，不得出现由集团总公司投标后由子公司进行实施，入场时需提供入场人员工作合同复印件并加盖公司印章。若多家应用厂商联合同一家平台厂商进行投标，平台厂商只进行一次讲标即可。投标后技术讲标必须由项目经理讲标，若入场后发现项目经理与 讲标人不一致，视为违约，行方可拒绝签订合同。4.2技术需求4.2.1 架构和规划基于上述总体内容要求

11、，完成对我行大数据建设的规划，及对历史数据平台建设规划。未来构造在大数据平台之上的应用系统规划及大数据平台配套系 统的规划，给出相应3年内大数据平台的扩展性方案、 预估数据存储 量折线图、以及预估所需投入预算。4.2.2 物理系统架构1、大数据平台主机应满足高可用和可扩展性。,当一个服务器或节点发生故障时， 整个系统应保证能持续运行，不会造成整个平台系统宕机事故。大数据平台主机和存储系统应具有投资保护的能力， 新旧不 同型号的平台可以共存于同一个系统内，共同对外提供服务。大数据平台主机和存储系统的配置方案应提供合理的配置依 据。423系统性能要求对系统性能的总体要求包括：1 .数据平台处理时间

12、需满足数据管理平台支持的应用系统的正 常运行。2. 大数据量查询的快速响应能力。3. 混合负载管理能力：应提供集成的混合负载管理能力，能够 同时满足ETL信息访问、备份的混合处理性能要求。4. 数据有效装载量：是指数据库实际可以容纳的数据量，而且 系统在装载了该有效数据量后，仍然可以满足本招标书所列的所有性 能指标。5. 具有高性能的数据加载以及处理计算能力。6 .批量任务处理时间要求重要时点不超过 2小时，日常不超过 1个小时。其他要求1 .系统和平台建设符合九江银行对系统安全、数据安全、网络 安全及权限管理的要求。2. 系统能够支持快速二次开发，并提供开发支持。3. 系统应采用平台化设计，

13、支持功能性拓展。4. 系统扩充方便，设置修改灵活，操作维护简单，能够适应业务的快速变化及发展。5. 系统安全、可靠，供用户进行有效的维护与使用，系统运行维 护要求自动化、参数化和交易化。6. 系统严格按照软件工程要求提供详细的各类文档。7 .系统使用方便，支持B/S架构。8. 系统和应用的运行管理与监控简单易用，易于管理和维护， 系统所有运行管理操作应该做到菜单化，方便运维管理。能与九江银 行现有的监控系统对接；具有硬件故障诊断服务工具，能收集错误信 息并将错误信息发送给指定用户；各设备、系统或应用发生故障时， 能立即显示故障节点和故障原因，并能用多种方式告警；批量处理时 间要控制在合理的范围内，要有批量处理的预计时间；批量处理的错 误提示必须明确。9. 系统能够支持IE8、IE10、Chrome等主流浏览器。10. 系统及应用必须遵守我行已有的开发规范及数据标准规范。11 .产品支持我行要求的操作系统及中间件（redhat6.4 , r