存储方案整体设计

目录1.存储方案整体设计 1存储方案整体设计数据的存储是档案扫描系统的核心组成部分，肩负着中国第二历史档案馆关键业务系统数据的存储与保护功能。由于系统包含扫描、加工、应用、数据库等重要系统，我们将依据不同应用特点进行方案设计，按应用性能需求、访问方式等不同的特点提供不同的存储方式。在本项目当中，数据在进行加工系统中，既需要将数据传送到相应的服务器，也需要将数据进行本地存储。进行本地存储的好处是可以将得到的数据进行本地再处理，也可以作为数据的备份。整体拓扑结构图：数据在扫描、加工处理过程中，会从核心存储得到一个存储空间用于文件临时存放，随着业务流程推进，扫描数据最终变成了成品数据，核心存储中会划分一定的空间用于成品数据存放。由于整个系统数据量比较大，因此对系统的存储容量、存储的方式、数据的安全性、数据的可用性就有较高的要求。数据存储采用分级存放方式，分级存储定义为三级：在线方式纸质档案的扫描工作是中国第二历史档案馆的生产系统，为考虑到大量的数据的安全存放，我们建议采用EMCVNX7500统一存储系统和EMCIsilonIQ108NL群集存储设备作为数字档案的集中存储，并且该系统还需要为数据库等核心业务系统提供高性能的存储环境，同时也能为加工、检索等业务提供NAS共享存储环境。在线方式主要为应用系统和业务系统提供存储空间，如数据库、应用服务器。以及结合后面的近线存储方式，归档系统会根据制定的策略将数据分成频繁访问和非频繁访问数据，频繁访问的数据会存放在在线的磁盘阵列中。因此，存储设备需要具备稳定、安全、高效及可扩展等诸多性能特点。结合我们的业务类型和数据文件类型，对存储设备进行了选型和定制。近线方式为什么要近线存储扫描加工后的海量数据需求的增加速度比想象中的更快。所带来的解决起来看似不难，只要购买更多的主存储设备即可，但因此会产生更多的生产效率和成本问题。新的存储系统可能很快地超载以指数级速度增长的存储设备使对之产生的需求预测越来越难。新购买的存储系统很快就不够用了备份窗口越来越长随着存储量不断的增加，备份时间窗口不能满足，管理员可能因此无法进行完全的数据备份，只能选择性地备份最重要的内容。灾难恢复要花费更长的时间备份的时间越长，灾难发生时恢复的时间也越长，这样就增加了宕机的时间，降低了生产效率。磁盘空间越大，查找数据花费的时间就越长如果用户或是管理员不能及时获取所需的相应数据，那么备份系统还有什么价值呢？当容量增加，相应的查找文件的时间也会增加，生产效率则降低。1、光盘离线方式通过光盘刻录系统直接将数据刻录到光盘上。优缺点对比：光盘离线方式优点：存储密度高；体积小、重量轻；不怕光、不怕磁、不需占用太多的物理空间；制作简单，可通过网络传输信息，实现资源共享；可随机存取，信息的载噪比高；存储和使用的寿命较长、单盘价格适中；适于存储数据、文字、图形、图象、声音等多种媒体信息；无机械磨损和刮伤，稳定性好；光盘中的数据不易被修改。缺点：访问时间较长；容量相对较小，备份大容量数据时，所需数量极大；备份速度慢、实时性差；备份编集麻烦，要凑空间；受光盘文件系统限制较多；定位数据繁琐；盘片较多管理不方便、容易造成盘片磨损、访问速度慢。2、磁盘离线方式通过大容量单体硬盘，将数据直接拷贝到硬盘上。优缺点对比：磁盘离线方式优点：容量大、传输速度高；使用方便、可靠；价格适中。磁盘离线方式缺点：数据过于集中；结构过于复杂，除了盘片外，还有大量的电气和机械机构；在使用中容易被更改或误删，有一定的风险；防震抗摔性差、功耗较高、有噪音等。3、磁带离线方式通过智能归档软件将数据通过磁带库上进行多份备份，其中一份可以出仓进行离线保存，并可运输到异地进行异地保存。优缺点对比：磁带离线方式优点是：体积小巧、携带方便，易于转移，可作为远程灾难恢复备份；容量大、成本低；耐用、寿命长，适应各种气候条件下存放；磁带的无文件系统格式，不受病毒、黑客和自然灾难的安全威胁。缺点：属线性记录介质，涉及过多机械物理操作；没有校验操作，可靠性较差，效率较低；需要加载或倒带，需在磁带卷中搜索数据文件，维护磁带库费人工。4、缩微胶片离线方式萎缩胶片存储就是利用缩微复制技术将档案原件缩小拍摄在感光胶片上，经加工制成缩微品保存、传播和使用。优缺点对比：优点：缩微技术工艺成熟，性能稳定；存储密度大，造价和管理费用较低；记录效果好，速度快；规格统一，适用范围广；携带方便，易于还原拷贝；具有法律凭证的作用；缩微模拟影像保真度高，记录真实，更改较难