DB51-T 3060-2023 四川省政务信息化后评价指南

ICS

03.100.99CCS

A

02

DB51 DB51/T

3060—2023四川省政务信息化后评价指南Guideline

post-evaluation

of

informatizationin

sichuan

province 发

布DB51/T

3060—2023

.................................................................

................................................................

......................................................................

............................................................

................................................................

..............................................................

..................................................................

................................................................

................................................................

................................................................

................................................................

..................................................................

..............................................................

6.2

............................................................

............................................................

............................................................

..................................................................

......................................................

....................................................

..............................................................

..............................................................

..............................................................

..................................................................

..............................................................

..............................................................

......................................................

..............................................................

..........................................................

..........................................................

..............................................................

..................................................................

................................................................

................................................................

................................................................

..........................................

...................................................

采用层次分析法计算评价指标权重步骤...................................

...................................

DB51/T

3060—20231范围本文件规定四川省政务信息化后评价的原则、内容、方法、程序和机构。本文件适用于策划、组织、实施各种类型四川省政务信息化项目的后评价工作。2 规范性引用文件文件。GB/T

23691—2009

GB/T

25069—2022

信息安全技术

GB/T

25647—2010

电子政务术语3术语和定义GB/T

23691—2009、GB/T

25069—2022、GB/T

25647—2010界定的以及下列术语和定义适用于本文件。3.1政务信息化后评价

of

affairs

估的活动4 符号和缩略语LFA，逻辑框架法（logical

approach）CE，综合评价（

）AHP，层次分析法（

Hierarchy

Process）CI，一致性指标（Consistency

）RI，随机一致性指标（Random

）CR，一致性比例（Consistency

Ratio）5 基本原则5.1 独立性应由具备相应能力、独立运行的机构开展评价工作。DB51/T

3060—20235.2 客观性及明确的数据基础上，实事求是地得出评价结论。5.3 针对性度等要素，确保分析方法和评价结论的科学性、适宜性。5.4结构性IT视角，做好科学解读和综合研判。6 评价方法6.1 基本方法择一种或多种方法对项目进行评价。6.2 综合评价法方法采用的计算方法需要考虑的问题比较复杂，但因其综合性和系统性的显著特点在实践中广泛应用。计算机的普及降低了综合评价的计算方法复杂度，增强了评价可操作性。6.3逻辑框架法和投入的层次归纳了投资项目的目标及其因果关系。6.4层次分析法作为目标（多指标）、多方案优化决策的系统方法。在本标准附录B中，提供了一个采用层次分析法计算评价指标权重的示例。7 评价指标DB51/T

3060—20237.1 评价指标体系框架四川省政务信息化后评价指标体系框架如图

1

所示。系统的指标体系详见附录A。

图1四川省政务信息化后评价指标体系框架7.2投资决策与建设管理7.2.1项目投资决策项目投资决策主要根据项目实施完成的实际情况，对项目立项决策事项进行评价。7.2.2项目建设管理项目建设管理主要评价项目建设实施管理的水平。7.2.3资源利用水平行比较评价。7.2.4业务应用集约化发展水平业务应用集约化发展水平主要评价项目系统与内外部其他信息系统的协同开发的程度。7.3运维水平7.3.1项目运行情况项目运行情况主要评价项目实际运行的情况。7.3.2 运维组织保障运维组织保障主要评价项目运维的资金、组织和队伍的保障水平。DB51/T

3060—20237.3.3网络和数据安全保障网络和数据安全保障主要评价项目运行维护过程中网络系统和数据安全的保障水平。7.4 应用效果7.4.1应用程度应用程度主要评价项目对业务的支撑力度、系统功能应用频次及受益者满意程度。7.4.2 管理和政务服务效能管理和政务服务效能主要评价项目对政务目标的实现程度、业务办理效率提升及改善程度。7.4.3 信息资源共享及数据归集效果信息资源共享及数据归集效果主要评价信息数据质量以及信息数据开放共享水平。7.5项目效益7.5.1社会效益社会效益主要对项目系统使用以后产生的社会效益进行评价。7.5.2 经济效益经济效益主要对项目系统使用以后产生的经济效益进行评价。7.5.3 应用前景应用前景主要评价项目创新能力以及应用的可持续性、可推广性。8 评价程序8.1 基本程序五个阶段。四川省政务信息化后评价程序如图

2

所示。

DB51/T

3060—2023

8.2前期准备

图2

四川省政务信息化后评价程序前期准备主要工作包括：确定评价对象、成立评价小组、制定评价工作方案、收集项目基础资料、形成评价指标体系、制定评价相关文本等。8.3 项目应用机构自评项目应用机构根据自评报告范本，编写并提交自评报告，并按要求提交相关文件资料。8.4 实施评价实施评价阶段的主要工作包括：收集文件资料、审核文件资料、现场测评、综合分析等。8.5评价报告撰写评价报告撰写阶段主要工作包括：撰写初步报告、修改初步报告、提交正式报告、建立档案等。8.6评价结果应用评价结果应用阶段主要开展评价结果反馈、问题整改以及评价结果的采信应用等。9 评价组织管理9.1总则后评价机构应具有明确的法律地位，应有文件描述其职能和从事技术相关应用咨询的能力范围。DB51/T

3060—20239.2 独立性方，也不应是上述任何一方的授权代表。9.3 公正性序确保评价的结果不受评价机构以外的人员或组织的影响。9.4 保密性后评价机构应确保对后评价活动过程中获得的信息保密。一级指标编号一级指标一级指标说明二级指标编号二级指标二级指标说明三级指标编号三级指标三级指标说明1投资决策与建设管理评价项目投资决策以及项目建设管理的水平和能力项目投资决策根据项目实施完成的实际情况，对项目立项决策事项进行评价政策衔接评价项目的立项实施是否符合党中央、国务院和省委、省政府要求，是否符合相关政府规划及法律法规的要求技术方案评价项目技术方案的先进性，与项目单位内部其他信息系统技术路线的兼容适配性，以及与批复文件技术方案的差异自主可控水平评估项目应用自主可控软硬件的情况，以及项目批复文件及实际建设情况的差异项目建设管理评价项目建设实施管理的水平招标采购评价项目招标采购方案中技术参数设置的合理性验收整改评价项目验收整改情况及效果档案管理评价项目实施、运行、维护过程中档案管理的规范情况资源利用水平在项目系统运行时，通信、计算等资源实际使用率与建成的能力进行比较评价请求响应能力利用率评价项目确定的系统请求响应能力和利用率的目标实现程度计算处理能力利用率评价项目确定的业务计算处理能力和利用率的目标实现程度数据存储能力利用率评价项目确定的信息系统数据存储能力和利用率的目标实现程度业务应用集约化发展水平外部协同程度评价项目系统与项目单位外部的其他信息系统之间协同开发的程度内部整合程度评价项目系统与项目单位内部的其他信息系统之间协同开发的程度DB51/T

3060—2023附 录 A（资料性）评价指标体系评价指标体系的详细情况如表

所示。表

表

A.1

评价指标体系一级指标编号一级指标一级指标说明二级指标编号二级指标二级指标说明三级指标编号三级指标三级指标说明2运维水平评价项目系统的运维能力和保障水平项目运行情况评价项目实际运行的情况系统可用性评估项目系统完成要求的功能的能力系统可靠性评估项目系统在运行过程中的连续正常运行情况系统可升级性评价项目系统升级与更新频次运维组织保障评价项目运维的资金、组织和队伍的保障水平运维制度保障评价项目申请维保资金的规范性、合理性等运维队伍保障评价运维服务在岗人员、技术能力，及使用方对第三方服务商的监督制度建立及落实情况网络和数据安全保障评价项目运行维护过程中网络系统和数据的安全保障水平等级分级保护水平评价项目系统达到的信息安全和信息系统等级或分级保护等级网络系统安全保障评价项目系统运行防护能力和安全管理规范实施的有效性数据安全保障评价项目数据开放应用安全技术防护和管理体系的有效性商用密码应用性评估评价项目商用密码应用的合规性和有效性3应用效果评价项目满足业务需求的能力和信息资源共享的水平应用程度评价项目对业务的支撑力度、系统功能应用频次及受益者满意度功能应用率评价项目实际应用的系统功能模块的覆盖率以及使用频次用户覆盖率评价项目实际应用机构/用户数量的情况受益者满意度项目系统受益者的满意程度管理和政务服务效能评价项目对提升政务效能的贡献度评价项目对改善公共服务普惠成效的贡献机制秩序改善程度评价项目实现秩序类公共事务管理转型，改善竞争、博弈及合作活动秩序，维护协同机制健康的贡献业务流程和质量评价系统使用后的业务办理流程和业务办理质量提升情况DB51/T

3060—2023表

表

A.1

评价指标体系（续）一级指标编号一级指标一级指标说明二级指标编号二级指标二级指标说明三级指标编号三级指标三级指标说明信息资源共享及数据归集效果评价信息数据质量以及信息数据开放共享水平数据标准化评价信息系统中的数据是否符合相关标准和数据规范，或者项目制定了新的标准规范，以及标准规范的使用程度数据一致性评价项目系统内部以及与内外部其他信息系统之间对同一业务对象的描述在编码、格式、含义等方面的一致性数据时效性评价项目系统在数据采集、加是否在规定时间内更新信息数据共享接口部署率评价项目确定的部门间数据共享接口的部署情况提供共享数据信息量评价项目提供给其他部门的数据信息量及共享数据方式提供数据服务频次评价项目为其他部门提供数据服务的情况数据共享机制及应用平台评价项目与内外部其他信息系统之间数据共享机制建设，以及实际利用数据处理支撑平台的情况信息资源利用率评价项目实际利用内外部其他信息系统数据的次数和频度4项目效益评价项目建设的经济社会效益以及应用前景社会效益评价项目系统使用以后产生的社会效益促进政府职能转变评价项目促进政府职能转变方面的效益提高办事效率评价项目提高办事效率方面的效益经济效益评价项目系统使用以后产生的经济效益提高工作效率评价项目提高工作效率方面的效益节约行政成本评价项目节约行政成本方面的效益应用前景评价项目创新能力以及应用的可持续性、可推广性项目创新能力评价建设应用后形成的创新点项目试点示范推广评价项目的试点示范推广应用情况表彰获奖情况评价项目取得的表彰获奖情况表

A.1表

A.1

评价指标体系（续）DB51/T

3060—2023元素

i

比元素

j量化值同等重要1稍微重要3较强重要5强烈重要7极端重要9两相邻判断的中间值2，4，6，8DB51/T

3060—2023附 录 B（资料性）采用层次分析法计算评价指标权重示例B.1

层次分析法基本原理次序的排定。评价指标的权重。B.2

采用层次分析法计算评价指标权重步骤（1）建立层次结构模型间层是指考虑的元素、决策的准则。对于相邻的两层，称高层为目标层，低层为元素层。（2）构造判断矩阵互比较