基于科技创新人才信息平台数据挖掘的科研能力评价模型研究_百度

1、收稿日期：2009-09-07*基金项目：浙江省科技计划项目（2006R30001）作者简介：吴小妹（1981-），女，浙江文成人，硕士，讲师，主要研究方向人力资源；*通讯作者：陈敏玲（1961-），女，浙江桐乡人，高级工程师，主要从事计算机应用与科技管理。E -mail ：zrkbchen0引言在科技创新的委托代理关系中，科研能力评价问题一直是困扰科研委托方的难题，现行的依赖评估申请书与可行性报告的方法在诸多方面存在问题，建立人才信息库，并进行多维信息积累，在此基础上对科技人才及其团队的科研能力进行跟踪评价将有助于提高科研项目委托的有效性，取得良好的投资效果。浙江省在大力组织实施“百千万科技

2、创新人才工程”的背景下，着手组建浙江省科技创新人才信息库（以下简称信息库），本研究拟基于人才信息库数据挖掘，构建科研能力评价模型，可以使信息库中散而广的信息进行有效整合利用，集基于科技创新人才信息平台数据挖掘的科研能力评价模型研究*吴小妹1，陈敏玲2，3*，缪仁炳4（1. 浙江金融职业学院，杭州310018；2. 浙江省科技干部培训中心，杭州310007；3. 浙江天正信息科技有限公司，杭州310006；4. 浙江工商大学工商管理学院，杭州310018）摘要：通过对科研能力评价指标体系构成相关研究的分类回顾与梳理，提出了评价指标设计原则，逐步搭建了一套包含三个层面的科研能力评价指标框架。通过专

3、家访谈和问卷调查的方式，对初步建立的评价指标框架进行修正。运用层次分析法、专家咨询法得出各指标的权重。为了保证指标评分的准确性，对各指标项下的不同等级选项进行了归一化处理，最终完成科研能力评价模型的构建。关键词：科研能力；评价模型；层次分析法；信息库；数据挖掘中图分类号：G311文献标识码：A文章编号：1001-7119（2011）01-0154-07Scientific Research Ability Evaluation Model ：A Research Based onDimming the Data of Scientific Innovation TalentsWU Xiaome

4、i 1，CHEN Minling 2，3*，MIAO Renbing 4（1. Zhejiang Financial College ，Hangzhou 310018，China ；2. Zhejiang Training Center of Science and Technology ，Hangzhou310007，China ；3. Zhejing Topcheer Information Technology Co.Ltd ，Hangzhou 310006，China ；4. College of BusinessAdministration Zhejiang Gongshang Un

5、iversity ，Hangzhou 310018，China ）Abstract ：This paper previewed the related research of the evaluation indicators of research capability. Then it put for -ward the designing principles of evaluation indicators and gradually built a set that contains three levels of research ca -pability evaluation i

6、ndicator framework. It amended the initial establishment of the research capability evaluation indica -tor framework through expert interviews and a questionnaire survey approach. Though AHP ，expert advice method ，the paper gets the weight of each indicator. In order to ensure the accuracy of indica

7、tor scores ，the paper normalized the vari -ous indicators at different level options. And the paper built the research capability evaluation model finally. Key words ：research capability ；evaluation model ；AHP ；information database ；data miningVol.27No.1Jan. 2011第27卷第1期2011年1月科技通报BULLETIN OF SCIENCE

8、 AND TECHNOLOGY第1期能力表现A发表论文A1论文级别作者排名论文字数论文索引收录等级发表专著A2出版社等级作者排名专著字数获取专利A3专利类别作者排名获得奖项A4奖项类别作者排名研究报告A5归属级别采纳级别作者排名字数项目资助A6资助级别作者排名能力层次B 学位B1学位等级学历B2学历等级专业技术资格B3专业技术资格等级硕/博导师B4是否硕/博导师院士/特级专家B5是否院士/特级专家能力资源C 培养中硕士C1培养中硕士生数量培养中博士C2培养中博士生数量稳定团队成员C3稳定团队成员数量图1基于信息平台数据挖掘的科研能力评价指标体系初步框架Fig. 1The initial fra

9、mework for research capability evaluation indicator system based on dimming the date of scientificinnovation talents聚、提升为有规律性的可用的科研能力信息，使有关政策有的放矢，为科技人才管理提供有用的决策信息，更好地为科技人才管理决策服务。科研能力的影响因素不仅受个体因素的影响，还受到科研积累、团队与环境等诸多因素的影响。因此，对个体进行科研能力评价仍鲜有采用人才测评或胜任力模型方法，目前大多采用绩效推断法，即采用他们的工作成果来推断他们的能力，但是这一方法在全面性方面仍存在不足

10、，并没有考虑到团队、环境等因素的影响。本文拟挖掘科技人才信息库中各科研人员的工作成果积累、团队、资源等多类信息，采用AHP 层次分析法建立科研能力评价模型，并将相关参数输入信息库软件，形成评价模块，从而做到科研人员研究能力批量、实时跟踪评价的目的。1科研能力评价指标体系构建1.1抓住评价信息特征，确定选择指标原则本研究的主要评价对象是人才信息库中的科技人员。信息来源必须受制于人才信息库的特征与结构，因此，在设置评价指标项的时候要充分考虑信息库中的数据特点、数据结构与数据的可运算性。在此基础上，本研究在选取指标时，提出战略层面要坚持系统性与科学性的原则，即充分考虑科技人员科研能力的综合性影响因素

11、，选取多层面指标，坚持现有广为认同的层次分析法（AHP ）进行分析，从而保障评价过程与结果的系统性与科学性，从操作层面要坚持可测性与可操作性原则，即所选取的指标必须可以在人才信息库中取得可量化的数据，具有可测性，所选择的指标信息必须能够从科技人员的科技活动中获取、存储、分析的，具有可操作性。1.2初步拟订指标框架本研究通过对组织科技创新能力评价和个人科研能力评价的诸多文献与科研成果的梳理，归纳了科研能力评价指标体系主要来源的三个方面：一是着眼于创新投入提出评价指标，这一观点认为创新能力的来源在于创新投入，投入越多，创新能力越强，主要从资金投入、人员构成等方面提取评价指标1-6；二是着眼于创新产

12、出提出评价指标，这一观点认为原来的科研创新产出反映了科研与创新能力，产出越多，能力越强，主要从论文、专著、专利、承担项目、科技成果奖励以及人才培养等方面总结评价指标6-10；三是着眼于创新资源提出评价指标，这一观点认为科研创新能力的强弱与参与科研的人力资源和设备资源等相联系，资源越丰富，能力越强，主要从人员的水平层次、人员的多少、研究设备、设施等方面提出评价指标2-5。本文综合借鉴以上三种观点，结合人才信息库数据结构特点，将科研能力评价指标分为三个方面，从产出角度提出能力表现大类指标，从投入与资源结合的角度提出能力层次大类指标，从资源角度提出能力资源大类指标，并在总结各种文献与小范围内征询有关

13、专家意见的基础上提出如图1所示的科研能力评价指标体系的初步框架。1.3专家访谈修订指标通过专家访谈和问卷调查的方式对图1所示的指标框架进行了修正。指标框架中对二级吴小妹等. 基于科技创新人才信息平台数据挖掘的科研能力评价模型研究155科技通报第27卷指标的发表论文指标下设的论文级别、作者排名、论文字数和论文索引收录4个三级指标，大部分专家指出在论文级别中已经反映了论文索引收录情况信息，因此，删去了论文索引收录指标。最终确定了由3个一级指标、14个二级指标、24个三级指标组成的评价指标框架。从数据挖掘角度考虑，这个框架基本包括了科研能力的不同侧面。从图1可以看出，部分二级指标下无需再分三级指标，

14、但为了表述方便，本文把这些二级指标的评价要素也列在三级指标栏下。2评价模型建立与参数估计建立评价模型普遍采用以下几种方法：层次分析法（analytical hierarchy process ，简称AHP 法）、模糊综合判断法、密切值法、灰色关联度分析法以及数据包络分析方法等等。比较各种方法，结合本项目的实际情况，本文采用层次分析法来构建评价模型参数。2.1科研能力评价模型指标权重的确定本文运用层次分析法确定权重，采用问卷调查和访谈的方式，请专家们对评价指标框架中各指标进行重要程度判断。根据层次分析法的基本步骤，构建了判别矩阵，计算各个指标的权重。本文仅列出其中一位专家的一级指标权重的计算过程

15、。2.1.1一级指标权重确定（1）专家判断矩阵计算过程A B C A 133B 1/311C1/311A 01331/3111/3100000000001列归一化03/53/53/51/51/51/51/51/51/00000000005M 1.80000.60000.6000000000000将M 归一化，即：A 0.6000；B 0.2000；C 0.2000W 0.60000.20000.2000000000000所以max =3.0000，经一致性检验，C.I .=0，C.R .=00.1的两组权重，将其余10位专家同一指标的权重进行算术平均，得出专家群体集中意见的综合权重。2.1.2

16、二级指标权重确定用层次分析法得到每位专家的权重赋值及相应的一致性检验。将10位专家对同一指标的权重进行算术平均，得出专家群体集中意见的综合权重，如表3、4、5所示。2.1.3三级指标权重确定采用专家咨询法请专家对每个三级指标按其重要程度分别赋予15的分值，指标权重系数由专家咨询评分采用比例分配法计算，先将每个二级指标所包含的三级指标平均得分分别相加，然后再根据每个指标得分占总分的比值，计表1专家判断矩阵表Table 1Comparison matrix of the expert能力表现（A ）能力层次（B ）能力资源（C ）能力表现（A ）133能力层次（B ）1/311能力资源（C ）1/

17、311表2一级指标权重及CR 值Table 2The weight and the CR value of the first level indicators 专家序号A B C CR 10.60000.20000.20000.000020.63330.10620.26050.033430.67680.19250.13070.082440.07820.48660.43540.010950.71430.14290.14290.000060.64790.22990.12220.003270.68140.21600.10260.002380.72350.08330.19320.056790.723

18、50.08330.19320.0567100.77980.13740.08280.0304均数0.62590.18780.1863/156第1期算出该项指标的权重系数，如表6所示。2.1.4综合权重确定根据以上计算得出各级指标权重结果，最终确定综合权重，得出各层指标的权重（见表7）。考虑到学科差异，如获取专利指标项对于不同学科有明显差异，在进行科研能力评价时，将分学科对评价对象进行评价、排序。2.2评分标准的确定与归一化处理2.2.1评价标准确定在计算出各指标的综合权重之后，为了使要素评分有一个较为客观的标准，本文根据各指标的特点，参照浙江工商大学、浙江大学、浙江工业大学等高校的科研业绩量化标

19、准，结合专家咨询意见反馈，设计了各指标量化评分标准（见表8）。2.2.2指标数据的归一化处理由于评价指标体系中的每个指标都表达了一个不同的特征变量，各特征变量具有不同的量纲（计量单位）和量级（数值的数量级），即不具有等值性和可比性。为此，在划分等级以及赋分之后，还需对所赋分值进行归一化处理，以统一的口径解决多指标综合评价中各指标量级的差异性问题，并使指标值更加集中，从而使各指标能够进行相互比较和综合运算。本文对评价指标的归一化处理采用最大值转表3二级指标权重及CR 值Table 3The weight and the CR value of the second level indicator

20、s专家序号A1A2A3A4A5A6CR 10.06310.17860.32460.06310.06990.30070.006520.11900.28450.45420.04670.06620.02930.096330.11790.32850.32850.04100.11790.06630.003640.03670.17800.19370.39870.07610.11670.057150.02980.13090.48820.14460.05050.15600.072260.11330.25950.25950.07570.04840.24360.095170.08720.24190.40010.0

21、3680.14400.09000.079280.13350.25110.45320.04490.06320.05400.097390.16450.33690.33690.08390.03890.03890.0278100.15160.15160.49120.07420.05800.07340.0321均数0.10170.23410.37300.10100.07330.1169/表4二级指标权重及CR 值Table 4The weight and the CR value of the second level indicators专家序号B1B2B3B4B5CR 10.03770.08340.

22、16860.16860.54170.050120.05150.03090.22390.22390.46970.061530.07200.03420.24650.15790.48950.054140.04370.08860.08670.20220.57890.088950.05680.16620.03010.28150.46540.072560.07340.03790.16550.18060.54270.039570.03670.08860.26230.15670.45570.046280.10260.04260.08970.26160.50340.074590.07190.03800.1657

23、0.18090.54360.0346100.08500.03920.14680.27010.45890.0843均数0.06310.06500.15860.20840.5049/吴小妹等. 基于科技创新人才信息平台数据挖掘的科研能力评价模型研究157科技通报第27卷表5二级指标权重及CR 值Table 5The weight and the CR value of the secondlevel indicators专家序号C1C2C3CR 10.10620.26050.63330.033420.10960.58130.30920.003230.14290.57140.28570.000040

24、.07820.48660.43530.010950.07550.33380.59070.012260.10620.63330.26050.033470.26050.63330.10620.033480.10620.26050.63330.033490.26050.63330.10620.0334100.45450.45450.09090.0000均数0.17000.48490.3451/化法，记第j 项指标的最高级别赋分为X j ，max ，将第i 个评价对象第j 项指标的实际值X ij 与X j ，max 进行比较，就可得到归一化（无量纲）处理后的指标评价值F ij ，这样所有参评对象的指标

25、值均控制在0，1之间。数学公式是：F ij =X ij /X j ，max2.3综合评价评价模型是评价指标与评价目标之间逻辑关系的数学表达式，某指标数值越大，对科研能力综合评价的贡献率也越大，即评价目标与评价指标之间是一种线性关系。因此，我们可以采用线性加权求和法计算综合评价得分，其数学模型为：Y i =24j =1W j F ij （j 1，2，24）上式中，Y i 是第i 个参评对象科研能力综合评价得分值，W j 是第j 个末级指标的综合权重，F ij 是第i 个参评对象第j 个指标经归一化处理后的评价值。3结论、运用效果与不足本研究系统地进行了指标分析和指标框架的搭建，从数据挖掘并运用于

26、实时评价等实用角度提取指标，建立模型。在指标的提取分析、实证检验以及指标处理上，做了一些工作。本文所构建的科研能力评价指标体系充分考虑到了信息库中数据的特征，具有较强可操作性，通过计算机技术转换为信息平台的嵌入软件模块后，可以快速地对信息库中人员的科研能力进行实时评价，有效进行排序，为信息库中的成员进行“百千万”人才工程的有效分类提供了方法和依据。本文所得出的科研能力评价模型经浙江省科技创新人才信息平台的若干样本数据试评测，从评价结果看，运用评价模型所得出的排序与专家独立评价结果具有较好的吻合性，一定程度上验证了本文所构建的评价模型的有效性。本文的研究是一项尝试性工作，还有许多需要日后进一步完

27、善的研究工作。从指标选取来看，很多能力要素与专业领域相关性很大，因此能力评价有必要进一步结合专业领域的特殊性，对不同专业领域做出侧重权重的调整和指标的增减；从应用性来看，本文研究结果还有待科技创新人才信息平台投入运行以后，根据评价结果和新的情况加以完善，通过实际运用发现评价模型的不足，不断进行调整。参考文献：1杨宏进企业技术创新能力评价指标的实证分析J 统计研究，1998（1）：53-58表6三级指标权重Table 6The weight of the third level indicators指标序号指标名称均值权重1论文级别4.70000.43932作者排名3.60000.33643论文

28、字数2.40000.22434出版社等级4.30000.39095作者排名3.70000.33646专著字数3.00000.27277专利类别4.60000.55428作者排名3.70000.44589奖项级别4.60000.561010作者排名3.60000.439011归属级别4.20000.276312采纳级别4.70000.309213作者排名3.80000.250014报告字数2.50000.164515资助级别4.30000.537516作者排名3.70000.4625158第1期 吴小妹等 . 基于科技创新人才信息平台数据挖掘的科研能力评价模型研究 表7 综合权重 159 Tab

29、le 7 Comprehensive weight 一级指标 二级指标 三级指标 论文级别（0.4393 ） 发表论文（0.1017 ） 作者排名（0.3364 ） 论文字数（0.2243 出版社等级（0.3909 ） 发表专著（0.2341 ） 作者排名（0.3364 ） 专著字数（0.2727 ） 获取专利（0.3730 ） 能力表现（5 年内成 果）（0.6259 ） 获得奖项（0.1010 ） 专利类别（0.5542 ） 作者排名（0.4458 ） 奖项级别（0.5610 ） 作者排名（0.4390 归属级别（0.2763 ） 研究报告（0.0733 ） 采纳级别（0.3092 ） 作

30、者排名 (0.2500 ） 字数（0.1645 ） 项目资助（0.1169 ） 学位（0.0631 ） 学历（0.0650 ） 能力层次（0.1878 ） 专业技术资格（0.1586 ） 硕 / 博导师（0.2084 ） 院士 / 特级专家（0.5049 ） 培养中硕士（0.1700 ） 能力资源（0.1863 ） 培养中博士（0.4849 ） 稳定团队成员（0.3451 ） 资助级别（0.5375 ） 作者排名（0.4625 ） 学位等级 学历等级 资格等级 是否硕 / 博导师 是否院士 / 特级专家 在读硕士生数量 在读博士生数量 稳定级别和团队人数 综合权重 0.0280 0.0214

31、0.0143 0.0573 0.0493 0.0400 0.1294 0.1041 0.0354 0.0277 0.0127 0.0142 0.0115 0.0075 0.0393 0.0338 0.0119 0.0122 0.0298 0.0391 0.0948 0.0317 0.0903 0.0643 注：一级指标、二级指标、三级指标中列的权重为各指标相对于其上一层指标的权重，而最后一列的综合权重为各指标对应于目标层的权重。 2 3 4 5 6 曲国 禹 ， 刘学 铭 对 建立 企 业 技 术 创 新 能 力 评 价 指 标 体系的探讨J 辽宁工学院学报，1999 （1 ）：79-82 史

32、晓 燕 企业 技 术 创新 能 力 指标 体 系 设置 及 综 合 评 价 J 陕西经贸学院学报，1999 （4 ）：2730 范柏 乃 ，单 世 涛 ，陆 长 生 城 市 技 术 创 新 能 力 评 价 指 标 筛选方法研究J 科学学研究，2002 ，20 （6 ）：663668 孙 细 明 企 业 技 术 创 新 能 力 评 价 研 究 D 武 汉 ：华 中 科技大学 2003 李 广 华 山 东 高 校 科 技 创 新 能 力 评 价 研 究 D 天 津 ： 天津大学 2005 7 8 贺天伟，张景林 科研绩效定量评价指标体系的初步设 计J 科技管理研究，2001 ，（6 ）：5861

33、胡 修 周 等 科 研 能 力 和 效 绩 量 化 评 价 及 其 在 职 称 评 审 中的应用研究J 中华医学科研管 理杂 志 ，2001 ，（4 ）： 210214 9 10 王章豹，徐枞巍 高校科技创新能力综合评价：原则、指 标、模型与方法J 中国科技论坛，2005 ，（2 ）：5559 袁海霞等 科研绩效评价指标体系的初步 探 讨 J 海 军医学杂志，2007 ，（2 ）：157159 160 表 8 科 技 通 报 第 27 卷 各指标量化评分标准 Table 8 二级指标 三级指标 Quantitative assessment criteria of each indicator

34、 评分标准 参照浙江大学期刊定级标准，分权威级、一级、二级、三级（未 列 入 浙 大 期 刊 定 论文级别 级标准库中的其他所有公开出版发行的学术期刊列为三级）四个等级。 各等级赋分如下：权威级 12 分 / 篇，一级 6 分 / 篇，二级 3 分 / 篇，三级 1 分 / 篇。 完成人数 第 1 作者赋分 第 2 作者赋分 第 3 作者赋分 1 2 发表论文 作者排名 1 0.6 0.5 0.4 0.4 0.4 0.4 0.3 0.3 0.3 0.3 0.2 0.2 0.15 0.15 3 4 5 6 及以上 3 人以上合作完成，只考虑到第 3 作者，此处略去第 3 作者之后的赋分。 论文字数 1500 字以下 1 分 / 篇，15004500 字 （含 1500 ）2 分 / 篇 ，45009000 字 （含 4500 ） 参照浙江工商大学标准，分为 A 、B 、C 三个等级，A 级包括人民出版社、商务印 书 馆 、三 联 等 ，B 级 包 括 机 械 工 业 出 版 社 、清 华 大 学 出 版 社