基于层次分析法的科技成果评价体系研究

基于层次分析法的科技成果评价体系研究

科技成果评价是科技管理的重要组成部分，其公正性和客观性直接影响科技事业的健康发展。本文采用层次分析法（AHP）构建科技成果评价模型，通过实例验证了评价体系的有效性，并提出了建立健全评价体系、完善专家库和坚持以市场为导向等建议。

摘 要：【目的】科技成果评价是科技成果管理体系的重要组成部分，科技成果评价体系是否公正、客观，直接影响科技事业的健康发展。【方法】本研究通过层次分析法建立科技成果评价模型，确定了3个一级指标和9个二级指标，构建了两两对称矩阵求出各级指标的权重，并通过了一致性检验。【结果】构建了科技成果评价体系，并通过实例验证了评价体系的有效性。【结论】通过对科技成果评价体系以及各级指标权重的分析，从建立健全评价体系、完善专家库和坚持以市场为导向等3个方面提出建议。

关键词：科技成果；评价体系；层次分析法；一致性检验

0 引言

科技成果评价是科技成果管理体系的重要组成部分，科技成果的评价方法是否切合科研工作实际、评价内容是否公正客观，不仅影响科研管理质量的示范效应及科技奖励的公正性、权威性和正面激励效应，而且还会反过来影响科技事业的健康发展，对树立正确、科学的学术风气和社会风气具有极为重要的现实意义。因此，构建一个科学合理的科技成果评价体系显得尤为重要。

结合层次分析法，通过定性分析和定量分析，对实际问题进行决策，其特点是可以利用定性的信息及少量的定量信息使决策变成一个数学问题，利用数学模型给出决策的结果。刘康［1］采用模糊层次分析评价法，构建了油田相关的科研项目的绩效评价指标，并有效评价了相关项目的绩效情况。李晓夏［2］基于层次分析法构建了乡村振兴评价指标体系，并确定了各个指标的重要程度和所对应的权重。赵鑫等［3］将层次分析法和模糊综合评价法进行结合，构建了城市生态环境评价体系，并借助于模型进行了城市生态环境质量评价。裴少婧等［4］借助层次分析法构建高校教学质量评价模型，并通过模糊综合评价法对评价进行完善。

近年来，随着科技成果评价逐渐受到重视，越来越多的国内学者开展有关科技成果评价的研究，也取得了一定的成果。张硕等［5］通过大量的数据分析，总结了我国目前科技评价体系中存在的问题，并提出相应的建议。温兴琦等［6］研究指出，完善科技成果评价机制具有重要作用，可以激发科技工作者的研究积极性和创造力，有效推动科技成果高质量发展，更好地活跃科技创新的生态和氛围。蔡彦虹等［7］在分析了现阶段农业科技成果评价体系存在问题的基础上，构建了成果分类评价指标体系。唐帅等［8］介绍了科技成果指标评价体系发展现状及组成结构，分析了指标权重及数据处理方法，并提出了基于融合聚类算法的科技指标评价模型。

通过对现有研究成果进行分析，发现其存在着一定的局限性：一是大多数学者仅对全国科技成果评价体系进行研究；二是对于省市的科技成果评价仅限于理论分析层面，未建立模型，也未通过实例进行验证，导致理论与实践脱节。为此，本研究分析了科技成果评价的现状，基于层次分析法构建科技成果评价模型，并通过郑州市项目评价实例进行验证，保证了科技成果评价体系的可行性。

1 科技成果评价体系构建思路

本研究通过查阅文献资料及《科学技术评价办法》，筛选出科技成果评价的关键指标，包括科学价值、技术可行性和效益等，通过层次分析法构造判断矩阵，根据各个指标的重要程度排序，并进行一致性检验，得到各个指标的权重。

2 基于层次分析法的科技成果评价模型

2.1 指标选取及符号说明

本研究将科技成果评价体系分为科学价值、技术可行性和效益等3个层面，其中科学价值层面包括先进程度、创新程度和推动作用等3个指标，技术可行性包括难度和复杂程度、成熟程度和应用程度等3个指标，效益包括经济效益、社会效益和生态效益等3个指标，构成了3个一级指标和9个二级指标的3层结构层次（见表1）。设科技成果评价体系为目标层[O]，3个一级指标为准则层C，3个准则层对应的9个二级指标为子准则层[D]，科技成果评价体系层次结构如图1所示。

2.2 指标内容说明及等级划分

2.2.1 科学价值。科学性是科技成果质量的基本要素，包括成果的先进程度、成果的创新程度及成果对本行业的推动作用。先进程度分为达到同类领先水平、达到同类先进水平及接近同类水平；创新程度分为有重大突破或创新、有明显突破和创新、创新程度一般；推动作用分为显著促进行业科技进步、明显促进行业科技进步及对行业促进作用一般。

2.2.2 技术可行性。技术可行性是科技成果质量的重要因素，包括技术的难度和复杂程度、技术的成熟程度及技术的应用程度。难度和复杂程度分为自主创新、引进创新及技术改进；成熟程度分为成果转化程度高、成果转化程度较高及试用阶段；应用程度分为实用性很强、实用性较强及实用性一般。

2.2.3 效益。科技成果产生的效益是衡量科技成果质量的重要标准，科技成果转化产生的效益可分为经济效益、社会效益及生态效益。经济效益是科技成果转化促进经济发展的情况，分为经济效益显著、经济效益明显及经济效益一般。社会效益主要包括科技成果对产业结构的优化，以及就业机会的增加和居民收入的提高等，分为社会效益显著、社会效益明显和社会效益一般。生态效益指科技成果转化对环境的保护、对资源的开发利用和节约、对生态文明建设的促进等，分为显著改善居民的生活条件、明显改善居民的生活条件和对居民的生活条件改善效果不明显。

2.3 确定各级指标权重并进行一致性检验

首先，确定准则层[C]对目标层[O]的权重向量并进行一致性检验。准则层[C]有科学价值、技术可行性和效益等3个指标，分别记为[C1]、[C2]、[C3]，通过两两之间的比较，基于[1∼9]的比例标度构造两两比较矩阵[A]见式（1）。

[A=11/31/231221/21] （1）

解得[λmax=3.009 2]，w（2）=[（0.163 4，0.539 6， 0.297 0）T]。由于[CI（2）=λmax-33-1=0.004 6]，[RI（2）=0.52]，则[CR（2）=CI（2）RI（2）=0.008 8lt;0.1]，则w（2）通过一致性检验，故w（2）[=（0.163 4，0.539 6，0.297 0）T]可以作为准则层[C]对目标层[O]的权重向量。

其次，确定子准则层[D]对准则层[C]各因素的相对权重向量。构造[D11]、[D12]、[D13]对[C1]的两两比较矩阵[A1]见式（2）。

[A1=11/21/221221/21] （2）

解得[λmax=3.053 6]，[w（3）1=（0.195 8，0.493 4，0.310 8）T]，由于[CI（3）1=λmax-33-1=0.026 8]，[RI（3）1=0.52]，则[CR（3）1=CI（3）1RI（3）1=0.051 6lt;0.1]，故[w（3）1]通过一致性检验。

然后构造[D21]、[D22]、[D23]对[C2]的两两比较矩阵[A2]见式（3）。

[A2=1421/411/21/221] （3）

解得[λmax=3]，[w（3）2=（0.571 4，0.142 9，0.285 7）T]。由于[CI（3）2=λmax-33-1=0.000 0]，[RI（3）2=0.52]，则[CR（3）2=CI（3）2RI（3）2=0.000 0lt;0.1]，故[w（3）2]通过一致性检验。

最后构造[D31]、[D32]、[D33]对[C3]的两两比较矩阵[A3]见式（4）。

[A3=121/21/211/2221] （4）

解得[λmax=3.053 6]，[w（3）3=（0.310 8，0.195 8，0.493 4）T]，由于[CI（3）3=λmax-33-1=0.026 8]，[RI（3）3=0.52]，则[CR（3）3=CI（3）3RI（3）3=0.051 6lt;0.1]，故[w（3）3]通过一致性检验。

综上所述，子准则层[D]中9个因素对准则层[C]中各因素的相对权重向量分别为：

[w（3）1]=（0.195 8，0.493 4，0.310 8，0.000 0，0.000 0，0.000 0，0.000 0，0.000 0，0.000 0）T

[w（3）2]=（0.000 0，0.000 0，0.000 0，0.571 4，0.142 9，0.285 7，0.000 0，0.000 0，0.000 0）T

[w（3）3]=（0.000 0，0.000 0，0.000 0，0.000 0，0.000 0，0.000 0，0.310 8，0.195 8，0.493 4）T

2.4 确定组合权重并进行一致性检验

由于准则层[C]对目标层[O]的权重向量为[w（2）=（0.163 4，0.539 6，0.297 0）T]，子准则层[D]中9个因素对准则层[C]中各因素的相对权重向量分别[w（3）1]、[w（3）2]、[w（3）3]，以它们为列向量构成的矩阵为[W（3）]，见式（5）。

[W（3）=]（[w（3）1]，[w（3）2]，[w（3）3]） （5）

则子准则层[D]中9个因素对目标层[O]的组合权重向量为：

接下来对组合权重进行一致性检验。由于[CI（3）=（CI（3）1，CI（3）2，CI（3）3）w（2）=0.012 3，][RI（3）=（RI（3）1， ][RI（3）2，][RI（3）3）w（2）=0.52，][" 则CR（3）=CR（2）+CI（3）RI（3）=0.032 5lt;0.1]，故[w（3）]通过一致性检验，即[w（3）]可以作为子准则层[D]中9个因素对目标层[O]的组合权重向量，也即得到9个二级指标对于科技成果评价的权重，具体如表2所示。

3 结果分析

通过层次分析法，得到各级指标对科技成果评价的权重，并通过了一致性检验，各级指标对科技成果评价的权重如表3所示。

通过各级权重的分析，可以看出科技成果评价中，技术可行性所占权重较高，也说明科技转化程度是科技成果评价的重要因素。在技术可行性的二级指标中，难度和复杂程度的权重较高，这说明科技成果评价越来越注重自主创新。生态效益所占权重排名第二，与国家政策的导向相符合，随着科学技术的不断发展，人们更注重科学技术对生态环境的影响，越来越注重可持续化发展。

4 实证分析

为验证科技成果评价模型的有效性和科学性，选取郑州市推荐科学技术奖的部分项目，依据李克特五分量表法（见表4）对科技成果评价体系中二级指标的各个等级进行赋值。

4.1 对二级指标各等级进行赋值

由于二级指标的等级只有三个，选取李克特五分量表中的非常重要、比较重要和比较不重要的分值对应二级指标中各等级的赋值，具体见表5。

4.2 实例验证

根据各个等级的赋值，对选取的项目的每一个指标依次打分，根据各个指标对科技成果评价体系的权重，得到每个项目的总得分，再与原获奖等级进行对比，具体结果见表6。

根据科技成果评价模型，得到6个项目按综合得分排序依次为：A1、A2、A3、A4、A6、A5，与原评审意见基本一致，说明科技成果评价模型是有效的，也是合理的，在一定程度上为科技成果评价体系的构建提供一种有效的、科学的理论参考。

5 加快构建科技成果评价体系的措施

5.1 建立健全评价体系

目前我国的科技成果评价主要依托于第三方评价机构，但不同机构给出的评价体系存在一定差异。并且，基础研究成果、应用技术成果和软科学研究成果等不同类型的科技成果适用不同的评价指标。因此，需要根据科技成果的类型建立合适的科技成果评价体系，使科技成果评价工作更科学、更有效、更合理。

5.2 完善专家库

在评价时，专家根据自身经验对科技成果的各项指标打分，且随着科技的进步与社会的快速发展，学科分类更加细化，属于交叉学科的成果越来越多。为了保证评价结果的客观性和专业性，需要丰富和完善专家库，储备大量复合型的专家学者。

5.3 坚持以市场为导向

科技成果评价受到科技成果转化的影响，因此，科技成果转化对科研成果评价具有重要的指导作用，这也反映了市场在科技成果评价中的重要地位，即市场能够客观地反映出科技成果的质量，进而提高科技成果评价的合理性。我国应进一步建立以市场为导向的评价体系，促进科技成果转化，实现经济效益、社会效益和生态效益。

6 结语

本研究首先运用层次分析法筛选出目标层、准则层和子准则层的各个指标，通过构造比较矩阵，确定评价指标的权重，建立评价模型，并构建了科学的科技成果评价体系。其次，选取郑州市优秀科学技术成果奖的部分项目，通过构建的评价体系进行评价，得到综合得分，并对项目进行排序，验证评价体系的合理性和可行性。最后，根据研究结果提出建议。但由于数据有限，本研究未针对不同类型的科技成果构建不同的评价指标体系，可以在以后的研究中进一步细化。

参考文献：

［1］刘康.基于模糊层次分析法的ZY科研项目绩效评价的指标构建［D］.西安：西安石油大学，2014.

［2］李晓夏.基于层次分析法的乡村振兴评价指标体系构建［J］.南方农机，2022，53（18）：97-99，103.

［3］赵鑫，孙春花，沈贤.基于层次分析法的城市生态环境质量评价［J］.中国资源综合利用，2022，40（5）：163-166.

［4］裴少婧，苏雅.层次分析法在高校教学评价体系中的应用研究［J］.轻工科技，2021，37（4）：167-169.

［5］张硕，陶蕊，施筱勇.中国科技评价研究热点述评［J］.科技管理研究，2021，41（18）：58-65.

［6］温兴琦，焦丽.完善科技成果评价机制的思考［J］.中国科技产业，2021（9）：51-52.

［7］蔡彦虹，夏文勇，张雯丽，等.推动农业科技成果评价体系改革的探讨［J］.农业科技管理，2022，41（1）：41-44，75.

［8］唐帅，刘雪飞，安佳坤，等.基于融合聚类算法的成果指标评价体系设计［J］.计算机与网络，2019，45（21）：67-71.