预防接种绩效评价指标体系
第二篇：创新绩效评价指标体系的构建与检验
一３２一中国科技论坛（２０１０年４月）第４期
试论我国水利科技创新绩效评价指标
体系的构建与检验
陈东明
（河海大学商学院知识产权研究所，江苏南京２１００９８）
摘要：客观、科学、有效、定量地评价水利科技创新的绩效，对于水利领域各主体在同行业竞争中科学地认识自身的科技创新实力，采取适当的科技创新战略，提高自身的竞争优势，获取最佳的经济效益和社会效益具有特另ｑ重要的现实意义。本文根据系统优化、科学性、可比性和可操作性的原则建立水利科技创新绩效评价指标体系，以有利于我国水利科技创新活动的全面开展。
关键词：水利；科技创新；绩效评价指标体系
中图分类号：Ｆ２０４；Ｆ２０５文献标识码：Ａ
ＴｈｅＰｅｒｆｏｒｍａｎｃｅＡｐｐｒａｉｓａｌａｂｏｕｔｔｈｅＳｃｉｅｎｔｉｆｉｃａｎｄ
ＴｅｃｈｎｉｃａｌＩｎｎｏｖａｔｉｏｎｏｆＷａｔｅｒＣｏｎｓｅｒｖａｎｃｙ
ＣｈｅｎＤｏｎｇｍｉｎｇ
（ＩｎｓｔｉｔｕｔｅｏｆＩｎｔｅＵｅｃｔｕｌＰｒｏｐｅｒｔｙ。ＢｕｓｉｎｅｓｓＳｃｈｏｏｌｏｆＨｏｈａｉＵｎｉｖｅｒｓｉｔｙ，Ｎａｎｊｉｎｇ２１００９８，Ｃｈｉｎａ）
Ａｂｓｔｒａｃｔ：Ｅｖａｌｕａｔｉｎｇｔｈｅｐｅｒｆｏｒｍａｎｃｅｏｆ
ｃａｎｗａｔｅｒｃｏｎｓｅｒｖａｔｉｏｎｓｃｉｅｎｃｅａｎｄｔｅｃｈｎｏｌｏｇｙｉｎｎｏｖａｔｉｏｎｐｌａｎｈａｓｉｍｐｏｒｔａｎｔｃｏｎｓｅｒｖａｔｉｏｎｓｙｓｔｅｍｔｏｒｅａｌｉｔｙｓｅｎｓｅｗｈｉｃｈｈｅｌｐｅａｃｈｉｎｎｏｖａｔｉｖｅｍａｉｎｂｏｄｙｏｆｔｈｅｗａｔｅｒ
ｏｗｎｒｅａｌｉｚｅｏｗｎｓｃｉｅｎｃｅａｎｄｔｅｃｈｎｏｌｏｇｙｉｎｎｏｖａｔｉｏｎｓｔｒｅｎｇｔｈ，ｔｏａｄｏｐｔｐｒｏｐｅｒ
ａｉｎｎｏｖａｔｉｏｎｓｔｒａｔｅｇｙ，ｔｏｉｍｐｒｏｖｅｃｏｍｐｅｔｉｔｉｏｎａｄｖａｎｔａｇｅ，ｔｏｃａｔｃｈｏｐｔｉｍａｌｅｃｏｎｏｍｙａｎｄｓｏｃｉｅｔｙｂｅｎｅｆｉｔｓ．Ｔｈｉｓｐａｐｅｒｅｓｔａｂｌｉｓｈｅｓｐｅｒｆｏｒｍａｎｃｅｅｖａｌｕａｔｉｏｎｉｎｄｅｘｓｙｓｔｅｍｏｆｔｈｅｓｃｉｅｎｔｉｆｉｃａｎｄｔｅｃｈｎｉｃａｌｉｎｎｏｖａｔｉｏｎｏｆｗａｔｅｒｃｏｎｓｅｒｖａｎｃｙ，ａｎｄｐｕｔｓｆｏｒｗａｒｄ
ｓｏｍｅｓｕｇｇｅｓｔｉｏｎｓｆｏｒｉｍｐｒｏｖｅｍｅｎｔ．
Ｋｅｙｗｏｒｄｓ：ｗａｔｅｒｃｏｎｓｅｒｖａｎｃｙ；ｓｃｉｅｎｔｉｆｉｃａｎｄｔｅｃｈｎｉｃａｌｉｎｎｏｖａｔｉｏｎ；ｐｅｒｆｏｒｍａｎｃｅｅｖａｌｕａｔｉｏｎｉｎｄｅｘ
１我国水利科技创新的现状及要求
随着水利科技创新的进行，建立和完善其绩效
评价体系成为水利科技创新管理工作中日益迫切的
一项基础性建没。该体系应符合我国国情，符合国家
科技发展规划和战略的要求，符合国际惯例和要求。
２００１年我国水利科研机构按照“分类指导，稳
住重点，推动转制，促进发展”的思路，在结构调整、机制转换、人员分流、制度创新等方面进行了积极的探索和实践，改革前部属１９个科研机构，改革后保留中国水利水电科学研究院、南京水利科学研究院、长江科学院、黄河水利科学研究院４个科研机构为非营利性科研机构（以下简称“四院”）；南京水利水文自动化研究所、农村电气化研究所等４个科研机构整体转制为科技型企业；２个科研机构转为中介基金项目：水利部科技成果重点推广计划项目。基于服务质量管理理论的水利科技成果推广体系研究”。
收稿ｆ】期：２００９—０６一１８作者简介：陈东明（１９７０－），男．山东昌邑人，博士研究生；研究方向：水利科技管理。
万方数据
第４期（２０１０年４月）中国科技论坛一３３一单位；其余科研机构进行撤并、整合。目前，以中国水释和定义规范化、标准化，要力求符合国内科技管理利水电科学研究院和南京水利科学研究院为代表的的一般特点并和其概念相适应。
水利科研院所，承担了大量国家水利重大科研项目，（３）可比性原则。就是对不同历史时期的统计数为我国水利现代化建设做出了重要贡献，同时促进据，注意到水利系统内部各子系统之间协调的需要，了新技术、新材料、新工艺在水利工程建设中的应以及各子系统的组织结构、规模、科技人员水平和工用。作条件等方面的种种差异，从差异中找出能衡量各
水利科技创新是一个复杂的系统工程，是在相子系统科技活动绩效大小的指标。
应的社会生产力和社会制度下进行的，是和社会的（４）可操作性原则。力求避免只考虑指标体系在政治经济、环境生态密切联系的。同时，它又是水利理论研究上的可行性，而忽视主、客观条件的限制。经济系统发展的动力和引擎，必须通过探索新理论、２．２水利科技创新绩效评价指标体系的建立新方法、新模型和开发新技术、新工艺、新材料来进以上述四项原则为指导，从目前来看我国水利行包括思路创新、体制创新、技术创新…等诸多方面单位的科技创新绩效评价指标主要可分为３个层的全方位创新，以渗透到水利经济系统各个要素、要次，见表ｌ。
素之间及社会经济大环境之中。组织管理∞。）是由经费卢¨、人员结构卢ｔ：、保障
水利科技创新绩效评价不仅是引入新的计划评条件卢。，和组织协调卢，。决定的。经费卢¨可通过创新价指标，而且创新的实施会给水利科技创新活动带项目经费筹集额占预算额的比重托、从事创新项目来积极的影响。开展水利科技创新绩效评价，可以把经费支出比重ｙ扒创新项目经费占总经费支出比率握水利科技创新发展的动向，对于进一步加强水利７，，来衡量；人员结构卢，：可通过人员平均文化程度科技创新在各个方面的全面、协调、稳定发展，有着弛，、研究队伍的稳定性仫、人员平均专业化水平怕极为重要的意义【２】。下面笔者拟结合我国的水利科来衡量；而保障条件卢。，、组织协调卢。。这２项为定性技创新自身的规律和特点，探讨
如何更加科学地开展水利科技表ｌ水利科技创新绩效评价指标体系表Ⅲ
创新绩效评价。
２我国水利科技创新一级一鳓三级指标指标类型
创新项目经费筹集额占预算额的比重ｈ－效益型
绩效评价指标体系经费卢－。从事创新项Ｅｌ经费支出比重ｎｚ效益型２．１评价指标的选择原则组创新项目经费占总经费支出比率Ｈａ效益型
织人员平均文化程度托－区域型
在现代社会，科技、社会、经管人员结构ｐｎ研究队伍的稳定性％成本型济之间相互影响、相互作用、相理人员平均专业化水平场效益型互渗透、相互依存的特征越来越卢－保障条件口－ａ定性
组织协调ｐ“定性
明显，所以，设计科技创新绩效科技活动经济收益ｒａ，效益型评价指标体系时，不但要考虑反完成经济效果如人均技术性收入能力，，勰效益型映科技系统自身特点的指标、而组织增收能力，，站效益型且要考虑反映社会、经济及社会完资产增值效益ｈ效益型
成人均科技成果数ｈ。效益型
经济与科技交叉、重叠或复合构目人均科技论文发表篇数ｙ啦效益型成的指标。本文建立指标体系时标完成技术效果，盘人均科技著作发表字数ｙ。效益型遵循了以下４个原则。卢２成果获奖当量数ｈ区域型
成果推广应用指数‰效益型
（１）系统优化原则。设立指完成社会效果ｐ∞定性标的数量多少及其指标体系的完成环境效果ｐ孔定性结构形式以全面系统地反映评目长远性口。，定性
标必然性口弛定性
价目标为原则。扁可行性风定性
（２）科学性原则。遵从科学影响宏观影响力口．－定性性原则，就是要求评价指标的解力风微观影响力凡定性万方数据
——３４——
中国科技论坛（２０１０年４月）第４期
指标。
完成目标Ｃ８２）是由完成经济效果伤。、完成技术
效果如、完成社会效果肠、完成环境效果如决定
的。完成经济效果尾。可通过科技活动经济收益ｙ，。、
人均技术性收入能力讹、组织增收能力ｙ蓟、资产增值效益似确定；完成技术效果可通过卢叠人均科技成果数弘。、人均科技论文发表篇数讹、人均科技著作发表字数弘、成果获奖当量数弘、成果推广应用
指数‰确定；而完成社会效果肠、完成环境效果触
这２项为定性指标。
目标（岛）由长远性岛，、必然性＆、可行性风决
定，这３项均为定性指标。
影响力（角）分为宏观影响力成。、微观影响力
＆，这２项均为定性指标。
通过以上指标的对比，可以得出水利科技创新实施绩效评价指标的评价结论，该结论可反映各指标在整个系统的重要程度，有利于决策者今后在水利科技创新的管理与决策中进行战略重点的确定、措施的改进、计划的修正和资源的分配。这套指标主要是以上述４个大型水利创新单位为例的，具体到某一个水利单位，它还必须充分考虑水利创新单位的现实情况，为实施创新而需依托的技术基础要现实可行。
３应用模糊综合评价模型实证检验指标体系
’
在确立了评价指标体系后，下面笔者拟以长江科学院２００７年数据为例，应用模糊综合评价模型对上述构建的水利科技创新绩效评价指标体系进行实证检验，以验证其是否具有可行性。３．１模糊综合评价模型
考虑一般情形没待评价的水利科技创新项目集为Ｓ＝｛ｓ－，ｓ２，…，ｓ。｝；一级评价指标集为Ｂ＝｛１３。，１３：，…，１３。｝，某个一级评价指标１３ｉ可由ｊ个二级评价指标组成，则记为１３Ｆ｛１３订，１３ｊ２，…，１３ｉ｝，某个二级评价指标１３日，又可由三级评价指标集＊组成，由全体三级评价指标组成评价指标集１，按分属于不同的二级
评价指标分成ｎ个子集＾ｒ＝ｈ，＾ｙ：，…，１。｝且满足
ｎ
ＵＴｉ－－＇Ｙ
扛１
Ｍｎ＊＝巾，ｉ＃ｊ，ｉ，ｊ∈｛１，２，…，ｎ｝
万方数据
设某个三级评价指标集３＇ｉ有ｎｉ个评价指标，对于创新项目集Ｓ中的某个计划项目ｓｊ可用矢量铂表示ｉｚｉ个评价指标的特征值
髫产（ｘｉｖ，茗碍，…，Ｘｉｎｊ）’
（２）
对于与Ｍ对应的第ｉ个二级评价指标来说，ｍ个创新项目评价指标的特征值可用下列矩阵表示
戈ｉＩＩ
戈ｆ１２
…石ｌｌＪ，Ｉ
Ｘｉ２１筋笠
…
戈加
ＸＦ
＝ＩｘＦ］。
（３）
Ｘ／ｎｌＸ／ｎ２
…戈锄
按一定的隶属函数计算，可将特征值矩阵（３）转化为下列隶属度矩阵（评价矩阵）‘４３
…
ｒｉｌｍ
…＾２ｌ，ｌ
Ｒｆ＝
（４）
‘．
：
＝［勺】。
●
Ｉ
…‰。
式中：ｒ新为创新项目ｓｊ对应的第ｉ个二级评价
指标的第ｋ个三级评价指标的隶属度，且ｒ／ｔ，“０，
１］。瓦表示ｍ个创新项目对应的Ｍ上第ｋ个三级评
价指标的单指标评价，乃表示ｍ个三级评价指标对应ｓ；的单个创新项目评价。
Ｆ矗＝（ｒ诸ｌ＇‰，…，‰）
（５）
ｒ（ｉ＝（ｒｉｖ，啊，…，啊）７
（６）
设子集ｎＹ，的ｎｉ个三级评价指标的权系数集‘５１为Ａｉ如式（７）所示，它可由创新计划绩效评价指标权重确定方法来确定。
ＡＦ（啦ｌ，ａａ，…，％）
（７）
式中：％（后＝ｌ，２，…，ｎ）为第ｋ个三级评价指标
所对应的权系数值，且‰≥ｏ，艺％＝Ｉ。ｒｉ上的模糊
凡
综合评价集为
曰ｉ；Ａｉ?Ｒ产（６ｆｌ，ｂ垃，…，ｂ蛔）
（８）
式中：ｂｊｉ为ｒｌ上的创新项目ｓｊ的模糊综合评价结果，且按下式计算
６＃＝ｍａ】【［ｍｉｎ（％，ｒ匆）］
（９）
将式（８）得到的鼠作为更高一层的评价矩阵行，再引用式（９）计算，这样便可得到二级的模糊综合评价集。这样评价下去，最后可得到最终综合评价结果集
Ｂ＝Ａ?尺＝（６ｌ，ｂ２，…，６。）
（１０）
３．２评价指标隶属度的计算及结论
第４期（２０１０年４月）中国科技论坛
一３５一
多目标决策问题最显著的特点有两个，即目标间的不可公度性和目标间的矛盾性。所谓目标问的不可公度性是指各个目标没有统一的度量标准，因而难以进行比较。由于目标间的不可公度性，如果直接使用原评价指标特征值中的特征值，往往不便于分析和比较各目标。因此在进行综合评价前，应先将评价指标的特征值统一变换到［０，１］范围内，即对评价指标特征值进行归一化处理。然而，由于评价指标的类型往往不同，因此其特征值量化的方法也应不同。
（１）定量评价指标隶属度计算。
根据水利科技创新的绩效评价指标体系，定量指标分为３种类型：成本型、效益型和区间型。对于子集ｎ中的啦个指标来说，一般可分解为３个子集：
ｒｆ＝｛ｒｆｌ，也，…，ｋ｝＝｛ｎｌ＇ｒｎ，…，‰｝Ｕ
②确定整体水利科技创新绩效评价指标的隶属
度。创新的某项评价指标对各等级模糊子集的隶属度，是用该项指标的每一等级包含的创新项目个数，除以创新项目总数（ｍ），也即创新项目在各等级出现的频率－７Ｊ。
以第一行为例，长江科学院在２００７年中，创新项目经费筹集额占预算额的比重有３个创新项目在９６％以上，６个创新项目在９４％～９６％之间，２个创新项目在９２％－９４％之间，有１个创新项目在９２％以下。即在１２个创新项目中有３个优，６个良，２个中，１个差，这些个数除以１２可得出各等级出现的频率。以此作为对各等级模糊子集的隶属度，见表３中括号内数据。
此外。决策者还可根据指标的特征和自己的要求设定指标的最大、最小值。对于某些不能明确可测而只能进行定性评价的指标，则采用下文中的模糊
｛‰１，ｒｉ以，…，ｂ｝Ｕ｛ｒ“ｌ’ｒｍ，…，ｋ｝＝ｒ１Ｕ
集；ｒ３为区间型指标子集。
ｒ２Ｕ
ｒ３
语言评价法来确定，从而将定性的判定有效地转化为定量的分析。
（２）定性评价指标评价向量确定计算。
定性分析评价指标的单因素评价向量由模糊语言评价法来确定。具体步骤如下。
式中：ｎ为成本型指标子集；ｒ２为效益型指标子
为了计算上的简便和易于推广，对于式（４）的隶属度如的计算采用频率法。
该方法原本是先划分指标值在不同等级的变化区间，然后以指标值的历史资料数据在各等级变化区间内出现的频率作为对各等级模糊子集的隶属度【６Ｊ。针对长江科学院的个案，笔者结合本文的特殊情况作了相应改进，具体分为以下２个步骤。
①确定ｍ个创新项目（此模型中挑选了１２个比较典型的创新项目来进行分析，即ｍ＝１２）的各项指标的评价等级。首先对每一指标确定等级变化范围，具体结果见表２；其次通过计算各个创新项目在过去一年的各项年度指标数值，并与表２的区间范围相对照，就可以确定各项指标属于哪个评价等级，见表３。
①评价专家的选择。设有Ｐ个专家参与评价，即
有专家集Ｅ＝（ｅ。，ｅ：，…，ｅ，），根据创新项目对该领域的贡献程度和对社会的影响程度，赋予每个创新项目一个相应的权重系数，得到一个创新项目权重系
表２指标等级范围
评价指标—、＼、≥芝竺巡、
＼
创新项目经费筹集颁占预算额的比重（％）从事创新项目经费支出比重（％）创新项目经费占总经费支出比率（％）人员平均文化程度研究队伍的稳定性（％）！人员平均专业化水平（％）
优良中差
９６以上９８以上８０以上
２２．１９
９６～９４
９８—９５８０－７０１９～１６２３＾＿２７７０～５０１９￣１０５—４
９４－０２
９５—９１７０＾石５１６～１４２７—３０５０．之５ｌＯ～８
９２以下９１以下６５以下１４以下３０以上２５以下８以下３以下０．７０以下０．２２以下０．３３以下２以下４．５以下１．０以下０．３９以下
２３以下７０以上１９以上５以上０．８０以上Ｏ．３０以上０．４２以上４以上５．５以上
５．Ｏ叫２．５
Ｉ科技活动经济收益
｛人均技术性收入能力（万元／人）
组织增收能力资产增值效益人均科技成果数人均科技论文发表篇数人均科技著作发表字数（万）成果获奖当母数成果推广应用指数
４－３
Ｏ．７５—Ｏ．７０
０．８０如．７５０．３０加．２６
０．４２￣ｏ．３５
４～３５．５～５．０２．５～１．５０．５０＾旬．４６
Ｏ．２Ｄｍ．２２Ｏ．３５—Ｏ．３３
３￣２５．ｍｏ．５１．５～１．０
０．５０以上０．４６－０．３９
万方数据
一３６一
中国科技论坛
表３评价等级频率数统计
（２０１０年４月）第４期
杀巡
创新项目经费筹集额占预算额的比重（％）
从事创新项目经费支出比重
（％）
即优、良、中、差。秽＝（秽ｌ，ｆｆ２，ｆｆ３，秽４）＝（优、良、中、
优良
中
差合计差）
③单因素评价向量
３（０．２５０）
６（Ｏ．５００）
２（０．１６７）
ｌ（Ｏ．０８３）
１２（１）
的确定。评语集确定后，就可以对定性指标
２（０．１６７）４（０．３３３）
５（Ｏ．４１７）ｌ（Ｏ．０８３）１２（１）
进行单因素模糊评价。具体做法是请相关领域的专家对创新的影响因素进行等级（优、良、中、差）投票，以百分数确定隶属度，即各个创新项目定性评价指标的隶属度大小为：
ＲＦ
创新项目经费占总经费支出比率（％）
人员平均文化程度研究队伍的稳定性（％）人员平均专业化水平（％）科技活动经济收益人均技术性收入能力（万元／人）组织增收能力资产增值效益人均科技成果数人均科技论文发表篇数人均科技著作发表字数（万）成果获奖当景数成果推广应用指数
３（０．２５０）１（０．０８３）２（０．１６７）０（０．０００）１（０．０８３）１（０．０８３）ｌ（０．０８３）３（０．２５０）２（０．１６７）２（Ｏ．１６７）１（０．０８３）１（０．０８３）０（０．０００）
５（Ｏ．４１７）６（０．５００）５（０．４１７）６（０．５００）５（０．４１７）６（０．５００）７（０．５８４）５（０．４１７）６（０．５００）７（０．５８４）４（０．３３３）５（０．４１７）６（０．５００）
３（ｏ．２５０）３（０．２５０）４（０．３３３）４（０．３３３）４（０．３３３）５（Ｏ．４１７）３（Ｏ．２５０）４（Ｏ．３３３）３（０．２５０）２（０．１６７）５（０．４１７）４（０．３３３）５（Ｏ．４１７）
１（Ｏ．０８３）２（Ｏ．１６７）ｌ（０．０８３）２（Ｏ．１６７）２（Ｏ．１６７）０（Ｏ．０００）ｌ（０．０８３）０（０．０００）ｌ（０．０８３）ｌ（０．０８３）２（０．１６７）２（０．１６７）ｌ（０．０８３）
１２（１）１２（１）１２（１）１２（１）１２（１）１２（１）１２（１）１２（１）１２（１）１２（１）１２（１）１２（１）１２（１）
２（尺ｇｌ，Ｒ社，Ｒ９３，尺弘）。
进而可得水利科技创新定性评价指标的隶属度Ｒｆ－（Ｒｆｌ＇Ｒ岔，Ｒ凸，
ｍ
Ｒ揖）。式中各项Ｒ让＝乞
ｍ
数集Ａ鹏（“ｅ：，…，ｅ。），∑吩＝ｌ
ｊ＝ｌ
吩?尺秘，表示对相应的定性评价指标水利领域内整个水利科技创新的隶属度向量，此向量即为该评价指标的单因素评价向量。
②评语集确定。根据水利科技创新的特点，对定
性指标进行评判。本文采用四个评语组成的评语集，
参考文献：
．
［１］顾强生，刘开华．水利科技创新外延三要素协同分析［Ｊ］．水利纵横。２００１，（５）：１２一１３．
［２］贾继军，向兰，陈凌云等．对项目评估工作在科技计划项目管理中的地位和作用的再认识［Ｊ］．云南科技管理，２００５，（３）：２１—
２３．
［３］减玉强．层次分析法在科技成果综合评价中的应用［Ｊ］．济宁师专学报，１９９９，（６）：１３－１４．［４］陈中文，汪辉．科技成果的模糊综合评价［Ｊ］．武汉理工大学学报，２００４，（４）：２０４—２０６．［５］ＯｕｓｓＭａｈ，Ｍｏｕｒａｄ；Ｎｅｗｂｙ，Ｍａｒｔｉｎ．Ａｎａｌｙｓｉｓ
ｐｍｉｓａｌ：ｃａｓｅｏｆｉｎｄｅｐｅｎｄｅｎｔ
ｏｆｓｅｒｉａｌ－ｐａｒａｌｌｅｌｓｙｓｔｅｍｓｉｎｔｈｅｆｒａｍｅｗｏｒｋｏｆｆｕｚｚｙ／ｐｏｓｓｉｂｉｌｉｔｙａｐｐｒｏａｃｈ．ＰａｒｔＩ．Ａｐ．
ＥｎｇｉｎｅｅｒｉｎｇａｎｄＳｙｓｔｅｍ
ｃｏｍｐｏｎｅｎｔｓ，ＲｅｌｉａｂｉｌｉｔｙＳａｆｅｔｙ，２００３，７９（３）：３５３－３６８．
［６］盛海洋，王飞跃．南水北调规划特点及其综合效益研究［Ｊ］．水土保持研究，２００５，（４）：１７８－１８２．［７］朱世慧．科技成果评价指标量化模型［Ｊ］．铁道工程学报，１９９４，（４）：１１９－１２６．
（责任编辑张九庆）
万方数据