２０１１＃－７￣号中旬刊文教贸料 高校科研项目综合定量绩效评价方法研究 曹 ＦＥｌ （ａｇ江大学。浙江杭州３１００５８） 摘要：近年来．为提高我国整体科研水平，满足建 设创新型国家的需要．我国财政科技投入总量逐年增长， 对各类科研项目的资助力度也不断加大。高校是开展科 学研究工作的重要阵地，承担着大量的各级各类科研项 目。高校科研项目的绩效问题已成为项目主管部门、高校 科研管理部门共同关注的焦点问题。本文将模糊综合评 价方法应用到高校科研项目的绩效评价中，为科研管理 部门提供决策依据 关键词：高校科研项目 定量绩效评价模糊综合 评价方法 １．引言 科研项目绩效评价是科研管理工作的重要内容，是 保证科技活动发展和科研项目顺利运行的基本机制和有 效措施。科研项目绩效评价为科研计划制定、科研项目立 项提供科学依据，并有利于加强科研项目过程管理，提高 科研工作的效率，为科技奖励、职称评定等提供依据…。 同时。科研项目绩效评价有利于为项目管理提供决策依 据，有利于提高科研项目管理水平。 １９世纪，绩效评价被美国军方用于评价军事活动 之中．同时也被引入工业领域。到２０世纪，绩效评价应 用领域更为广阔，从早期对人力资源、军事、工业方面 的评价扩展到宏观经济领域、企业组织、文化活动和许 多项目研究之中。２０ｔ￣纪７０年代以后，科研项目绩效评 价的研究已经被广泛认识到。８０年代以后，绩效评价的 方法和体系框架模型大量产生。评价作为一种规范和 制度逐渐被定下来。我国对于科研项目绩效评价的研 究和应用较晚。１９８６年，我国开启了国际科研组织绩效 比较研究，并发布了若干评估报告。同年，我国国家自 然科学基金委员会成立，并以课题验收的形式比较系 统地开展了对资助项目的绩效评估Ｅ２］。１９９７年，国家科 技部正式批准成立了“国家科技评估中心”，并在３１省 市和部门开展了科技成果评价试点工作，将科技评价 作为“第三方立场”引入政府科技决策系统 。２００３年， 科技部、教育部、中国科学院、中国工程院和国家自然 科学基金委员会五个部门联合发布了《关于改进科学 技术评价工作的决定》…。随后科技部颁布了《科学技术 评价办法》，这一办法标志着我国基础研究评价走上规 范化、制度化的道路［５］。 我国学者对科研评价的研究已经取得了很大进 展，对科研项目绩效作出科学合理的评价已成为我国 目前科研管理的重要工作，但是科研绩效评价体系的 科学构建还在不断完善中。现行的目标评价广泛应用 于科研及工程项目评价中．但多采用简单直观的定性 １７２ 评议或使用粗糙的比较评价打分方法，尚未形成公认 统一的理论和方法。目前的方法过分依赖于专家的主 观经验和知识积累．很大程度上影响了评价结论的客 观性㈣。由于科学研究自身具有创造性，科研项目成效 既有显性成绩又有潜在成绩，评判标准不能单一而沦。 因此对科研项目完成的绩效分析需要综合考虑各方面 因素，对科研项目完成情况及预计效益都要作全面评 价。模糊综合评价方法是一种用于涉及模糊因素的综 合评价方法，其优点是可以较好地解决综合评价中的 模糊性。本文旨在结合模糊综合评价方法，对照绩效评 价表，提出一种评判科研项目完成情况的综合定量评 价方法。 ２．模糊综合评价模型的建立 模糊综合评价法是一种基于模糊数学的综合评价方 法。该综合评价法根据模糊数学的隶属度理论把定性评 价转化为定量评价，即用模糊数学对受到多种因素制约 的事物或对象作出一个总体的评价。它具有结果清晰、系 统性强的特点，能较好地解决模糊的、难以量化的问题， 适合各种非确定性问题的解决 。 模糊综合评价包含四个要素：因素论域Ｆ、评语等级 论域Ｖ、权重向量Ａ、模糊关系矩阵Ｒ。 ２．１计算步骤 （１）定义评价因素论域Ｆ。Ｆ为模糊综合评价中各评价 因素组成，是集合模糊综合评价模型的输入。Ｆ＝／ｉｆ，‘，…，ｆ｝， （ｉ．１，２，…，ｎ）。 （２）定义评语等级论域Ｖ。Ｖ：（ｖ．，Ｖ２，…，ｖｍ）是综合评价 中评语所组成的集合。ｖ（ｊ＝ｌ，２，…，ｍ）是评价最终结果 （３）为评价因素确定权重Ａ。Ａ是ｆ（ｉ＿ｌ，２，…，ｎ）对应 的模糊权重向量。代表评价因素的相对重要程度。Ａ＝（ａ ａ，，…，ａｎ），￣ａｉ（ｉ＝ｌ，２，…，ｎ）满足 ａｉ＝１。 ｌ＝ｌ （４）计算模糊关系矩阵Ｒ。Ｒ是单因素评价的结果，Ｒ＝ （ ，ｒｉ：，…，ｒｉｍ）。ｒｉｍ表示第ｊ个因素￡对评语ｖ 的隶属度。 （５）确定评价结果向量Ｂ。 ｒ１１ ｒｌ２。‘ Ｂ＝Ａ Ｒ－（ａｌ，ａｚ，…，ａｎ） ｒ２ｌ ｒ２２ 。。 ●●● ●●● ● ｒ１】ｒ１１ ” 按最大隶属度原则，取最大的Ｂ～相对应的评语为评 价结果。这样就可以确定风险措施的必要程度。 ２．２权重向量Ａ的确定 权重向量反映了每个评价因素的地位和影响。常用 一 的权重确定方法是专家调查表法。专家调查表法依赖于 表５某科研项目绩效评价指标及权重值Ｉｆ９ 专家的知识水平和经验。在高校科研项目绩效评价中．专 项目的经费使用和管理情况Ｌ 家调查表法简单实用，能够满足项目管理的需要。具体的 操作步骤如下： 评价 项目经费预算 配套和自筹资 项目经费支出 的执行情况 金到位情况 与合同规定用 科技专项经费 （１）基于绩效评价指标制定专家评价表。 指标 途相符情况 的管理情况 ｌ （２）开展专家调查，邀请多位专家对评价因素的ｍ个 ｆ４２ ｉ们 评价等级进行勾选，给每个评价等级赋值ｂ＝（ｂ。，ｂ：，…，ｂ ）。 权重值 ０．３０１ ０．２２３ Ｏ．２４１ ０．２３５ （３）统计出为第ｉ个评价因素选择第ｉ级的专家数ｋ 其中ｆ的权重值组成权重向量Ａ，‘ 权重值组成权 （４）计算评价因素权重： 重向量Ａ 一Ａ 。 ￣权重向量为： ｋｉｊｂｉａ＝＝—ｉ ＝１（１—２） Ａ＝（０．３７７，０．２４１，０．１５１，０．２３１） —骞 ｂ１ ｌ＝１ 。ｉ Ａ１＝（０．４５７，０．２８３，０．１５１，０．１０９） ＝（０．１３１，０．１２９，０．１６３，０．２３４，０．１９５，０．１４８） ３．应用实例 Ａ ＝（Ｏ．１７２，０．１０６，０．３３１，０．２３５，０．１５６） 以高校某一科研项目为例，此类项目绩效评价非为 Ａ ＝（０．３０１，０．２２３，０．２４１，０．２３５） 业务评价和财务评价，通过归纳整理，建立科研项目绩效 模糊关系矩阵为： 评价指标体系。制定出此项目专家调查表，以进行权重比 ０．７５ ０．２５ ０ ０ ０ 较，对反馈的有效调查表进行统计，得到各指标权重。评 Ｒ ０－５ ０ ０ ０ Ｏ １ ０ ０ ０ —．．．．．．．．，．。．．．．．．．： ．．．．．．．．．．．．Ｌ 价等级分为“很好”、“好”、“一般”，“不好”、“很不好”。每 ０ ０ Ｏ ０．７５ ０ ０ ０ ０－４ ０．４ ０－２ ０ ０ ５ ２ １ ６ 个评价等级分别赋值为９…７ ５ ３、１。经过填写专家调查 ５ ４ ０ Ｏ Ｏ Ｏ ０．７５ Ｏ．２５ ０ ０ ０ ７ 表，根据模糊综合评价法中权重的计算方法，得到了各指 ０．３５３ ０ ０ Ｏ １ Ｏ ０ ０ ０ 标的权重，如表１—５所示。 ０．２３ ０．７７ ０ ０ ０ 表１某科研项目绩效评价指标及权重值 ０．８７８ ０．１１１ ０．１１１ ０ ０ ０ ０ ０ ０．３３３ ０．６６７ ０ ０ ０ 项目完成效果ｆ ０ ０ ０ Ｒ３＝ １ ０ ０ ０ ０ 评价 项目合同执行 项目技术水平 项目经济、社 Ｏ ０ ０ 及所产生的成 会、生态环境 项目的经费使用 ０．６１７ ０．３５３ ０ ０ ０ 指标 情况‘ 果情况 效益厶 和管理情况ｆｄ ０．５１２ ０．３４４ ０．１３４ ０ ０ ０ Ｏ ０ 权重值 ０．３７７ ０．２４１ Ｏ．１５ｌ ０．２３１ ｒ● ●●＿ｆ评价结果向量为：『●●ｌ Ｂｌ＝Ａ ・Ｒ１＝（Ｏ．５２０７７３，—１ １ Ｏ １ ．．。．．．．．．．．．．．．．＝ ．．０．。．．．．．４７９２２７，．．Ｌ ０，０，Ｏ） 表２某科研项目绩效评价指标及权重值ｔｑ） Ｂ’＝ ・ ＝（０．５６７９９，０．３９９４１，０．０３２６，０，０） ０ ０ １ ０ 项目合同执行情况‘ Ｂ －Ａ ・Ｒ＝（０．７４２１８，０．２２６４１，０．０２９８５，０．００１５６，０） 评价 项目合同书规定 项目计划进度 项目技术指标 项目经济指标 Ｂ４＝Ａ４・ ＝（０．７５９，０．２４１，０，０，０） 指标 的研究内容和目 完成情况‘ 完成情况 完成情况‘ 标完成情况‘ Ｊ １ ｌ １－０．５２０７７ ０．４７９２３ ０ ０ ｏ１ 权重值 ０．４５７ ０．２８３ Ｏ．１５１ ０．１０９ Ｒ－ Ｉｌ ： Ｂ３ Ｉ １ ｌ ００．・５６７９９ ０．３９９４１ ０．０３２６ ０ ０ ｌ 表３某科研项目绩效评价指标及权重值（ ） Ｂ １ Ｌ ０．７４７５９ ２１８ ０・２０．２２４１６４１ ０・０２９０ ８５ ０・ｏ０１０ ５６ ０ｏＪ ｌ Ｂ＝Ａ・Ｒ＝（０．６２０６２，０．３６６７９，０．０１２３６，０．０００２４，Ｏ） 项目技术水平及所产生的成果情况ｆ２ 由计算结果可知，６２％的专家认为是很好的，３７％的 评价 项目成果 项目研发 项目关键共 的技术水 团队及人 性技术开发 项目知 项目发 项目获 专家认为是好的，１．２％的专家认为一般。由最大隶属度原 指标 才培养情 和转化应用 识产权 表论文 奖情况 则，我们对此项目评价为很好。 平 况 情况 情况 情况 ｆ２６ ４．结语 权重值 ０．１３１ ０．１２９ ０．１６３ ０．２３４ ０．１９５ Ｏ．１４８ 本文应用模糊综合评价方法对高校科研项目进行了 综合绩效评价，将模糊现象与数学方法相结合，对项目进 表４某科研项目绩效评价指标及权重值（ｆ３） 行了定量的评价，帮助专家组作出比较完善的决策。为减 项目经济、社会、生态环境效益 少评价的主观因素，可以研究确定指标权重的科学性，这 也是进一步需要进行的研究。 项目实施 项目实施 项目实施 评价指标 后经济效 产业发展 键技术的 对新技术 对资源综 项目实施 对企业和 对重大关 项目实施 益情况 。 的作用和 突破和转 推广、示范 合利用、节 参考文献： 化应用情 应用情况 能减排降 ［１］刘华海．科研项目绩效评价综合分析［Ｊ］．科技成 影响毛 耗等生态 况‰ 效益毛 果纵横，２００８，（６）：１９—２０． ［２］王逸，唐隆华．基础研究与科学基金管理——纪念 权重值 ０．１７２ Ｏ．１Ｏ６ Ｏ．３３１ ０．２３５ ０．１５６ 国家自然科学基金委员会成￣＿ｇｒ－２０周年［Ｊ］．中国基础科学， １７３ 加强高校成人教育档案管理的若干思考 潘立勤 （红河学院招生就业处，云南蒙自 ６６１ １００） 摘要：做好成人教育档案管理工作，是衡量成人 二、高校成人教育档案管理存在的问题 教育质量、办学效益和管理水平的重要依据．成人教育档 （一）成人教育档案管理在认识上存在的误区。当前 案管理，应摆脱传统模式，强意识，抓管理，重服务，逐步 高校成人教育档案管理工作普遍存在认识上的误区，缺 规范成人教育档案管理工作。 乏科学的、系统的思考，缺乏管理成人教育档案工作的长 关键词：高校成人教育档案管理制度科学信 效机制，认为成人教育档案管理工作无足轻重，无非就是 息化 整理资料之类的事情，只要不出差错就可以了；认为成人 教育等于普通高等教育，成教档案管理应由学校考虑，轻 高校成人教育档案是高校从事成人教育、科研及其 视成人教育档案管理在成人教育管理中的地位和作用． 他各项管理活动中形成的具有保存价值的文件材料，是 把成人教育学院当作一个创收的部门和增加教师收入的 高校成教管理工作的重要组成部分，是衡量其教育质量、 途径。这些都是造成高校成人教育档案管理落后的重要 办学效益和管理水平的重要依据。做好成人教育档案管 思想根源，造成成人教育的自身发展与成人教育档案管 理工作，促进成教事业发展、提高成人教育管理质量、展 理认识上的不协调 示成教业绩具有十分重要的作用。随着高校成人教育工 （二）成人教育档案管理队伍薄弱。成人教育学院在 作的开展，成人教育管理部门及社会对成人教育档案利 许多高校中属于基层学院．教育教学管理上比较成人教 用需求不断增长，对成教档案管理提出了更高的要求。然 育与全日制教育的不同而具有相对的独立性，人员编制 而，高校成人教育档案的管理并不尽如人意．而且成人教 比较紧张，对成人教育档案管理岗位的界定模糊．多数管 育档案管理工作滞后，严重影响到高校成人教育的发展 理人员身兼多职，档案管理成为附带工作，由于本职工作 因此，我就高校成教档案管理存在的问题作如下探讨。 繁忙，只能挤时间管理档案，甚至只能利用双休日等业余 一、高校成人教育的特点及档案材料的形成 时间，突击处理档案管理业务，而且档案管理人员业务能 随着成人教育的发展．成人教育已经形成自己办学 力不强，队伍不稳定，无法深入开展各项档案业务工作。 模式和办学特点，概括起来有以下几点：（一）办学的开放 以红河学院远程成人教育学院为例，在职教工加合同制 性。（二）办学层次的丰富性①。（三）学习方式的灵活性②。 员工共计１６人，有三个兼职档案管理员，只有一人受过档 （四）教学的分散性③。（五）学员层次的差异性。成人教育 案专业知识培训，有三分之二的兼职档案管理人员无档 教学的特殊性，使教育教学管理，档案材料来源面较广． 案专业知识。在实际工作中无法鉴定材料的价值。比如： 种类繁多。有文书档案，主要包括：教育行政主管部门下 永久材料、长期材料混淆归档．还有大量反映成人教育发 发的有关成人教育工作的政策、法规等文件：有成人教育 展进程的文件材料都散落在各职能部门的负责人或具体 学院制定的教学管理、专业设置、培养计划、学籍管理及 的操作人员手中，没有及时归档。档案材料丢失现象严 有关规章制度等方面的文件；有学校制定的成人教育发 重，直接影响档案的开发利用．档案的教育及历史凭证功 展规划、实施计划、经费安排、奖惩措施等方面的文件；有 能没有在成人教育教学和科研工作中发挥出来。 学籍材料，学员人学登记、学员学籍卡片、学员成绩总册、 （三）档案管理制度不健全。由于档案工作得不到应 在校学员名册、学员转专业、休学、延长学制④等材料：有 有的重视，因而没有形成完整的成人教育档案管理制度． 教务方面材料，包括成人教育各专业教学计划、教学大 导致成人教育档案管理处于无序状态。归档材料范围不 纲、教学方法、课程设置要求及安排、学期教学进度表、教 明确、管理工作不规范、管理人员职责未落实等现象都制 材选用、试卷、考试安排、各专业授课教师简历、学术研究 约着成人教育文件资料的整理归档工作，在没有查档阅 成果、学术交流、教学名师的精品课程及授课情况反馈等 档等方面机制与制度约束的情况下，造成成人教育档案 内容；有招生方面材料，包括招生简章、招生计划、招生有 管理低质量、低效率运作。 关的政策、招生情况比较分析④、招生工作总结等材料；有 （四）成人教育档案信息化管理薄弱。当前，成人教育 毕业学员档案等。 档案资料基本上还停留在手工操作阶段，使用计算机网 ２００６，（２）：３７－３９． ［６］梁吉业，褚成缘，胡建龙，李德玉．科技项目完成情况 ［３］科技部科技评估中心，ｈｔｔｐ：／／ｗｗｗ．ｎｃｓｔｅ．ｏｒｇ／． 的模糊综合评价研究［Ｊ］．系统工程学报，２００８（５）：６３６－６４０． ［４］五部门出台《关于改进科学技术评价工作的决定》 ［７］模糊综合评价法．ＭＢＡ智库百科．ｈｔｔｐ：／／ｗｉｋｉ．ｍｂａｌ— ［Ｊ］．高科技与产业化，２００３，（６）：３８． ｉｂ．ｃｏｍ． ［５］科学技术评价办法（试行）＿Ｊ］．中国科技产业，２００４， （１２）：５９－６４． 浙江大学高教研究会２０１０年立项课题成果。 １７４