政府资助科技项目绩效评价指标体系设计与实证的研究

政府资助科技项目绩效 评价 LEC评价法下载LEC评价法下载评价量规免费下载学院评价表文档下载学院评价表文档下载 指标体系设计与实证的研究 政府资助科技项目绩效评价指标体系设计与实证的研 究 摘要 随着我国科技经济~体化进程的不断加深,科技对经济增长的贡献程度不断 提高。科技项目评价作为科学技术管理工作的重要组成部分,是推动国家科学技 术事业持续健康发展,促进科学技术资源优化配鬣,提高科学技术管理水平的重 要手段和保障。我国政腐为此亦已制定了一系列鼓励科技开发、科技成果转化和 技术引进的政策,并鼓励金融资金进入这~领域。在此形势下,如何进一步充分 发挥科技项基评价工作的职能,以此推动科技项舅管理的质量和效益,为政府的 决策提供指导,总结经验,持续创新,均需要对政府资助科技项目评价工作的理 论和方法进行再认识和思考。 一、科技项目评价的国内外相关研究综述 本文对科技项基评价的国杰终相关研究成果进行了综述,以科技项目评价的 研究历程为出发点展开论述。在关于科技项目评价指标体系的研究方面,国 外的 研究主要扶风险投资评价指标体系的研究和其它科技项冒指标体系酶研究与发 展展开,并借鉴了三大银行的评价指标体系作为本文重要的评价指标理论支撵体 系,丽国内在这方面的磷究主要是结合我匿的实际情况,对匿外现有的理论成果 进行补充和修正,对我国科技项圈评价作出了可贵的探索,得出一般性评价决策 指标。在关于科技投资顼基的评价方法研究方面,本章研究了冒前囡内外研究的 热点,即法研究的现状和发展,并将困内外研究进行了比较分析,指出我国 譬前在科技项嚣评价领域存在的不足和有待完善的方面。 二、科技项目评价方法研究 对辩技项隧评价方法的研究也是本文的重点和难点之一。本文探讨法在 科技项目评价中的具体思路和步骤,分析了将法应用予科技投资项目过程评 价的孤因,并且指出层次分析法体现了人们决策思维的基本特征,是定性分柝与 定量分析的有效集成。 三、科技项舀评价实证研究 本文在对政府资助科技项目绩效进行分析的基础上,运用了层次分析法对其 进行了实证研究。首先将层次分誊斤评价法孳入此科技顼雷评价过程,缝够 最大程 度地利用所有基础数据,避免了信息丢失,并且同~般常用的模糊综合评价、加权平均法等相比,本文方法使用简便、结果直观、准确可靠。通过分析,可以看 出,对科技项瑟评价面畜,不仅要有效地反映项嚣的价值,而且还必须为正确的 科技项目管理做出指导和建议。通过进一步分析,可以较为清晰地了解他们对于 科技项罾绩效的影响程度,从而在科技项爱评价过程中进行管理和控制。 法 关键词:科技项薯项曩评价实验室建设顼匿 续效评价?? . , . . , ,? , , ,. . 觞. ,, , ’ , . , , ’ ,. . ,, ,, , , ,? . ,, ,, . , . . , , ,.,, , ..,.: , , , 浙江理工大学学位论文原创性声明 本人郑重声明:我恪守学术道德,崇尚严谨学风。所呈交的学位论文,是本人 在导师 的指导下,独立进行研究工作所取得的成果。除文中己明确注明和引用的内 容外,本论文 不包含任何其他个人或集体已经发表或撰写过的作品及成果的内容。论文为 本人亲自撰 写,我对所写的内容负责,并完全意识到本声明的法律结果由本人承担。 学位论文作者签名: /哩日 嗍岬年弓月浙江理工大学学位论文版权使用授权书 学位论文作者完全了解学校有关保留、使用学位论文的规定,同意学校保留并向国家 有关部门或机构送交论文的复印件和电子版,允许论文被查阅或借阕。本入授权浙江理工 大学可以将本学位论文的全部或部分内容编入有关数据库进行检索,可以采用影印、缩印 或扫描等复制手段保存和汇编本学位论文。 保密 ,在 年解密盛使用本舨权书。 本学位论文属于 不檩衫。 学位论文作者签名: 指导教师签名: 日期: 日期: 年月日浙江理大学硕士学位论文 导论 科技项目绩效评价是科技项目管理工作的重要组成部分,是推动国家科技事 业持续健康发展,促进科技资源优化配置,提高科技管理水平,营造良好的科技 创新环境的重要手段和保障。科技项目评价不仅要适应政府优化配置科技资源和 提高科技决策与管理的科学化水平的需要,而且要有助于正确引导科学发展目标 与国家经济社会发展需求有机结合,有助于提高研究与发展活动的效率和效益, 有助于科技创新人才的培养成长,有助于推进科技成果转化与产业化,有助于营 造良好的创新环境和创新文化,以促进科学技术持续发展。 .研究背景 、开展政府资助科技项目绩效评价的客观需求 世纪年代末,我国经济增长由供给约束转向需求约束,买方市场逐渐 形成,区域之间、产业之间竞争加剧。随着我国现代化水平和市场化程度的提高, 人民生活水平实现小康后需求结构的改变,以及国内国际市场的逐步融合,从客 观上提出了经济结构的战略性调整和国民经济各部门的大规模技术改造的要求。 在全球一体化趋势愈演愈烈之际,综合国力的提升与竞争,越发取决于科学 技术的进步。要在国际竞争中确立新的比较优势,必须走科技含量高、经济效益 好、资源能耗低、环境污染少、人力资源得到充分发挥的新型工业化道路, 促进 经济社会的全面、协调、可持续发展,而这比以往任何时候更需要强有力的科技 支撑。 政府资助科技项目既是国民经济和社会发展计划的重要组成部分,同时也是 科技促进经济和社会发展的桥梁与纽带。科技项目作为科技计划的载体,项目选 择是否科学,是否符合国家或地区经济和社会发展的实际需要,是否能发挥应有 的作用,不仅关系到科技项目本身的成败和有限的科技资源的配置效率,更将直 接影响经济和社会发展,甚至我国在国际社会地位的变化。由此可见,科技进步 任重道远,开展科技项目绩效评价具有加快发展的内在要求和广阔空间。 、政府资助科技项目绩效评价存在的问题 科技项目绩效评价是科技投资决策的重要依据,其准确性直接影响科技投 资决策的正确性,科技项目绩效评价能够独立服务于社会的根本所在是它能够浙江理工大学硕士学位论文 对项目的效益、代价和未来的发展趋势进行科学、准确的预测和评价,?为国家、 科研机构提供决策建议,使项目投资者尽可能地规避风险,评价的准确性理应 成为项目评价工作最重要的内容。 改革开放以来,随着市场经济的发展,我国的科技项目绩效评价工作发展 很快。科技项目评价成为立项、投资的必要步骤,国家也编制了建设科技项目绩 效评价方法与参数等指导性文件以 规范 编程规范下载gsp规范下载钢格栅规范下载警徽规范下载建设厅规范下载 评价活动,为提高评价水平做了大量的 工作。但是,我国科技项目绩效评价准确性远远不能令人满意,单从投资看,预 算超概算、决算超预算的情况十分普遍,投资估算偏差超过以上的屡见不鲜,有 些项目的实际投资与评价值相差几倍甚至十几倍。如果从科技项目的整体结果来 考虑,评价的准确性就更低了,项目可行性研究报告被戏称为可批性报告。评价 不准不仅造成决策失误, 导致投资损失,各项费用的浪费,而且严重损害了评 价业的声誉,危及评价业的生存和发展,成为评价业健康发展的大敌。相比之下, 国外对项目评价的准确性要高得多,科技项目评价的误差多在%以内。进入 后高科技项目的产业化道路是我国经济发展的必然选择,.如何在激烈的市 场竞争中减少决策的失误,这不能不引起我国评价机构的重视与反思。我国科技 项目绩效评价工作起步较晚,还处于“摸着石头过河”,边探索、边实践,边提 、 升,边完善的状态。就实施情况看,主要存在以下不足: ?科技评价中介机构缺乏。目前,一些省、直辖市,还没有对科技项目绩效 进行评价的专业机构,也没有专门指定对科技项目绩效进行评价资格认定的机 构,科技项目绩效评价工作仍主要靠科技管理部门临时组织专家进行实施。 ?对评价专家的资格及行为的法律规范还有待加强。在绩效评价过程中,因 缺乏同行专家评议 制度 关于办公室下班关闭电源制度矿山事故隐患举报和奖励制度制度下载人事管理制度doc盘点制度下载 及评价专家资格认证制度,致使评价过程中容易出现重人 情拉关系、本位主义等现象,影响了评价工作的客观性与公正性。评价指标体系 不完善,导致不能客观、真实、准确地反映不同评价对象的实际情况,也在一定 程度上容易助长急功近利、浮躁浮夸等不良风气和短期行为。 ?评价能力较弱。部分地方科技评价 标准 excel标准偏差excel标准偏差函数exl标准差函数国标检验抽样标准表免费下载红头文件格式标准下载 、评价方法、评价信息的获取、 分析与整理以及评价报告书的编写等等还不完善。评价人才队伍相对匮乏。科技 评价工作对专门从事科技评价人员的综合素质要求较高,不仅要求具有较丰富的 科技工作实践经验和较强的分析与综合判断能力,而且还要通过科技部认可 的科 浙江理工大学硕士学位论文 技评价专业培训,并通过专业考核和考试才能获得从业资格,这就使得有资格从 事科技评价的人员相对匮乏,阻碍了科技项目评价工作的顺利开展。 ?对评价结果的处理和使用的规范程度不够。评价结果作为绩效评价工作 的产出,是改进现实管理问题的重要数据资料,其价值只能是通过充分利用并产 生良好的效果而体现出来。目前部分地方乃至国家相关的政策法规,不能把绩效 评价结果和绩效改进与提升很好地结合起来,宏观上不能为管理部门决策提供参 考,微观上不能促进项目本身的管理与实施,从而提高政府科技经费的使用绩效。 .选题的意义 、保证科技项目资助资金使用的科学性、合理性和规范性 政府科技资助资金绩效的研究,可以对项目经费的使用情况,按照原定开支 范围进行检查,挪用的经费予以追回,由不可预知因素造成的经费不足管理部门 可酌情追加增补;对于项目中未经科技计划部门认可自行延伸扩展的研究内容, 不予承认。通过资助资金的绩效评价,能及时发现项目实施过程中出现的各 种经 费使用问题,为应对措施的提出提供依据,保证了资金使用的科学性、有效性和 规范性。 、政府资助科技项目绩效评价能促进决策的程序化与科学化 国家对政府资助科技项目资金的确定虽然已经有了一套较为完备的决策程 序,但计划的实施往往不尽如人意。原因有二:一是项目在进行可行性论证时走 过场,盲目上马;二是实施过程中没有进行绩效验收评价,导致项目的难以实施、 进展不力甚至完全失败。还有些项目,由于申请单位掌握的预测信息不足或误测, 而参加论证的科技管理人员和专家对项目的判断缺乏充分依据,以致出现决策失 误。开展绩效评估,制定出一整套严格的可行性论证程序和评价标准,能尽量避 免计划项目的决策失误,促进决策的程序化与科学化。 、是树立和落实科学发展观,实现科技工作可持续发展的重要手段 党的十六届三中全会提出了坚持以人为本,树立全面、协调、可持续的发 展观,提出了统筹城乡发展、区域发展、经济社会发展、人与自然和谐发展、国 内发展和对外开放的“五个统筹。坚持以人为本,树立全面、协调、可持续 的 发展观,促进经济社会和人的全面发展,是我党准确把握世界发展趋势,走新型 工业化道路、实现全面建设小康社会目标的有力保障。改革开放以来,我国经济浙江理工大学硕士学位论文 在实现持续高速增长的同时,依然存在着经济发展水平、产业结构层次、经济增 长质量的“三低”问题,此外,能源、水及其他资源短缺的“瓶颈”制约日益加 剧,生态环境日益恶化的趋势依然严重。近年来,随着地方经济实力的不断增强, 对科技工作的要求日益迫切,各级地方政府对科技工作的关注程度越来越高,地 方科技投入规模越来越大。同样,目前地方科技工作还存在不少困难和问题。特 别是基层科技工作薄弱和困难的局面仍然没有从根本上得到解决。加强地方科技 工作,要以“三个提高为目标,即提高科技进步对地方经济社会发展的支撑力 度,提高科技工作和科技管理部门在党委和政府中的地位,提高各级党委政府对 科技工作的支持力度。科技项目绩效评价工作的开展顺应了这些目的和要求,将 有力地促进科技工作的可持续发展。 .相关概念 ..科技项目的概念 ’所谓科技项目,是指为解决一个比较复杂的综合性的科学技术问题而确定的 研究与试验发展工作。科技项目由若干彼此有内在联系的、并有共同综合目标的 科研课题所组成。与课题相比,科技项目的规模较大、完成周期较长,一般需 ?年。 科技项目是项目的一种类型,它必然满足和具备作为项目的一般条件和特 点,即它受到时间、成本和质量要素的约束,并具有惟一性、一次性、多目标属 性、生命周期属性、相互信赖和冲突属性的特征。但作为科技项目的活动是为增 加知识总量,以及运用这些知识去创造新的应用而进行的系统的、创造性的活动。 因而,科技项目与其他类型的项目相比还具有一种特殊的性质即它的创造性或者 说创新性。创造性或者创新性活动是一种具有探索性、独创性、新颖性、实践性 的人类活动。从这个意义而言,科技项目是一种创新的活动,是为获得某种新的 科技知识、科技设施、新的产品与服务所作的一次性努力。这里包含着三层意思: ?每个科技项目都是一种创新活动; ?每个科技项目的目的都是为了提供一种新的科技知识、科技设施、新的产 品或新的服务; ?一个科技项目是有明确的起始时间与结束时间的一次性努力。一次性并不 浙江理大学硕士学位论文 意味着临时性或短暂性;一次性也不意味着简单性。 与一般项目不同的是,科技项目强调创新,强调获得新的科技知识以及与此 种新的科技知识相关的科技设施与新的产品或服务,这也是评价科技项目质量绩 效的标准。 科技项目的应具备以下两个特点:?创新性,科技项目与其他类型的项目相 区别的本质属性就是其创新性。创新性是一种具有探索性、独创性、新颖性、实 践性的人类活动。在这里科技项目的创新性不仅仅指项目的阶段或可交会成果具 有创新性,还包括对科技项目管理的创新。任何一个项目的管理都没有一成不变 的模式和方法可供参考,必须通过管理创新去实现对于具体项目的有效管理,寻 找一种新的项目管理思路。?风险性和不确定性,科技项目与一般项目的区 别还 表现在科技项目的高风险性上。其风险性是由于外部环境的变化、项目的难度和 复杂度以及科技人员和科研管理者能力的有限性而导致的。而这种风险是客观存 在的,贯穿于科技项目的各个阶段。二般项目容易计划和控制,’其计划的目标清 晰具体,其结果的不确定性要比其他项目活动的不确定性大得多,科技项目无论 时间进度、成本预算以及质量都是很难把握的,执行中有许多未知因素,到底能 出什么结果往往都是很难预料和不可预见的。 科技项目可以按不同的目的与方式进行分类: 、按科技发展过程分类 按科技发展过程分类是科技项目分类中最常用的。科技发展客观规律显示, 科技创新过程总是可以分成若干阶段,每个阶段都有不同的特征。通常可以分为 以下阶段:?研究阶段??提供实验室成果与原理性样机;?开发阶段??提供 实用的技术与样机、样品;?中间试验阶段??为规模化生产提供必须的技术经 济依据;?产业化阶段??建立第一个规模化的工厂、示范基地。 科技项目可以是其中的某一阶段,也可以是全过程,这要看具体情况而定。 为简单起见,同时,又使分类具有较大的包容性,我们也可以将科技创新过各分 成三个阶段:研究阶段、中间试验阶段、产业化应用阶段。对各个阶段还可以进 行细分。 、按出资主体分类 按出资主体一般可分为“纵向”科技项目和“横向”科技项目,其中“纵向浙江理工大学顾十学位论文 科技项目又可分为国家科技项目、部门行业.科技项目和地方科技项目。?国 家科技项目,是指国家财政投入并归口科技部或国家自然科学基金委员会管理的 国家科技计划项目,包括国家科技攻关项目、计划项目、计划项目、国 家自然科学基金项目、国家火炬计划项目、国家软科学研究项目和科技型创新基 金项目,等等。?部门行业科技项目,指归口教育部、中国科学院、农业部、 国土资源部或国家海洋局等国务院各行业部门管理的科技计划项目,如教育部科 学技术研究重大项目、国家海洋局专项项目、农业部项目等。?地方科 技项目,指各省市等地方政府科技计划项目,如广东省自然科学基金项目、广州 市科技攻关项目、珠海市星火计划项目、北京市科技计划项目、山东省“科 技兴 海项目等等。?企事业单位科技项目,包括企业投资的科技开发项目、大学自 筹经费的科技项目、企事业单位委托研究科技项目即“横向”项目等。 、按科技活动性质分类 按科技活动的性质可分为:?基础研究,主要是为了获得有关各种现象和能 够观察到的事实的基本原理的新知识,不以任何专门或具体的应用和使用为目 的,而进行的实验性和理论性工作。例如,规范场中的重整化及辐射修正研究, 其研究目的是希望提示出新的物理现象存在,故是一项探索性和认识客观世界的 基础研究。?应用研究项目,指为获得新知识而进行创造性的研究,然而这种研 究主要是针对某一具体的实际目标或目的。例如,液晶冠醚的研究,其目的是寻 求有用的液晶材料。重点或主要目标在于确定冠醚具有液晶性质的结构特点,故 属于应用研究。?试验发展项目,指利用从科学研究和或实际经验中所获得 的现有知识,生产材料、新产品、新装置、新流程和新方法,或对现有的材料、 产品、装嚣、流程、方法进行本质性的改进而进行的系统性工作。例如,玉米超 高产育种研究,利用现有的育种材料和已有的育种方法,选育出适合特殊地区的 超高产新组合品种,与原有的组合相比,具有实质性的改进,故属于试验发 展。 、按所属学科分类 根据科技项目研究工作所属学科领域分类,如基础学科类的数学、物理、化 学、天文、生物;工程学科类的机械工程、化学工程等。这种分类法多用于科技 项目管理中对的评审。 浙江理工大学硕士学位论文 ‘此外,从研究目标出发,科技项目可分为战略性研究项目、自由探索性科技 项目、社会公益性科技项目、条件建设项目和产业化项目等;从研究内容的重要 程度和经费需求的大小划分,可分为重大项目和一般面上科技项目,等等。 ..绩效及科技项目绩效 、绩效与绩效评价 从语义学的角度看,“绩效表示“成绩、成效”。“成绩”指“工作或学习 的收获,强调对工作或学习结果的主观评价。“成效指“功效或效果,强调 工作或学习所造成的客观后果及影响。“绩效则是对二者的综合,绩效如果单 纯从语言学的角度来说,它包含有成绩和效益的意思,现代管理学意义上的“绩 效,目前国内外学术界众说纷纭。 提出,绩效是员工自己控制的与组织目标相关的行为;绩效 是多维的,没有单一的绩效测量;绩效是行为,并不必然是行为的结果,这种行 为必须是员工能够控制的。 提出了任务绩效和关系绩效的概念。任务绩效是组织所规定的 行为,是与特定工作中核心的技术活动有关的所有行为;关系绩效则是白发的行 为,组织公民性、亲社会行为、组织奉献精神或与特定任务无关的绩效作为,它 不直接增加核心的技术活动,但都为核心的技术活动保持广泛的、组织的、社会 的和心理的环境。 根据韦氏词典,绩效指的是完成某种任务或达到某个目标,该任务和目标通 常是由功能性或者有效能的。绩效,从语言学的角度来说,其含义是成绩和效益。 在引入科学评价的范畴时,仅有词语方面的含义是不够的,其内涵应加以规定, 以反映它的本质属性。?绩效是客观存在的,是人们实践活动的结果;?绩效是 产生了实际作用的实践活动结果,有实际效果;?绩效是一定的主体作用于一定 的客体所表示出来的效用,有正负绩效之分;?绩效体现投入与产出的对比 关系; ?绩效有一定的可度量性。它是个量值,完全没有度量意义的东西,不是绩效。 综上所述,绩效的内涵可简要概括为:绩效是实践活动所产生的、与劳动耗 费有对比关系的、可以度量的、对人们有益的结果。 李岱素认为:绩效评价就是运用一定的技术方法,采用特定的指标 体系,依据统一的评价标准,按照一定的程序,通过定量、定性对比分析,对业 浙江理工大学硕上学位论文 绩和效益做出客观、标准的综合判断,真实反映现时状况,预测未来发展前景的 管理控制系统。 、科技项目绩效的内涵 科技项目绩效,就是指政府资助科技项目投入产出活动所取得的实际效果。 它反映了政府为满足科技项目需要而进行的资源配置活动与所取得的社会实际 效果之间的比较关系,重点研究政府配置资源的合理性和资源使用的有效性。 根据上面的讨论我们就可以对科技项目投入产出进行界定。科技项目投入一 般主要有:人力资源投入和资金投入;科技项目产出主要是指科技人员在科技活 动中取得的阶段性或最终的有学术价值或社会价值的研究结果,科技产出主要包 括基础研究产出、应用技术产出和软科学研究产出。 基础研究产出是指在基础研究和应用研究领域阐明自然现象、特征和规律, 在学术上提出创新性的新发现、新理论、新知的识、新方法,并对相关学科领域 的发展和新兴学科领域的形成产生重要影响的成果。基础研究产出通常以期刊、 论文、著作、会议论文等形式发表。 应用技术产出是指在应用研究、试验发展和技术开发过程中取得的新技术、 新产品、新工艺、新材料、新设计,并拥有自主知识产权的成果。应用技术产出 通常有论文、著作、专利、’标准、软件、样机、样品、产品等形式。 软科学研究产出是指针对国家科技、经济、社会发展、国家安全的宏观战略 性问题,或根据政府、企事业单位决策科学化、民主化和管理现代化的需要,开 展咨询、对策和方案性研究所取得的重要成果。软科学研究产出通常有:论文、 著作、研究报告、建议书、方案、数据库、软件等形式。 .科技项目评价 科技项目评价是伴随科学技术活动的产生而产生的。科技项目评价活动在科 学技术发展的不同历史时期具有不同的特征。在近代科学技术发展的初期,由科 学家个人兴趣和好奇心驱动的自由探索研究成为科学技术活动的主要形式, 科技 活动的文化属性比较突出,科学研究主要依靠社会资助和权贵的捐助,政府的投 入很少,科学技术评价主要限于科学共同体内部的学术评价和对科学家重大科学 发现的优先权的识别,评价的目的在于促进学术交流、建立科学规范、引导研究 方向。世纪以来,人类的科学技术活动空前繁荣,对推动经济和社会发展的浙江理工大学硕上学位论文 作用日益明显,科学技术在国家经济、社会和安全中的战略地位日益凸显。特别 是二战以后,发展科学技术成为国家战略和国家政策的重要方面,同时,科学技 术活动已成为大规模的、有组织的社会事业,科技活动的文化属性和生产力属性 并重。政府对科学技术活动的宏观干预和引导不断加强,对科学研究的投入不断 加大,科研经费的分配、研究方向的遴选、研究机构的调整等成为西方主要国家 科技政策的重要内容。而对这些相关政策和计划的组织实施及其影响进行预测、 分析与评估,是政府制定和改进决策的重要基础之一。科技项目评价不只是 限于 科学共同体内部的学术评价机制,还是政府制定科技政策、配置科技资源和实施 有效的科技管理的重要机制。 世纪年代以来,政府组织的科技项目评价工作在经济合作与发展组织 ? ,国家发展 迅速,其动因主要来自三个方面:?政府财政预算方面的压力;?政府在使用公 共资金时,需要向纳税人“交账’’,说明资金的使用效果;? 自世纪年代以来,越来越多的人开始怀疑科学的特权地位和技术治国的价 值。在科研经费保持稳定,甚至有时可能相对下降的情况下,面对科研队伍日益 庞大、科研领域不断拓展的形势,各国政府认识到,需要采用一些适当的议法和 工具,选择科学研究中的“优先事件”,制定更富有战略意义的科学技术政策, 使政府研究资源的配置更加体现出国家社会、经济发展需要优先考虑的需求。从 的经验来看,科学技术评价成为科技管理与决策有效的方法和工具之一, 广泛应用于科研经费的分配、科研活动的管理及科学技术政策的制定。科技评价 采用的方法不仅建立在深刻理解科学知识和实际应用之间相互联系的基础之上, 而且还考虑到评价过程中较为实用的评价策略和经验。效果良好的评价活动一般 都能“灵活”地运用多种评价工具,获得与政策相关的结论。 从本质特征看,科技项目评价是对科学技术活动及其产出和影响的价值进行 判断的认识活动。科技项目评价既是科学共同体运行的内在机制,也是科技项目 管理的工具,是对科技活动进行预测、规划、管理、监督的手段。 科技项目评价一般是指由科技评价机构或科学技术评价专家委员会专家 组根据委托方明确的目的和要求,按照规定的原则、程序和标准,运用科学、 可行的评价方法对科学技术活动及与科学技术活动相关的事项包括政策、计划、 浙江理丁大学硕士学位论文 项目、机构、人员、成果等进行的认证、评审、评议、评估、验收等活动。 科技项目评价应依据特定领域自身的特点和规律及特定需求予以开展,鉴于 不同领域、不同类型的科学技术活动,在研究目的、研究对象、研究手段、研究 结果及成果应用等方面存在较大差异,因此,对不同领域或不同类型的科学技术 活动采取同一的评价方法或标准化程序是不合适的。 另外,科技项目评价实践总是在一些相关科技进步领域的特定背景下不断发 展。随着各国政府对财政科技投入预算与绩效的关注,评价活动似乎仅仅是调控 财政科技投入预算的一种中性手段,然而这并不是评价的最终目的,评价的最终 目的应是使有限度资源投入到合理结构层次的科学研究中,并能保证研究的努力 方向指向最有收益的科技领域,这种受益不仅局限于科学技术本身,更应扩展到 经济、社会及国家安全等方面。 科技项目评价主要有以下几个特点: 、公正性。科技项目评价必须公正性和独立性。’公正性标志着评价及评价 者的信誉,辟免在发现问题、分析原因和做结论是避重就轻,做出不客观的评价。 独立性标志着评价的合法性。公正性和独立性应贯穿科技项目评价的全过程。 、可信性。科技项目的可信性取决于评价者的独立性和经验,取决于资料 的可靠性和评价方法的适用性。可信性的一个重要标志是应同时反映出项目的成 功经验与失败教训,这就是要求评价者具有广泛的阅历和丰富的经验。 、实用性。为了使科技项目评价对决策产生作用,评价结果必须具有可操 作性,就能满足多方面的要求,但也不要求评价面面具到,应突出重点。 、透明性。从可信度来看,要求评价的透明度越大越好,因为评价往往需 要引起公众的关注和科技投资决策活动及其效益实施更有效的社会监督。从科技 项目评价成果的扩散和反馈的效果来看,成果及其扩散的透明度也是越大越好, 能使更多的人借鉴过去的经验和教训。 、反馈特性。科技项目评价的结果往往需要反馈到决策部门,作为新项目 立项和评价的基础,以及调整投资规划和政策依据,这是评价的最终目标。因此, 评价结论的扩散和反馈机制、手段和方法成为评价成败的关键环节之一。 综上所述我们可以把科技项目评价定义为:科技项目评价是指科技项目归口 管理部门按照分开、公平和竞争的原则,择优遴选具有科技评价能力的评价机构, 浙江理工大学硕士学位论文 按照规范的程序和公允的标准对科技项目进行的专业化咨询和评判活动。 .研究对象 每个国家为了促进社会与经济的发展,都要将其国民生产总值的一部分投向 科技项目的研究。随着科技革命的不断深入,科技项目从研究到应用开发的周期 将大大缩短,这种科学、技术与经济发展日渐结合的趋势使得以知识创造与积累 为标志的科技项目研究成为推动社会经济进步的重要源动力。同时,也正是基于 科技项目研究的重要地位,使得对科技项目进行评价成为必然,因为只有对科技 项目从立项、执行直至验收的全过程进行科学、公正地评价,才能确保科技项目 系统产出的水平及价值,使其真正起到推动社会经济发展的目的。 ..项目周期 项目周期就是项目建设的过程,从项目执行主体的视点出发,一般可分为三 个阶段:?立项申请,即从递交项目申请书至项目开工这一阶段;?项目执行, 即从项目开工至项目完成这一阶段;?项目总结,即从项目完成至完成情况总结 这一阶段。 由于项目存在三个生命周期,相对应的我们就要对项目不同生命周期进行评 价,即存在:项目前评价,项目中评价和项目后评价。 、前评价 所谓项目前评价,就是对拟立项目的必要性、内容、条件以及技术的先进性、 经济的合理性和实施的可行性等诸多方面进行全面综合的审查和评价,为项目计 划的制定提供科学依据。项目前评价通常由投资决策部门组织实施或委托某一专 业评价机构来承担,它是实现投资决策民主化和科学化的重要手段。由于项目前 评价主要是针对项目建议书和可行性研究报告的内容进行的,所以项目建议书和 可行性研究报告的质量决定着项目前评价的质量和效果。其主要功能是:?认定 功能:即对被评价项目的立项成功与否状态进行权威性的判断和认定。其中包括 研究内容所处的国内外地位、目标及技术路线可行性与合理性、进度安排、经费 使用计划、组织与管理计划、合作单位的落实情况等。?选择功能:主要是筛选 出可以提供资助的项目,分别赋予不同的资助力度。?激励功能:前评价的选择 功能及优胜劣汰的竞争机制对项目申请者形成了一定压力,这种压力具有很强的浙工理工大学硕士学位论文 激励作用和促进作用。 、中评价 在项目研究过程中进行的评价,主要是指对项目研究过程中的研究目标、性 能指标、经费使用、计划、组织管理、环境条件等进彳于评价,力项冒计划的调整 提供科学依据。其主要功能是:?认定功能:即对被评价项目的状态进行权威性 的判断翻认定。其中状态包括内部状态和外部状态两方面,内部状态主要涉及进 度、质量、费用、组织与管理等,外部状态主要涉及目标、技术环境及承担 单位 的关心与扶持度等。?选择功能:主要包括筛选出那些不可能或没必要继续执行 下去的项目,以便及时采取调整措施;选择出那些意义重大或完成情况优异的课 题以增加支持强度;选择擞那些意义重大毽执行者阀题较大的课题以采取重薪选 择承担单位等措施。中评价的结果应能够按照管理工作的要求将被评项目分成若 干类型,以便决策者进行调控。?反馈功能:中评价是对被评项露执行情况及主 客观因索进行的客观评价,评价的过程和评价的结果对计划管理部门和项目承担 单位都肖重要的意义。管理部门通过中评价掌握整个计划的进展情况,分析项爱 立项的准确性和科研效率的高低,以及管理工作中的经验与问题;承担单位也可 以分析颚曩进度、质量、条件、环境及管理方面的情况以改进工作。?激励功能: 中评价既是对每个子专题的评价,也是对整个项目的~个比较;既是对环境与条 件的评价,也是执行者麓力与水平、工乍绩效以及管理水平的评价。中评价 的选 择功能和项目管理中优胜劣汰的竞争机制也对项嗣承担者及各级管理部门形成 了一定压力,这种压力具有根强的激励馋羯和促进作用。 、后评价 在顼重完成后进行评价,主要是指对邑经完成的项目的鹭的、执行过程、 效益、作用和影响所进行的系统的、客观的分析,并通过反馈达到提高项目管理 决策水平的叠的。其主要功能是:?认定功筢:既对被评价项基的成败状态进行 权威性的判断和认定。其中状态包括内部状态和外部状态两方面,内部状态主要 涉及进凌、质量、费用、组织与管理等,磐部状态主要涉及酱标、技术环境及承 担单位的关心与扶持度等。?反馈功能:通过分析评价找出项目成败的原因,总 结经验教训,并通过及时有效的信息反馈,为提高来来新顼鬻和管理决策水平提 出建议。?激励功能:项目管理中优胜劣汰的竞争机制也对项目承担者及各级管 浙江理工大学硕士学位论文 理部门形成了一定压力,这种压力具有很强的激励作用和促进作用。?监控 功能: 通过对项目活动实践的检查总结,确定项圈的耳标是否达到、项目是否合理有效、 项目的主要功能是否实现。 通过以上分析,我们认为,科技项嚣评价就是项目管理主体以确保知识生 产的要素得到优化配置为目标,采取相应的技术、方法手段,对项目的全周期进 行全方位监控及分析,届时在此过程中使自身的管理决策水平不断得到提高的过 程。项目周期与相应评价阶段如图.所示。 。。。.??划 。。。。??剧 。.固 图.项目周期与相应评价阶段示意图 ..研究视角 依据根据前面的论述我们可以知道,项罄评价可以分为静评价、中评价与后 评价。项目后评价又称事后评价,是指项目经过论证、立项、实施、验收后,经 过一段时闻,对已经完成的项冒的目的、执行过程、效益、作用和影响所进行的 系统的、客观的综合分析和研究总结的一种方法。如图.所示 立项 歼工 完成 实施效果评价 跟踪评价 项目终点 项目腐评价 项目寿命 如图。项善后评价示意巨 本研究构建政府资助科技项强绩效评价体系,是以项嚣后评价作为研究视浙江理大学硕上学位论文 危,对政府资助科技项目绩效进行重点研究。理由主要有: ?科技项目绩效评价不仅表现为直接的科研产出,更表现为宏观经济效益和 社会效益,基于科技项目后评价角度构建政府资助科技项目绩效评价指标体系, 有利于政府相关管理部门和决策者加强对科研项目的监督与审核,最大限度地促 使项目发挥其经济和社会效益。 ?任何科技活动都会有一定的科技产出、经济效益和社会效益,尤其是研究 与发展项目处于孕育科技成果的阶段,在项目完成时进行其经济效益、社会效益 的评价,不利于较精确测量项目的间接或潜在的产出,从而不利于全面客观反映 项目的绩效。 ?根据典型调研和调查问卷统计结果,对科技项目的经济效益和社会效益的 评价期限问题,政府相关部门、企事业单位和其它科研项目承担单位选择年进 行评估的人数比重为.%,选择年进行评估的人数比重为.%,选择 年进行评估的人数比重为.%,即选择?年进行项目经济效益和社会效益 评估的人数比重达到.%?。 ..评价对象的选择 浙江省科技厅、财政厅为进一步完善专利专项资金的 管理制度 档案管理制度下载食品安全管理制度下载三类维修管理制度下载财务管理制度免费下载安全设施管理制度下载 ,提高资金 使用效率,鼓励发明创造,促进自主创新,增强企业创造、管理、保护知识产权 的能力,并为确定以后年度科技经费的支出预算提供依据。特委托浙江省科技公 司对浙江省科技厅、财政厅资助的实验室建设项目、星火计划项目和自然基金项 目进行绩效评价,由于作者参与到了实验室建设项目绩效评价的工作中,并发现 了以下几个问题:?评价指标不够规范,具体表现为:指标间存在相关关系,间 接产出评价指标较少,基础建设类指标不够全面;?评价方法不够科学,即较多 信赖主观评价方法,客观评价方法较少;?过份信赖专家集体评价。 为了建立一套科学合理的科技项目评价指标体系,本文特选择政府资助重 点实验室建设项目作为本研究的评价对象。 ?张军果,任浩,谢福泉.项目后评价视角下的财政科技项目绩效评估体系研究.科学学与科学技术 管理,年第期。 浙江理丁大学硕士学位论文 .研究思路与论文框架 ..研究思路 怎样采用科学的方法建立有效可行的科技项目绩效评价指标是一个重要的 课题,对该问题进行研究的基本思路是:从研究国内外科技项目绩效评价发展概 况开始,以科技项目绩效评价理论为基石,借鉴国内科技项目绩效评价的理论研 究与实践成果,结合现代科技项目绩效评价方法并根据科技项目评价的现状,构 建了实验室建设项目绩效评价指标体系,并应用该指标体系对宁波大学专项资助 实验室建设进行实证研究,通过实践检验,发现该指标体系确实是合理、有效的。 此外,对该问题的研究坚持理论联系实际,从实践中来,.到实践中去的指导思想 与研究方法,贯彻科学性、客观性和实用性的基本原则。 ..论文框架 本文研究的框架主要遵循循序渐进的原则,前面的内容是为后面的内容打基 础、作铺垫而准备的,所以只有基础打好了,论文才可能具有研究的价值。首先, 本文在绪论部分简要阐述了研究的背景、意义及研究对象,介绍了与本研究相关 的一些基本概念、理论及本文的研究方法。第二部分重点介绍了国内外一些 科研 机构和学者在科技项目绩效评价方面所构建和使用的科技项目绩效评价指标体 系,并做了简要述评。第三部分主要是针对国内外使用较多的评价方法进行了综 合比较和评述,并最终确定选用法做为本研究的方法。第四部分,针对政府 资助的实验室建设项目构建了指标体系,并应用法确定各指标的权重。第五 部分,针对各指标的权重,结合浙江省专项资助实验室项目进行实证研究。第六 部分,根据第五章中的研究结果,结合浙江省专项资助实验室建设项目存在的问 题给出对策建议,最后得出本文的研究结论。浙江理工大学硕士学位论文 导 论 上 国内外相关研究综述 上 研究方法述评 上 评价指标体系的构建 科技项目评价指标体系的应用 结论与展望 图.研究的框架结构图 .研究方法 本文对政府资助科技项目绩效评价指标体系的研究,主要采用以下两种研究 方法: 、比较研究 本研究对科技项目绩效评价指标体系的相关问题进行了国别比较研究,例 如,科技项目绩效评价现状、科技项目绩效评价指标等。通过现状描述和异同点 的比较全面阐述了科技项目绩效评价的现有国际研究水平。 、实证研究 从文献梳理中形成科技项目绩效的评价维度与因子,构建了科技项目绩效评 价理论模型,通过问卷设计、数据分析确定了指标权重,实证研究的方法将贯穿 整个研究过程。同时,本研究花费大量的时间做好典型调研和问卷调查,整个研 究建立在可靠、坚实的工作基础上。 主要创新点 本文研究的对象是政府资助科技项目,研究目的是通过比较研究、实证研究、 构建政府资助科技项目绩效评价指标体系,以提高政府相关部门对科技项目管理 的效率、效益。本研究的主要创新点包括: 浙江理工大学硕士学位论文 、研究视角的创新?科技项目后评价 通过大量的文献阅读,发现目前关于科技项目后评价的研究并不是很多,而 且大都集中在研究方法的探索与创新上,如邵颖红、黄愉祥准实验方法与 随机实验方法的理论与实践的比较,孙红星多层次模糊综合评价法,黄德 春等模式识别、人工神经网络聚类理论都是对科技项目后评价方法的有益 探索。但科技项目后评价的系统研究相对较少,而且也不规范。另外,一般对于 政府资助科技项目评价的研究很多注重的是立项评价、验收评价,而对于中期评 价和事后评价涉及则比较少,因此本文以政府资助科技项目为研究对象,选择项 目后评价视角,运用比较研究、实证研究的方法构建政府资助科技项目绩效评价 指标体系。通过大量的资料搜集与整理,比较分析已有的科技项目绩效评价指标 与评价方法的利弊,结合实地调研的成果提出政府资助科技项目评价理论模型, 并从业务指标、基础建设指标和财务指标三个方面设置了政府资助实验室建设项 目后评价指标体系。通过问卷调查、‘数据分析对绩效评价指标进行筛选,修正理 论模型,最终得到一套科学、合理的政府资助实验室建设项目后评价指标体系。 、评价指标体系构建及权重方面的创新 通过对已有的关于科技项目绩效后评价指标体系及权重的分析发现,以往研 究大都只考虑了科技直接产出、经济效益产出和社会效益产出如张军果,任浩和 谢福泉,而对基础建设重视不够。针对这一现象,本研究在构建指标体系 时突出了基础建设指标的重要性。业务指标、基础建设指标和财务指标三大因子 的权重分别为:.,.和.。结果表明,财务指标仍然是科技项目 绩效评价的最重要的评价因子,但是业务指标、基础建设指标也要得到较高的重 视。 、研究对象上的创新 通过大量的文献阅读,我发现以往学者们的研究大多集中在科技项目整体的 研究上,而单独对某一项科技项目的评价很少,国内虽然也有一些这方面的文献, 但都不全面系统,针对这一现象本研究主要就浙江省专项资助的实验室建设项目 进行评价。浙江理工大学学位论文 国内外相关研究综述 .科技项目评价的历史发展 科技项目评价是伴随着科学技术活动的产生而产生的,但比较系统的科技项目评价是 从近代专业化的科学研究活动产生后开始的。从科技项目评价的主体看,科技项目评价大 致经历了两个阶段,即:科学共同体的伺行评议,政府和学术界开展的宏观科技项目评价。 ..科学共同体的同行评议 是科学共同体内部普遍采用的以科学价值和 科学共同体的同行评议 科学意义为主要评价导向的评价活动。在近代科学发展早期,科学研究以科学家个人的自 由探索活动为主,由科学家根据个人的学术兴趣自主选题。评价主要是在科学共同体内部 开展,主要体现为对科学发现和科学创造优先权的鉴别和承认。 同行评议最早始于世纪初叶威尼斯共和国对专利申请的审查。年,威尼斯共 和国在世界上首先实行专利制度,在对发明者提出的新发明、新技艺等进行审查,确定是 否授予发明人对其发明的垄断权时,政府邀请同一行业或最接近行业的有二定影响的从业 者帮助判断,采用的做法类似今天的同行评议方法。 科学共同体有组织的学术评价始于世纪中叶。年,英国皇家学会哲学会刊创 刊时,就是以同行评议作为参照系统,评审和选择可以公开发表的学术论文。年,该 学会正式建立了论文评议委员会,对投入的学术价值提出建议。 政府组织的科技政策评价始于世纪初美国国会研究服务部 ,针对各委员会和议员们提出的各类科学技术问题进行研究、分析 和评价。 政府资助的科技项目评价始于世纪年代。年,美国癌症咨询委员会把同行 评议引进到科研项目经费申请的评审工作中。世纪年代末美国海军总署也采用同 行评议方法评价资助大学的科研项目。年,美国国家科学基金会正式成立,基金会采 用了海军总署的做法,将同行评议作为评价申请项目和项目研究质量的一种正式的评价机 制确定下来,并不断改进同行评议,使其更加规范化、制度化。此后,以同行评议为主要 方式的科技评价在世界各国的科学研究资助管理中得到普遍应用,成为优化配置科研资源 的有效手段。 随着人们对科学的结构与基本功能的认识不断深入,同行评议的形式也在发生变化, 浙江理大学学位论文 出现了修正式的同行评议。所谓修正式的同行评议是指评议时除了要考察科学价值外,还 要考虑研究的潜在应用,这样,需要从事应用研究的科研人员、工程师、企业家或其他公 认的研究“用户”的参与。因此,评议时需要一个扩充的评价小组,需要两评议过程,其 一是考察科学卓越性,其二是考察应用价值。美国国家科学技术委员会 ,认为,当“对某个机构的基础科学计划和项目需要作回溯 性评价’’时,而且还要包括“掌握了该类型研究相关知识和经验的人。 ..政府和学术界开展的宏观科技项目评价 政府和学术界开展的宏观科学评价是指由政府组织的从宏观层面对政府支持的科学 研究活动的投入、产出、成果和影响等方面的评价活动,以及学术界基于科研产出的文献 计量指标所开展的科学计量监测与评价活动。 第二次世界大战以后,科研经费的分配、研究方向的遴选、科研机构的调整等,成为 西方主要国家科研组织管理和决策的重要内容,针对科研活动的投入、产出、成果和影响 等方面进行的评价活动,是改进科研管理与决策的重要途径。特别是自世纪年代起, 经济发展与合作组织开始尝试对其成员国政府的科研投入、产出、成果和影响力等方面进 行评价,不仅推动了科技评价活动的发展,而且使得评价方法的研究兴盛起来。 主要工业国家开展的宏观科技评价的历史可追溯到世纪年代,其评价指标主 要 来源于两个方面,即:?政府组织提供的科技活动的定量信息包括基础研究、应用研究 和试验发展方面的信息,其主要代表是世纪年代开始开展此项工作的和年 代开始开展此项工作的经济合作组织;?斯科穆科勒.和普赖斯 . 分别于世纪年代和年代在科学计量学领域所做出的开创性的研究, 为许多用户,如政策分析人员、决策者及政府官员等提供了有效的分析工具和数据。 一、政府组织科技项目评价活动的历史 政府组织科技项目评价活动的历史始于主要工业国家采用统计指标方式来监测作为 ~项国家事业的科学技术发展情况。 政府组织测度科研活动的方式是基于投入一产出一影响模型,即:对科研活动的投入 必定会有产出,这些产出最终将产生影响。这是个理想化的模型,它确定了科研活动的三 个基本要素,即投入、产出和影响。但是,世纪年代以前,官方统计的主要对象是 科技投入,即科研活动中的经费和人力资源,很少测度科研活动的产出和影响,其原因主 要在于:二战结束以后,尽管一些国家认识到科学研究对经济发展、国家安全和人类健康 浙江理工大学学位论文 的重要性,开始制定国家科学政策促进本国科学事业的发展,但是,这一时期的政策重点 并不是要控制科学家和科研活动,而是确保科学家拥有从事研究的经费资源,因此,它强 调对投入的测度,关注科学活动的主要领域及这些领域涉及的专业、学科和需要的研究经 费。 由于很少测度研究的产出和影响,因此,在“投入??产出??影响这个进程的 测度中,可用的指标越来越少,至今仍没有达成政府一致认可的产出测度指标。科学家、 管理专家对一些管理机构和科研组织提出的测度指标进行了批评,争论的焦点实质上与测 度方法学和技术上的困难有关。测度科学技术活动的权