美章网 资料文库 企业科技项目后评价指标体系研究范文

企业科技项目后评价指标体系研究范文

本站小编为你精心准备了企业科技项目后评价指标体系研究参考范文,愿这些范文能点燃您思维的火花,激发您的写作灵感。欢迎深入阅读并收藏。

企业科技项目后评价指标体系研究

摘要:文章从企业科技项目特点着手,通过文献研究、德尔菲法相结合构建了一套包含一级指标3项、二级指标10项的企业科技项目后评估指标体系,并研究了指标体系的标度设计及指标权重的确定。文章以验收完成1-3年内的丽水市企业科技项目为例,探讨了该评价指标体系的具体应用情况,以期为科技管理部门后续对企业项目立项、验收等管理提供一定的决策依据。

关键词:企业科技项目;后评价;指标体系;德尔菲法;层次分析法

随着党的十八大明确提出要坚持走中国特色自主创新道路、实施创新驱动发展战略以来,科技创新逐渐摆在国家发展的核心位置,而企业作为自主创新的主体,企业科技项目的重要性不言而喻。2018年,全国企业研发经费支出15233.7亿元,比上年增长11.5%,占全社会研发经费支出的比重高达77.4%。科研经费投入力度不断加大,对企业研发项目的补助也在逐年增加。企业科技项目绩效评价作为科技项目管理的重要环节,不仅有助于提高财政资金使用效益,更可以为科技管理部门对于后续支持立项、拨款等决策提供一定的参考依据。

1国内外科技项目绩效评估发展现状分析

关于科技项目绩效评价指标体系的构建,国内外学者主要是从整体上研究财政支出绩效评价指标体系,并提出针对不同对象建立绩效评价指标体系及评价方法。肖利认为科技项目的产生是以科技活动为基础,同样具有多样性,因此要评价科技项目,必须采取先分类再评价的方法,分类原则遵循同类型可比、不同阶段分类及价值导向分类[1]。张军果等基于科技项目后评价视角分别给出了基础研究、应用研究、试验发展和研发成果转化四类项目的绩效评估体系[2]。张小菁将地方科技计划项目划分为技术开发类和科技支撑类,并从效益和管理两个方面构建了绩效评价指标体系和评价模型[3]。田时中等提出从财政资金资助的项目使用单位进行分类,构建财政支持企业项目和财政支持事业单位项目绩效评价指标体系。关于科技项目后评价,国内外学者研究方向主要是评价科技项目绩效,并根据绩效评价结果对各个项目进行横向对比。陈国伟综合利用同行评议法、层次分析法、对比法等后评估方法建立了一套包含技术价值、综合效益、人才培养、科技管理四个一级指标和若干二级指标、三级指标的后评估指标体系。曾立波等结合研发目的与成果特点,将管道科技项目分为基础与超前类、安全保障类、一般应用类、产品类、经济信息与标准类5类,采用层次分析法,结合专家评分与技术成熟度,建立后评价指标体系。

2企业科技项目后评价指标体系构建

2.1指标体系构建原则

(1)系统性原则。评价指标应能从系统的角度,综合地反映科技项目绩效的整体情况,既要能反映直接效果,又要能反映间接效果,以保证综合评价的全面性。评价指标应构成有一定联系的若干层次,保证整个指标体系具有较强的系统性。(2)科学性原则。评价指标体系应该能客观真实地反映出科技项目所带来的各方面影响程度和评价的目标,不能凭空设计。(3)导向性原则。科技计划项目绩效评价指标系统要贯彻国家、省、市有关政策,在财政资金方面应发挥宏观调控的导向性作用。(4)定性定量相结合原则。在实际运用中,定性指标和定量指标都不是完美的,基本都需要将定性指标和定量指标结合起来用。一般来说,都是先用定性指标大致判断对象的总体情况,然后再根据定量指标对定性评价的方法进行验证,从而得到较为客观准确的评价结果。(5)可操作性原则。科技项目管理是一项较为日常且频繁开展的科技管理活动,科技项目绩效评价又是科技管理的重要内容之一。为了保证科技项目绩效评价指标体系的实用性及适用性,评价指标体系既要做到简繁适中,计算方法简便易行,也要保证所需的数据易于采集,数据获得成本不高等,方便日常长期开展。

2.2构造指标体系

在筛选评级指标时,既要注意指标的可行性,还要分析各个指标之间的关系,注重指标的代表性。指标体系的构造过程可分为评价指标的初选和指标体系的完善两个阶段。指标体系的初选主要是文献查阅法,通过查阅文献资料了解各地的科技计划项目后评价指标体系,遵照指标体系构建的几大原则,主观初步确定指标体系。指标体系的完善主要是针对初选指标可能存在一定的主观偏颇,在初选指标的基础上通过一定的方法进一步完善指标体系,保证其科学性。本文采用德尔菲法对初步拟定的指标体系进行匿名评议。

2.3指标权重的确定

对于科技项目绩效评价的方法,目前较有代表性的方法有层次分析法、德尔菲法、主成分分析法、模糊综合评价法等,其中影响最大、应用最多的是层次分析法。层次分析法是一种定性和定量相结合、具备系统化和层次化的分析方法。它适用于难以用定量指标进行分析的复杂问题,并且具有可靠度较高、误差较小的优点,是一种行之有效的确定指标权重系数的方法。但是层次分析法受主观因素影响较大,并且评价工作量和评价准确性较易受评价对象数量影响。为了使指标权重更加科学合理,本文在构建评估指标体系的基础上,采用层次分析法(AHP)和德尔菲法进行评价指标权重的计算。先由专家对指标体系中各个指标的重要性进行排序,再行利用层次分析法(AHP),形成判断矩阵,计算各层指标的权重集,并进行一致性检验CI<0.1,确定指标权重。

2.4指标评分标准的确定

评价指标评分标准作为评判依据,应确保客观性、公正性和易操作性。本文的评分标准以几年来申报重点研发项目的企业或地区平均水平为基准,参考浙江省丽水市地方标准《科技项目绩效评价规范》对各指标的指标区间进行标度。企业科技项目注重的是新产品、新技术、新工艺的开发研究,通过德尔菲法,最终将企业科技项目后评价指标体系分为以下三个部分。一是项目成果,主要包括论文或专著、知识产权、项目获奖情况。二是项目综合效益,主要包括已获直接经济效益、成果转化应用效果、人才培养、社会效益、带动后续资金投入。三是技术价值,主要包含技术水平、技术推广情况。

3企业科技项目后评估实证研究

本文选取了5个丽水市科技局验收后1-3年的企业重点研发计划项目进行绩效后评价试评价。通过设计问卷调查表以及查阅项目验收材料相结合的方式可以更为真实客观地获得企业的指标完成情况。被研究的5个项目中,有1个项目研发的新产品已停产,新技术已闲置,其余4个项目的产品均处于推广或批量生产阶段,技术处于使用阶段,说明其余4个项目的成果均处于应用阶段。通过对5个项目各个指标的完成情况进行打分,可以得出5个项目的综合评价得分分别为4.56、4.84、1.33、6.23、5.62,按照等级划分,有2个项目评级为“良好”,2个项目评级为“合格”,1个项目评级为“不合格”。

4启示与建议

本文的特色之处在于:一是所构建的科技计划项目绩效评价指标体系借鉴了包括国家自然科学基金、国家社科基金绩效评价、丽水市地方标准科技项目绩效评价规范等众多国内相关研究成果,能够较为系统全面地反映科技计划项目取得的绩效情况。二是常规的项目后评价体系基本都是过程评价与结果评价相结合,导致项目后评价指标体系类似撒胡椒面,没有侧重点。考虑到在项目验收后1-3年的指标体系里再次评价项目过程相关指标意义不大,本文的项目后评价着重考察项目绩效成果。三是在评定方法上,为了克服主观偏见,将层次分析法和德尔菲法相结合用于确定评价指标权重,并运用综合指数法进行综合评价。通过软科学项目“丽水市企业科技项目后评价指标体系构建及应用研究”的实证研究表明,本文提出的企业科技项目后评价指标体系较为科学、合理、客观,能够真实反应企业科技项目实施的效果和效益,为科技管理部门后续对企业项目立项、验收等管理提供一定的决策依据。

参考文献:

[1]肖利.试论国家科技项目的分类评价、目标评价和程序规范[J].科学学与科学技术管理,2004,25(3):12-15.

[2]张军果,任浩,谢福泉.项目后评价视角下的财政科技项日绩效评估体系研究[J].科学学与科学技术管理,2007(02):14-20.

[3]张小菁.地方科技计划项目绩效评价研究[J].科技管理研究,2010(21):201-204.

作者:章莉 孟月志 单位:丽水市科技发展研究中心 丽水市科技创新服务中心