医学科研评估指标诌议

时间:2022-10-24 06:41:19

医学科研评估指标诌议

医学科研项目绩效评价指标研究的研究方法分析研究方法是研究者在解释事物内在规律和本质的过程中所应用的工具和手段,对研究者所用研究方法进行分析可以迅速了解某一问题的研究现状,并指导未来的研究方向。目前我国医学科研项目绩效评价指标研究所采用的研究方法及比重如图2所示。可以看到,目前对医学科研项目绩效评估指标的研究主要是实证类研究和综述类研究,两者合计占研究总量的83%,另外17%是概念研究、理论研究以及国外研究的介绍等。可以发现目前开展的医学科研项目绩效评价指标研究中,对于基础概念、理论以及国外的评价指标的研究相对较少。医学科研项目绩效评价指标研究的主题分析绩效,单纯从语义学的角度看,包括成绩和效果。“成绩”强调对行为或活动的客观测量,“效果”则关注这种行为或活动影响的主观评价。绩效则是对二者的综合,即产出和结果的统一。从普遍意义上而言,绩效评估就是对行为或活动的产出和结果进行经济、效率和有效性维度的测量,以判断其达到既定目标的程度。下面从微观视角出发,就已有研究的研究主题进行统计分析,有利于整体上把握我国医学科研项目绩效评估指标研究的重点及方向,厘清优势及不足,指导今后的研究。通过对23篇文献的认真研读,根据研究者研究内容的侧重点不同,基本上分为以下两类:一类是投入产出量化评价;一类是结果式评价。未考虑投入因素,其中包括量化打分评价,也包括定性与定量相结合的总结式的结果评价。基于绩效的概念,结合统计结果,可以看出,医学科研项目的绩效评价应该加强对项目结果的评价,尤其是临床应用类的医学科研项目,有很强的社会效益性,其科研成果对公众健康和医疗能力产生的效果和影响是衡量其项目绩效的一个重要标准。

根据上述指标在各文献中出现的频率,显示最常用的投入指标是人员投入和经费投入。这与评价数据的可获取性有很大关系,其中人员投入,主要包括高级职称、中级职称和初级职称的人数;经费投入,指项目实际支出经费数。该部分指标全是量化指标,因此在评估实践中一般是将各级指标数据值根据权重进行加权求值,或进行单因素方差分析,分析不同投入对于产出的影响。产出指标要素分析基于绩效的概念,产出是绩效的重要组成部分。表2是对23篇文献中的产出指标要素进行提取、归类统计的结果。通过统计发现,对于医学科研项目的产出评价,不少文献中直接采用了一般科技项目产出评价的指标,如论文、专著等。但是实际上医学科研项目的产出,不同于一般科技项目的产出,而且研究类型不同,产出也有着明显的差别。

如基础性医学科研项目的产出主要是论文、专著等,而应用性医学科研项目的产出除论文、专著,还将包括专利、获奖、技术规范标准、新的诊疗技术方法、一些适宜技术等等。但是在该23篇文献中,都没有对医学科研项目的类型进行具体的说明区分。产出部分的指标,都是属于可量化的指标,因此文献中的产出数据的处理一般也都是进行加权求和。结果指标要素分析在指标要素梳理提取中发现,有一部分指标不属于投入,也不属于直接产出,而是面向结果的评价指标,如项目管理能力、项目实现预期目标的情况、成果推广情况、科研成果成为政策依据、促进学科发展、改善生命质量等的评价,也就是研究活动或研究成果产生的效果和影响,在相关文献中并没有对这些指标进行明确划分,而是将其散落在产出中,或统称为项目评价,本文将其归为绩效概念中的结果,也就是医学科研项目的科研活动及科研成果所产生的效果和影响。通过聚类分析,将其分为以下四个维度:组织管理评价、项目完成情况评价、社会效益评价、经济效益评价。医学领域的科技研发与公众健康直接相关,因而其在医疗水平和市民健康方面产生的效果和影响在绩效评价中占重要位置。但是由于效果和影响的发挥相对于产出而言,具有时间滞后性,因此该部分评价是重点,也是难点。因此,目前多数文献中避开了对结果的评价。其中只有一篇文献“后评估体系在国际防盲合作项目中建立的探讨”,采取了定量和定性相结合的方式,并按照国内外科技评估的趋势,淡化评估指标、突出评估议题,从“项目适当性评估、项目的效果与效率评估、项目技术的后评估、项目财务的后评估、项目的社会影响评估、项目的经验与存在的问题”6个方面,用举证的评估策略形成评估结论。

针对其中存在的问题提出了相应的建议:4研究成果整体数量较少,有待继续深入研究从医学科研项目绩效评价文献数量来看,针对评价指标的研究成果整体数量较少,从1998年以来,医学科研项目绩效评价指标领域的期刊论文年均不到2篇,其中最高5篇,有三年甚至没有相关文献发表。这说明医学科研项目的绩效评估工作有待继续推行,相关研究工作有待继续深入。研究方法相对局限,应开展广泛的调查从文献的统计结果来看,目前的研究方法以实证和综述为主,但是多数文献的实证研究,是对一般科研项目的绩效评价指标进行综述后,利用医学科研项目数据进行实证说明,这未能从医学科研项目本身的特征出发。因此,建议应在深入分析绩效评价理论的基础上,借鉴一般科技项目绩效评价指标,结合医学科研项目自身的特征,进行医学科研项目绩效评价指标体系的开发,因为国外绩效评价工作开展较早,在医学领域也进行了一系列的评价实践,因此,建议加强国外医学领域评估方法与内容的引进,而且有必要对医学科研项目进行广泛的实证调查,统计分析,从而构建出符合医学科研项目特征的绩效评价指标体系。

研究内容单一,以投入-产出效率评价为主从研究主题的统计结果来看,虽然产出、结果评价指标均有所涉及,但是整体以投入-产出效率评价为主,效率评价可以看作是绩效评价中极其重要的一部分,但不是绩效评价的全部,从医学科研项目绩效评价的角度来讲:1)未进行分类评价。按照最常见的科研类型划分,医学科研项目可以分为基础研究类、应用研究类和发展研究类,不同的研究类型,对应着不同的研究成果,因此绩效评价的重点也应该有所不同。但是在23篇文献中,未体现分类评价的思想,建议后续研究应该对医学科研项目的类型进行具体的说明区分。2)过分强调量化指标。23篇文献中,只有1篇文献采取了定性和定量相结合的评价指标,其余文献都选取了定量评价指标。定量化评价方式,虽然具有简化评价指标体系、提高效率、可计量可比较等优点,但是同时具有很大弊端,一方面与医学科研项目的实际绩效不能完全相符,另一方面过分强调定量化评价将激励短期行为,引发学术泡沫。因此,建议后续研究中绩效评价应该采取定性与定量相结合的评价方式,做到真正的理性评价。3)未关注社会效益。医学研究的最终目的是提高疾病防控能力,降低医疗负担,增强人们的健康水平,因此,社会效益是衡量医学科研绩效的最终标准。但是从目前的23篇文献来看,均未将社会效益作为重要部分进行设计。因此,建议后续研究应该加强该方面的研究,如社会效益时间滞后性的处理方式、数据如何获取等,并且应该多借鉴国外的评估实践,从而更好的做好评价工作。#p#分页标题#e#

作者:王艳芳 白波 单位:北京城市系统工程研究中心

上一篇:校园中医教育的不足及思考 下一篇:医学硕士对导医指导情况调查述评