美章网 资料文库 期刊论文评价方法及缺陷范文

期刊论文评价方法及缺陷范文

本站小编为你精心准备了期刊论文评价方法及缺陷参考范文,愿这些范文能点燃您思维的火花,激发您的写作灵感。欢迎深入阅读并收藏。

期刊论文评价方法及缺陷

针对论文质量的评价方法多种多样,多依赖于文献计量学指标或专家的定性评价。总体上,分析方式方面可大致分为定性与定量2种;同时也可按照前后的不同时间节点进行质量评估。

1.1刊前定性评价

对于科技论文质量的刊前评价方法,长期以来形成了以定性为主的同行评议模式。同行评议法制度始创于1752年的英国皇家学会资助的刊物PhilosophicalTransaction,并主要以单盲、双盲和公开评审3种形式存在。随着时间的推移,该法已广泛应用于对专利申请的审查,并具有易于操作、结论直观明确等优势[3]。但由于评价结果以文字表达为主,从而容易带来主观性强、缺少量化指标等缺点,同时也存在着过程历时长、工作量大等问题。近年来,有关评审意见公正性的争议愈演愈烈,评审过程中人为干扰因素的效应更容易通过同行定性为主的评议方法所放大。同时,评价结论模糊、不能做到对论文水平的准确定位,不利于将不同水平论文拉开档次[4]。

1.2刊后定量评价

对于后定量评价方法的研究一直是科研管理工作的热点。其中,基于单一被引指标及多项文献计量学指标综合的引文分析法均得到了较广泛的认同及使用[5]。尤其是后者通过对各印证指标采用线性加权求和的方法,建立综合评价的数学模型,可以更为客观和全面地反映出论文的学术价值与应用程度。有研究人员建议将引用频次、网页点击量、下载量以及引用率等文献利用数据共同引入对论文的评判中,从而形成论文本身利用价值更为客观的评估[6]。引文分析法的理论基础是文献被引用,即被引用是以其质量为基础。该方法虽然对科技期刊、论文、著者等各种分析对象的引用或被引用现象均可进行分析,但对于不同时间段发表的文献难以统一衡量,且未将引用质量的因素纳入考虑,因此也难免存在偏倚。虽然已有研究通过对论文-引文矩阵的推导,计算“历时影响因子”以消除对不同发表时间的论文引用报告中影响因子的偏倚[7]。但同时存在的包括学科间差异、引用质量等不同因素仍然影响着该方法对论文的评价质量。此外,h指数与Pagerank指数近年来也被认为是论文质量评价较为可靠的定量指标[8]。但该指标更适用于对个体研究人员绩效的评估。且进一步在对比两者适应范围时,Senanayake等[9]发现对于在大型组织从事研究而发表了影响力较低论文的人员使用h指数评价较好;而对于研究成果较少、针对交叉学科研究或就职于规模较小的研究团队人员评价使用Pagerank指数方法更为有效。利用Altmetric评价系统了解论文关注度的方法也逐渐受到关注,并已应用于pubmed数据库的相关文献检索功能中。该法侧重于单篇论文或相关研究者的社会影响分析,通过对论文在不同社会化媒体中引用次数的统计评价其影响力水平,具有高灵活性、高关注度以及高社会认同度等优点。但该法当前只对英文文献具有指示作用,且结论的得出易在关注度和争议性之间混淆。此外,不同专业研究以及原文献在网络中的转移也会对分析结果产生显著的影响。

1.3刊后定性评价

刊后的定性评价主要是按照论文载体的学术层次或间接通过文献计量学方法判断论文在引证关系图中的位置、被引次数的分布规律等方式定性判断论文质量。该法在操作上简单易行,已成为当前科研评价与管理的重要手段[10]。这其中一个重要的方法即是通过掌握论文载体期刊的影响因子(核心分区)或数据库收录情况,从而间接评价论文自身价值质量。但显然,通过纳入期刊影响因子等级区域以及相应的收录权重赋值,暴露了“以刊代文”评价方法所存在的固有问题[11]。而当前出版行业所热议的“优秀论文不问出处”即从一个方面反映出“以刊代文”评价方法的局限性与不合理性[12]。因此,客观上核心期刊对论文质量评价具有一定作用,但其间不存在绝对意义上的一一对应关系,通过核心期刊衡量论文质量具有局限性。