近日,首届人文社会科学评价暨第五届科研绩效评价学术研讨会在南京大学召开。此次会议由南京大学中国人文社会科学评价国家创新基地主办,南京大学信息管理系承办,南京大学中国社会科学研究评价中心及中国人民大学人文社会科学发展研究中心、武汉大学中国科学评价中心、中国科学学与科技政策研究会、中国科技信息研究
会议围绕人文社会科学评价的理论与方法、人文社会科学创新力评价、同行评价与引文评价、期刊评价与论文、著作质量评价与绩效评价、人文社会科学评价标准、评价指标体系和评价体系等国际性难点、热点问题进行深入探讨和广泛交流。此次会议是人文社科和自然科学两大领域的评价专家和学者的首次聚会,也是学术链中的学者、编者、文摘、索引编制者、图书情报管理者、科研管理者首次针对学术评价的主题进行交流。通过研讨,与会者对以下问题达成了一定共识。
学术评价是需要和可行的
与会者认为,不论是自然科学,还是社会科学,或是人文学科,不管承认与否,评价都是客观存在的,在研究的各个环节,诸如试验、阅读、写作、引用、阐释、论证等过程中都包含着“评价”。不是要不要评价的问题,而是由谁评价,有何评价目的,以什么标准评价,评价的条件是否已具备的问题。在解决了评价是需要和可行的这个大前提后,我们就可以不再争论人文学科是否能评价的问题,而是集中精力来解决怎样评价等实质性问题。
同行评价与引文评价是可以互补且可以相互制约的
与会者认为,尽管在评价制度不完善、“同行”自律不严等情况下,同行评价也会引发一些“流弊”,但从总体看,同行评价仍不失为学术评价的最主要的方法,尤其是对研究的质量进行高端、精细的评价时更是如此。因为只有具有专门的知识,才能评价本专业研究的得失。学术造诣越高,越能看清研究的高下。为了使同行如实表达出来,就需要设计好评价制度,包括评价的公开性、透明性和可检验性。而引文评价,并不是如通常所认为的只是定量评价法、间接评价法,或是“客观”的,是与同行评价对立的方法,它首先是一种同行评价,是作者的“主观”判断。引文是能够读懂被引文献的本领域同行或相关领域同行对其研究是否“有用”或“有帮助”的判断。引文数据既是定性的,又是定量的,准确地说,它先是定性的,尔后才是定量的。引文评价是没有经过事先聘请的许多大众同行的评价,是任何人所不能控制的,正是由于这个特点,引文评价可以与事先聘请的精英同行专家的精细评价相互印证、相互制约和校正。但也应清醒看到,引文是科学对话的一种方法,是作者认为对自己的研究“有用”的资料,并不是专门对研究质量的评价,有的引文可以测量学术质量,有的则不行。因此在进行学术评价时,要根据各学科不同的引文行为来具体对待,要区分正面引用、负面引用和引文深度。要根据不同的评价对象和目的,适当利用引文数据,夸大或缩小其评价功能都不可取。在没有更好的评价方法出来之前,引文评价法是最不坏的方法。
期刊评价不等于论文评价
期刊评价的主体应该是学者、读者、期刊编者、图书情报专家和科研管理专家。期刊评价主要是指期刊的质量评价。目前利用引文数据(引文次数、影响因子、H指数等)、被摘、被转载、被下载率等对期刊的评价,仅是从几个方面对期刊影响力的评价。尽管影响力与“质量”、“价值”有很强的正相关性,但它并不是期刊“质量”的直接评价。期刊质量评价是指对期刊的整体品质、内容与形式优劣的判断,需要学者、读者、期刊编者、图书情报人员、科研管理者等共同参与。在参考引文等各种数据后,要对期刊进行直接的审读和评价。这是一项颇费时费力的工作,必须下功夫认真组织进行,切忌急功近利,仓促评价。但不论有多大困难,目前也要积极准备条件开展这项工作。要对不同类型期刊的质量制定评价标准和指标,首先要确定一组期刊是否具有可比性,尔后再选好评价者和合适的评价方法,要给评价者充足的评价时间和评价条件。在真正的期刊质量评价完成之前,不要用其他较为粗略的期刊评价来替代期刊精细的评价。即使期刊质量评价完成后,期刊评价也不能代替该刊所刊载论文的评价,已正式发表过的论文是否有“高质量”,还必须由同行对论文的内容和实质性贡献及与相关论文相比较后才能得出结论,绝不能用其他简略的评价完全替代精细的评价,更不能将简略的评价结果与职称评价、奖金、学术资源的分配等直接挂钩。
学术质量的评价主要是指对评价对象的实质内容进行精细的评价,其核心是对“创新能力”的评价
学术质量的评价最终依赖于时间和实践/社会的评价和检验。在有限时间和实践中所得出的评价结果具有相对性,绝不能将其绝对化,但也不能因其相对性而否认其合理性和必要性。目前关于创新力的评价指标大多为“定性”,主要通过同行专家的审读来直接测度。比如对文科论文的“创新能力”的评价,目前主要是通过同行专家对选题、综述、研究方法、观点(思想)、资料、论证、结论等方面有无、有多少“新意”来判断。目前较好的“引文索引数据库”、“文摘数据库”只能够具有部分的“查新”功能,远不能代替同行专家的直接判断。与会者认为,如何将同行专家的共识评价集中起来建立数据库(将定性评价转变为定量评价),如何共享不同阶段同行专家评价的成果,如何利用现代信息技术和网络技术增加评价的公开性、透明性,如何优化现存的“引文索引数据库”以提高同行专家评价的准确性和评价效率,是当前评价研究的关键课题。
评价研究的共识成果应立即转变成有关政策和措施,改进现行的学术评价办法,朝着健全良好的学术秩序和宽松的学术环境的正确方向迈出坚实的一步
与会者认为,学术评价的根本目的是要建立健全良好的学术秩序和营造宽松的学术环境,以利于多出精品,多出人才,繁荣发展学术研究。经过认真的研讨形成的共识成果应能致用。例如,目前可以采取的措施就有:为了有力地遏制目前以数量评价代替质量评价的不良倾向,要淡化成果数量的要求,以利于形成宽松、从容、可以让学者心无旁骛的学术环境,为出精品提供充足的阅读、思考、交流、写作、评价(评价也算工作量,改变目前学者只顾自己写,不管或不愿评价他人成果的倾向)的时间和空间,先鼓励“少而精”,尔后再鼓励“好而多”;为了彻底遏制以行政权力干涉学术权力、以人情关系影响评价活动等问题,除了采取从制度层面厘清行政与学术权力的界限外,还可以根据不同的评价对象和评价目的,将精审同行专家的评价与广大同行的评价、社会评价等结合起来;取消“以刊评文”等只重形式不重研究成果质量就直接与奖金、资源密切挂钩的规定。
 |
