时代金融
国内科研项目评估研究态势分析
——基于文献计量学视角
摘要:科研项目评估即以科研项目的目标要求为核心,就项目的经费、方法、进度、成果等
要求评定其优劣的工作,是通过各类指标组合而成的体系评估研究的过程。本文通过分析1992-
2020年国内科研项目评估相关研究论文,得知当前我国科研项目评估研究呈以下态势:一是国内
科研项目评估领域发文量尽管存在一定波动,但整体发文量保持平稳增长趋势;二是该领域研究
热点包括国家基金项目、科研项目绩效评估、杰出青年科学基金、面上项目、项目评审、同行评
议六个方面;三是国内学者间合作交流存在一定欠缺。针对以上情况,我国科研项目评估科研工
作应在整体上加强合作,在科研评价过程中加速指标体系多元化进程,利用交叉融合方法作为科
研项目评估工作的补充,最后构建评估内容回馈制度,完善整体评估流程。
关键词:科研项目 项目评估 研究态势分析 文献计量学
● 马瑞
一、引言
科研项目评估是指按照一定要求,通过合理有效的方式
对项目的不同层面进行绩效评价的过程。如今科研项目立
项申报难,项目实施过程中缺乏有效且规范的评价方法与
手段,存在很多评估方法滥用的现象,项目结项后缺乏跟
踪评估方法,难以获取完整的项目评估内容。对科研项目
的评估研究有助于在项目立项前中后期对项目实施情况进
行科学监督,帮助科研管理者及时了解项目进展,并在必
要时进行干预以保证科研项目顺利完成,同时保障各类评
价手段在科研项目评估中的科学有效应用。科学有效的开
展评估活动是科研委员会决策科学化、管理评估规范化的
重要保障。科研项目评估按前、中、后期可分为立项、阶段、
绩效评估,因此对这3个阶段所包含内容的评价均包含
[1]
项目在社会各界的高度重视下,投入的资金不断增长。
[5]
科研体制机制改革特别是90年代至今,科研项目评价已经
被逐步关注。第四次工业革命到来之际,中国提出了“中
国制造2025”的理念,这对中国的科研工作提出了更高的
要求。科研评估在科学研究活动与人才教育培养中起着关
键作用。我国采用的评价方法同国外相似,定性分析基于
同行评审,定量分析基于计量学方法,在指标体系、规范性、
科学性等方面与国外还具有一定差距,这与我国科研评估
工作发展尚处于完善阶段有关。
[6]
文献计量学是指通过数学、统计学等方法,从定量的角
度分析研究对象的方法。以学术期刊论文作为研究对象可
对论文所属领域研究现状分析及发展态势研究提供真实有
效的参考。由此,本文基于文献计量学视角,对国内科研
项目评估研究现状加以分析,明确当前研究进展及存在的
问题,为我国科研项目评估、审核提出建设性意见。
于科研项目评估之中。
从国际的角度,美国是科研评估活动规范化最早的国
家之一。1914年,美国成立国会研究部CRS,于1975年
颁布《项目评价标准》。美国的项目评估机构主要包括国会、
非官方机构和大学本身。美国高校科研评价主要采用专家
评审、计量学等方法。主要方法是以定量指标为基础的,
研究各种科研成果的对应数据,分析定量数据对科研的影
响。随着科研活动呈现学科多维渗透、知识体系内涵
[2]
与外延的架构日趋集成化,高校评价体系的建立和完善首
当其冲。
[3]
我国科研项目评估工作起步晚,随着科学技术的持续发
展,科技创新逐渐成为经济社会发展的主要动力。科研
(二)研究方法
本文主要采用定量分析方法,首先利用中国知网内置计各个学科领域分析研究的热点。发文量大于等于10篇的期
量可视化分析系统对国内科研项目评估相关期刊论文发文刊共14种,其中中国科学基金发文256篇,占比17.95%,
趋势加以分析说明,在此基础上,通过切分知网Refworks隶属于第一发文阶梯。中国科学基金是由中华人民共和国
格式文本文档,获取所选文献发表期刊、机构,分析相关国家自然科学基金委员会主管、主办的学术期刊,自然科
论文发表期刊情况及机构相关文献产出能力。最后将文本学基金是我国科研项目的重要组成部分,期刊内发文多与
文档导入Endnote文献管理软件整理后,利用Vosviewer软科研基金项目相关。科学管理研究、地球科学进展、中国
件绘制关键词共现图谱、作者共现图谱,利用Ucinet绘制高校科技、科研管理、科技进步与对策、中国科技论坛隶
单位共现图谱,分析当前我国科研项目评估研究热点及合属于第二发文阶梯,发文量均高于2%。第二发文阶梯期刊
作情况,从面到点了解国内科研项目评估研究进展,结合与科研、科技发展相关性较高,为科研项目发展提供重要
当前研究现状以提出相关建议。支持作用。剩余7种期刊隶属于第三发文阶梯,其中涉及
三、 结果分析
(一)整体发展趋势分析
1.国内发文趋势。由检索结果可知,我国科研项目评
估于1992-2020年间共发表了1426篇论文,其年度发文
趋势如图1所示。早在20世纪90年代,中国科学院南
京土壤研究所的谭清美教授便将科研项目评估分为先、后
两部分,并给出相关评估指标及评价模型作为成果鉴定、
验收依据,开创科研项目评估研究先例。但由于科研
[7]
水平、经费限制,我国科研项目发展在1992-2001年期
间速度缓慢,随着2001年中国加入世界贸易组织,经济
迅速发展,与世界逐步接轨,科研条件也随之得到迅速发
展,2002-2015年期间,国内科研项目评估发文量尽管存
在一定波动,但整体上呈现逐年上升趋势,并于2015年
达到发文顶峰127篇,相比于2002年发文量13篇,增
长近10倍。一方面表现出国内学者对科研项目评估关注
度显著提升,另一方面说明我国科研项目发展态势良好,
但在发展过程中项目评估方法尚需完善,由此引发学者对
科研项目评估的讨论。2016年发文量尽管存在一定波动,
伴随着十三五规划的实施,中国创新驱动战略重点继续
推动我国科研项目及科研项目评估领域的发展。在2017-
2019年发文量呈现递减趋势,但总体保持平均水平,发
文量趋于稳定,2020年伊始,受到当前国内新型冠状病
毒攻坚战影响,截止论文数据检索日期国内发文量相对
往年较少。
图1 1992-2020年国内科研项目评估发文趋势图
2.国内期刊发文现状。经知网数据切分,利用Excel统
计得出,国内科研项目评估相关的1426篇文献发表于国内
426种期刊,由此可见科研项目评估学科分布较为广泛,是
会计、财经、高等教育等研究领域期刊,由此可见科研项
目评估在不同领域均有所关注。其他期刊属于第四发文阶
梯,由于检索条件限制期刊均为核心及以上期刊,因此对
于相关学科领域科研项目评估的文献多发表于各自所属学
科高等级期刊中也在意料之中。
3.国内机构发文现状。经知网数据统计,1426篇文献
共计作者1635名,将作者对应的1635个单位(某基金委
员会学部、某大学某学院)作为国内科研项目评估机构发
文现状的分析依据。其中发文量大于5篇的单位共27个,
其中国家自然科学基金委员会分部共13个、大学单位8个、
研究所6所。国家自然科学基金委员会是我国科研项目评估
相关文献发表的主力军,国家自然科学基金委员会成立于
1986年,以创新环境建设为重点,以机制和体制创新为保障,
不断提高国家自主创新能力,为我国科研项目评估的完善作
出巨大贡献。经统计,发文量大于5篇的大学包括西安交通
大学(32篇)、合肥工业大学(12篇)、中国科学院大学(13篇)、
北京理工大学(8篇)、华南理工大学(5篇)、南京大学(5
篇),剩余7个机构均为研究所或政策制定机构,由此可见
在科研项目评估工作中,高等院校与研究所均对该领域有所
研究,其中西安交通大学研究相对深入,学科涉及公共政策、
管理等,代表人物为马亮教授,于2009-2012年期间以第一
作者、通讯作者等身份发表10篇相关论文,主要针对科研
活动绩效评估提出方法及建议。近年来,随着国家对于
[8]
科研项目资助力度的显著提升,国家自科、社科基金项目、
杰青、优青资助项目申请成为国内学者的主要科研目标,科
研项目评估工作也伴随着这股浪潮不断发展与完善,引发国
内众多科研机构热议。
(二)研究热点分析
图2 国内科研项目评估关键词共现图
时代金融
81
时代金融
经EndNote软件整理,将知网数据以RIS文本文档格式朱卫东教授、白坤朝教授所处的学术团体之中。由图4可知,
导出,通过VOSviewer绘制关键词共现图谱用于分析当前我我国科研项目评估领域,学者学术传承效果明显,并且在
国科研项目评估工作研究热点。采用全计数方式选取文献学术传承过程中,呈现一定聚合趋势,学者之间联系逐渐
中高频关键词(出现频次大于10次),共获取关键词91个,紧密。在发文量方面年轻学者发文量尚且少于资深学者,
绘制结果如图2所示。科研项目评估领域当前正处于过渡阶段。
由图2可得,我国科研项目评估当前研究方向主要包括
以下六个部分:一是国家科学基金方面的研究,包括国家
自然科学基金、国家社会科学基金等;二是科研项目绩效
评估方面的研究,涵盖科研评估及科研经费、管理模式等;
三是国家杰出青年科学基金方面的研究,科技强国背景之
下,国家之间国力的竞争实际上也是人才的竞争,因此杰
青作为我国科研发展的主力军也成为我国科研项目评估研
究热点之一;四是面上项目方面的研究,面上项目也叫一
般项目,是国家自然科学基金研究项目系列中的主要部分,
作为自科基金的分支,面上项目同样广受学者关注,主要
涉及资助强度、资助经费等方面;五是项目评审方面,主
要包括基金评审、资助成果等内容;六是同行评议方面的
研究,同行评议是当前最主流的科研项目评估手段,在定
性研究与定量研究相结合的过程中同行评议方法不可或缺,
因此国内学者对于同行评议中的会议评审、专家库等方面
讨论较多。
(三)作者合作网络分析
通过VOSviewer绘制作者共现图谱,采用全计数方式选
取发文量大于3篇的作者,共获取作者158名,作者合作
网络绘制结果如图3所示,作者发文年限图如图4。
图3 国内科研项目评估作者合作网络图
图4 国内科研项目评估作者发文年限图
由图3可知,在我国科研项目评估方面的研究中,学者
在本领域内相互之间缺乏紧密合作,科研活动多局限于某
一圈子内。如以黎明教授、王国彪教授为代表的学者,同
其他学者之间的联系存在一定欠缺,相同的情况也出现在
82
时代金融
四、结论及建议
本文通过中国知网获取相关文献资料,通过文献计量
学视角对我国科研项目评估从不同角度加以分析,总结得
出以下发展态势:国内科研项目评估领域发文量尽管存在
一定波动,但整体发文量保持平稳增长趋势。国内科研项
目评估领域期刊发文中,中国科学基金(17.95%)、科
研管理研究(6.80%)相对发文量较大,科研机构中,国
家自然科学基金委员会各分部是科研项目评估研究的主力
军;国内科研项目评估领域研究热点包括国家基金项目、
科研项目绩效评估、杰出青年科学基金、面上项目、项目
评审、同行评议六个方面;国内学者间合作交流存在一定
欠缺。
过程中,则应侧重于计划实际执行情况、项目产出情况包检索过程中,科研项目实际涵盖内容广泛,检索词内容不
括发表论文,专利,人才培养,学术会议及课题负责人员够完善。科研项目资助是激发我国科研工作者科研热情、
后续课题研究等、课题产出预期等方面。对不同的研究时提升科研效率的重要举措,科学有效的开展评估活动则是
段采取不同的评价指标体系,一方面可以保障科研项目不科研委员会决策科学化、管理评估规范化的重要保障,合
同研究时间段评估的合理性,另一方面通过多次评估,指理有效的科研项目评估将为国内广大科研工作者提供更多
标多元化,使评价体系更加全面具体,对学术不端行为的公平的竞争机会。
产生也有一定遏制作用。
(三)评估方法交叉融合使用参考文献:
以往学者多提倡采用定性与定量方法相结合,以减少
定性方法所带来的主观局限性,同时可避免全部采用定量
方法带来的缺乏对项目研究实际状况的考虑。评价方法交
叉融合,旨在引入多种评价方法,以减少项目评价误差及
缺陷。当前科研项目定量评估方法主要为文献计量法,定
性评估方法主要为同行评议法,在对科研项目各指标定量
评估的基础上,采取定性评估的方式实现科研项目各阶段
评估。可以在定性研究过程中引入新的研究方法,一方面
可以作为同行评议方法的补充,另一方面可以对同行评议
所产生的结果进行验证分析,当前定性研究方法主要有模
糊综合评价法、综合评价模型、灰色关联分析方法、案例
分析法等,可以适量引入新方法以实现对科研项目评估体
系的补充完善。
(四)构建评估内容回馈制度
对科研项目的评估是否科学合理,科研项目相关人员对
评估建议是否落实是科研项目评估有效性研究的重要一环。
项目评估是双向的过程,项目评估人员对科研项目完成评
估后,应对科研项目保持关注,注重科研项目组成员对评
估结果的反馈意见,可总结分析相关建议作为日后评估体
系完善的参考。建立评估结果反馈机制,使各科研项目在
完成项目评估后定期对项目修正情况进行反馈,同时将自
身对评估结果的建议、信服程度予以传达,达到评价者与
被评价者相互促进,共同完善修正的效果,有效提高科研
项目质量及科研项目评估科学性、有效性。
五、结语
本文在研究过程中仅通过文献计量学角度对国内科研项
目评估现状做出简要分析,尚且存在一些漏洞,如在知网
[1]项目中评价初探[J].管理工程学报,白思俊,
王保强,2000(2):65-66.
[2]美国高校科研评价及其借鉴[J].管理观察,陆
翊翊,郭胜伟,2016(21).
[3]Gross PF.A critical review of some basic
considerations in post-condary education evaluation[J].
Policy Sciences.1973.4(02):171-195.
[4]科技原创力发展规律探析[J].中国科学基金,
冯越强,齐玮,2007(1):14-16.
[5]科研项目经费管理:中英比较研究[J].科研管理,
顾全,2012,33(1):120-126.
[6]周鹏,张敏,郭胜伟.中国科研评价的历史沿革、
现状及对策分析[J].管理观察,2016(32):173-176.
[7]谭清美,刘文政,李开运.科研项目评价方法探
讨[J].科研管理,1992(03):31-39.
[8]吴建南,马亮,白波,郑永和.科学基金管理绩
效评估:基于项目资助与组织管理的视角[J].科学学与科
学技术管理,2010,31(07):10-16.
[9]科研项目评价制度的缺陷及其完善[J].自然辩
证法研究,马健,2010(10).
基金项目:山西省软科学研究计划项目“山西省科技人
才评价工作中量化指标的滥用及应对策略研究(项目编号:
2018041045-1)”; 中国博士后科学基金资助项目“研究
评估中科学计量学的不确定性现象及应对策略研究”(项
目编号:2018M631551)。
作者单位:山西财经大学
时代金融
83
本文发布于:2023-11-19 06:39:27,感谢您对本站的认可!
本文链接:https://www.wtabcd.cn/zhishi/a/1700347167219696.html
版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系,我们将在24小时内删除。
本文word下载地址:国内科研项目评估研究态势分析——基于文献计量学视角.doc
本文 PDF 下载地址:国内科研项目评估研究态势分析——基于文献计量学视角.pdf
留言与评论(共有 0 条评论) |