2020年2月,教育部、科技部印发了《关于规范高等学校SCI论文相关指标使用 树立正确评价导向的若干意见》,明确提出要破除论文“SCI至上”,在学术界引发反响。

破除,并非反对。而是要优化学术界的评价方式方法,为人才评定、人才激励、资源配置、学科评估提供更为合理的标准,从而推动科研领域健康发展,树立正确导向。

针对科研,除了论文、影响因子、SCI等指标,还有哪些评价维度和方法?

智源社区针对这一问题做了相关调研。通过分析,我们发现,评价科研成果和影响力有诸多维度,绝非仅论文一个指标。

另一方面,由于人工智能具有基础研究、工程、工具和社会影响等四个方面的属性,因此对人工智能领域的评价,应当依据学科特点做适当性调整。

评价AI成果和影响力采用多种方法,根据人工智能研究的不同属性,采用对应的评价维度,将相关产出全部纳入评价体系中。

PPT资料请关注「智源社区」官方公众号,后台回复「科研评价报告」下载完整内容。


作者:戴一鸣

责编:贾 伟

01

科研评价的基本概念

科研成果是指通过科学研究活动所获得的产出,包括论文,以及专利、报告、数据、软件、代码等。

科研影响力是指科研成果为学术研究、经济、社会、文化等一系列层面带来的影响。

评价科研的思路分为两种,分别是成果导向和过程导向,每种思路都有对应的评价维度。

02

评价维度和方法

根据不同的评价维度,国际上目前已经有20多种评价方法(有些限定于某一学科或领域),涵盖对项目、科研人员、科研团队和科研机构的评价。

总体上,不同的评价维度和被评价主体,在评价指标的确定上所有区别。报告列举了部分可量化的指标。

根据不同的指标,进行评价的方法有所区分,包括定性评价和定量评价两种。此外,自然科学、人文和社会科学,以及艺术等其他学科中的评价指标也有不同的侧重。

03

国际科研评价案例

目前,国际上已有很多评价方法,本报告列举了其中一些案例,供读者参考。

Buxton和Hanney自1996年提出Payback Framework,通过分析研究活动的早期、中期和长期产出,评价其带来的实际收益,包括了学术贡献和经济效益等多种回报。最早应用于医学领域,但之后扩展到了其他学科。

H-index由Jorge Hirsch在2005年提出,基于研究者发表的SCI论文数量和被引数据,通过计算H指数,评价其科研影响力。H-index计算简单方面,结果直观,但仅计算SCI论文,容易造成“唯SCI论”的评价导向。

英国高等教育拨款机构从2014年开始使用研究卓越框架(REF)对全英国范围内高校的研究成果和影响力进行评价。评价体系非常精细,专业性很强,结果权威。

全球顶级学术杂志《自然》周刊的出版方Springer在2020年提出了Nature Index(自然指数)评价方法,通过统计旗下82个期刊作者的发表论文情况,对作者所在机构和国家地区进行排名。自然指数方法计算较为简单,结果直观,但只涵盖了自然科学领域。

04

对AI科研评价的启示

由于人工智能具有基础研究、工程、工具和社会四个方面的属性,每个属性都有对应的评价方法。

我们认为,对人工智能领域的评价方法,一定不能“唯论文至上”。评价AI成果和影响力将采用多种方法,根据人工智能研究的不同属性,采用对应的评价维度,将相关产出全部纳入评价体系中。

完整报告,欢迎关注“智源社区”官方微信号,在后台回复“科研评价报告”,下载完整内容。


欢迎加入智源社区行业研究群!


破除SCI至上!评价 AI 科研成果,需要新思路【附报告下载】相关推荐

  1. 联合国发布AI报告:自动化和AI对亚洲有巨大影响【附报告下载】

    来源:网易智能 选自 | 联合国开发计划署 编译 | nariiy.小小 科技的飞速发展将深刻地影响社会变革,第四次工业革命以人工智能.自动化和生物科技等创新技术为代表,并将可能改变现有的生产.管理和 ...

  2. 揭秘5G+AI时代的机器人世界!【附报告下载】

    AI 和 5G 与机器人技术结合,正在不断催生新的消费电子品类.AI 解决机器理解世界,以及人机交互的问题.5G 拓展机器人的活动边界,并为机器人提供更大的算力和存储空间(云协作机器人) . 今天,我 ...

  3. 腾讯发布国内首份可解释 AI 报告:详解打开算法黑箱的理念与实践|附报告下载...

    随着各界对 AI 伦理的日益重视,AI 系统的可解释性也逐渐成为热点,甚至上升到立法和监管的要求.许多人工智能领域的专家都把 2021 年视为"AI 可解释元年",在这一年,不仅政 ...

  4. 智谱研究报告:揭秘ChatGPT背后的AI“梦之队”【附报告全文下载】

    2022年11月30日,OpenAI公司(美国致力于人工智能研究的非营利机构)发布了由大型语言模型驱动的自然语言处理工具ChatGPT.该工具通过学习和理解人类语言,能够与用户进行高质量对话,甚至还能 ...

  5. 英国政府:打造世界AI强国的18个建议(附报告下载)

    来源:中国信息化百人会 本文长度为8421字,建议阅读10分钟 英国政府发布报告<在英国发展人工智能>对当前人工智能的应用.市场和政策进行了分析并对未来发展提出建议. 英国政府网站上10月 ...

  6. 深度好文:破“SCI至上”,科研资源配置怎么调整

    最近一个时期,有关部门下决心破除"唯论文"顽瘴痼疾,打出一套组合拳,发布一系列文件,改革科技评价体系中备受诟病的论文"SCI至上",为此,传统的科研资源分配方式 ...

  7. 破除“论文至上”!两部委发文规范SCI指标使用

    ‍ 今日,有消息源爆出,教育部和科技部联合印发重磅通知--<关于规范高等学校SCI论文相关指标使用 树立正确评价导向的若干意见>(下简称意见),通过十条规定,规范各类评价工作中SCI论文相 ...

  8. 什么是科技成果评价?怎么做科技成果评价?科技成果评价能给企业和科研工作者带来哪些好处?

    什么是科技成果评价? 科技成果评价指对科研成果的工作质量.学术水平.实际应用和成熟程度等予以客观的.具体的.恰当的评价.评价完成后,由专业机构出具权威成果评价报告,并在国家科技成果登记系统完成登记,颁 ...

  9. SCI至上只是结果,而不是原因

    来源:赵斌科学网博客 我从来不认为SCI一无是处,相反,我们大多数科研人员应该感谢它.中国科研评价体系中的的问题,不是破四唯,破SCI至上,而是打破特权.消除歧视. 近日,教育部和科技部联合发文,为了 ...

最新文章

  1. JS中的offsetWidth, clientWidth, scrollWidth, innerWidth, outerWidth, pageXOffset
  2. 浅谈OFBiz之权限设计
  3. mysql for 语句执行顺序_MySQL查询语句的执行流程
  4. Boost智能指针——shared_ptr
  5. bind9 配置说明
  6. Android 中的线程及 AsyncTask(线程形态之一)解析一下
  7. 网站视频解析 有的url资源放在浏览器能直接播放,有的却不行。
  8. python你是否也走进了这个误区了_Python是不是被严重高估了?
  9. 复现原文(二):Single-cell RNA sequencing of human
  10. 解决PHP导出大量数据时设置超链接的问题 --mxp
  11. abstract class和interface
  12. ValueError: threshold must be numeric and non-NAN, try sys.maxsize for untruncated representation
  13. delphi 2010 mysql_Delphi 2010和MySQL
  14. 【重点】计算机二级公共基础重点
  15. 大数据之项目需求及架构设计
  16. CSS内联样式的使用,实战篇
  17. 自动驾驶工程师的进阶之路
  18. Unity中常用的游戏存档/读档技术
  19. 陈世涛:鼠标滚轮引起的画面上下跳动问题处理 跳行怎么办?
  20. latex语法_【研创基地科研实训】关于举办第27期“LaTeX使用技巧交流分享会” 线上科研实训交流活动的通知...

热门文章

  1. java speex回声消除_speex 回声消除的用法
  2. java求阶乘不内存溢出_No_16_0321 Java基础学习第二十一天
  3. java跳转语句包含goto_Java 语句标签实现goto跳转
  4. td 内单选框不可用_材料特殊处理TD、TICN概述
  5. linux 切换python版本_Linux下python默认版本切换成替代版本(示例代码)
  6. 世界五百强世硕科技工作经历——05
  7. Ubuntu 16.04安装Zabbix 3.2 版本
  8. 干货!top白帽子 Gr36_ 手把手教你挖漏洞|2017 先知白帽大会
  9. SSI —— 开源的人类行为分析解决方案
  10. ebuild 中的软件包依赖