几周前,在一个感觉完全不同的世界里,在会议被取消之前,在我们大多数人开始在家工作之前,我参加了LIS-文献计量学,三月初在英国利兹大学举行。会议主要针对图书馆员和从事研究评估和分析的大学工作人员,也有来自整个行业的代表和利益相关者。离开时,我对负责任的度量标准的未来感到乐观,并与研究人员和同行合作,提出替代的开放度量标准,作为我们对开放科学的承诺的一部分。
我特别兴奋地见到了一组代表,他们都有一个共同的兴趣,那就是朝着有效的度量标准前进,远离影响因素,以及实践更开放的原则。我最喜欢的流行语是“负责任的度量标准”和“负责任的研究评估”。参加会议的人在他们的机构担任诸如“负责任的研究评估官员”之类的角色,他们向我展示了图书馆员队伍中这一运动的重要性,以及我现在所相信的推动这一运动的持续承诺。
《研究评估宣言》(DORA)的目的是停止使用影响因素来评估研究人员的个人贡献,当然是每个人议程的首要问题。辛达维是DORA的签署人,他重视所有不同类型的度量标准,以度量主要文献的影响范围。对我来说,参与不同大学之间的讨论是一件特别有趣的事情,这些大学都处于DORA实施的不同阶段,他们中的许多人面临的挑战是获得本机构其他部门的支持来进行这一更改。看到和听到加的夫大学、肯特大学和南安普顿大学的热情是令人鼓舞的,他们都是DORA的明确倡导者,都致力于推动各自研究机构的变革。
最近的DORA signees特别需要来自其他机构的支持和指导,在LSE-Bibliometrics会议上与这些热情的倡导者分享他们的经验,这是最好的地方。
开车经过一整天的讨论,是由伊丽莎白·加德的开幕致辞(拉夫堡大学,英国,LIS-文献计量学委员会主席)谁提出她的五个预言,她预计到2030年看到:
增加而不是替代的评价方法;没有统一的度量标准。
出资者将有负责任的研究评价了较大的影响。
REF-后,接下来将是STEM基于指标的系统。
谁也无法资助自己通过期刊出版学术团体将发挥在科研评价的作用。
更大文献计量学,包括不同的输出类型(例如预印本,替代内容)的复杂性。
我个人希望,至少一些上面的,我们那里比2030更快,知道Hindawi出版将积极参与讨论,因为他们前进。特别是,(关于[2]和[4]),我认为现在是时候让资助者和学术团体参与研究评估的带领下,改变一切的科技进步和社会的更好做的方式。这将允许与出版商如我们自己更多的互动,可以帮助推动开放度指标以及开放的科学。
继续这个开放度量的主题,英国研究主管Steven Hill博士讨论了有助于重塑研究评估的趋势。他坚信,事情正变得更加开放和协作。他解释说,评估研究的机构现在和应该考虑更广泛的输出类型,特别是包括文章中更多的交互性,而不是静态输出。分析复杂和更大的引用数据集(即元数据背后的元数据)是否有助于更全面地了解文章还有待观察——也许这正是诸如此类的新服务的地方Scite将成为评估引用的影响更为有用。
除了赛特,希尔博士展示了使用AI具有潜在的革命性的研究评估等新工具。其中一个工具开发的UNSILO现在被一些出版商分流提交的论文和Hindawi出版目前正与他们积极讨论,看看这个新工具如何帮助我们自己的同行评审过程。按理说更显著,同行评审的机器人正在开发中。虽然这种机器人的使用可能会觉得可怕的许多研究人员,该技术可以帮助在学术交流的最大问题地址之一 - 时间可供学术界继续担任科学产出的成交量继续促进同行评审过程增加。请记住,只有一个机器人,除了人类,可以提供在同行评议50%的效率提高,大大降低了现有评审池的负担。如果该工具显示的工作,我不认为任何人都应该驳回使用AI,我们已经调查了比较详细了。
From a publisher’s perspective, it was great to hear institutions spreading the message that researchers should publish their work where it will be read by the most appropriate audience and this should take priority over metrics and will become a much more supportive message than “publish in high impact journals”. It is a clear U-turn away from the current system, which rewards researchers based on the Impact Factors of journals they publish in, not only using a largely irrelevant metric as the primary focus (and in some cases sole focus) of evaluation, but also opening the process to misuse and abuse.
在一天的过程中(其中一个满视频录制可在这里),它明确了责任指标的代表们未来的主要担忧是,出版商和广告商将锁定机构转化为产品和特定的数据集 - 这是开放科学会冠军对抗 - 我们可能都是以改变过于耐(even if change is something we’ve all agreed too) and that the major funders need to invest in tools and analytics to drive the change from their side (much the same way funders have driven open access).
当然,负责任的是,这些假设被全体观众投票确认为他们所面临的最大挑战。对我来说,研究机构显然希望供应商在这一领域起到带头作用。然而,在研究生命周期中的所有利益相关者都是对话的一部分是有共同利益的,我们Hindawi迫不及待地想继续我们的角色,推动替代开放度量标准作为我们对开放科学的承诺的一部分。
这篇博文是在创作共用署名许可(CC-BY)。的例证是通过Hindawi出版,也是CC-BY。