机构名称：
¥ 1.0
近年来，人工智能 (AI) 技术的快速发展已使其融入生物医学出版领域。然而，人工智能对生物医学文献发展的贡献程度尚不清楚。本研究旨在确定同行评审的生物医学文献中人工智能生成内容的趋势。我们首先测试了市售人工智能检测软件 (Originality.AI，加拿大安大略省科林伍德) 的敏感性和特异性。接下来，我们进行了 MEDLINE（在线医学文献分析和检索系统）搜索，以确定 2020 年 1 月至 2023 年 3 月期间有可用摘要的随机对照试验。我们在此期间每季度随机选择 30 篇摘要，并将摘要粘贴到人工智能检测软件中以确定人工智能生成内容的概率。该软件的敏感性为 100%，特异性为 95%，总体判别能力出色，接收操作曲线下面积为 97.6%。在分析中包括的 390 篇 MEDLINE 索引摘要中，基于趋势卡方检验，研究期间 AI 生成文本的高概率（≥ 90%）流行率从 21.7% 增加到 36.7%（p=0.01）。在使用 50% 至 99% 的 AI 概率阈值进行的各种敏感性分析中也观察到了研究期间 AI 生成文本的流行率增加（所有 p≤0.01）。这项研究的结果表明，即使在 ChatGPT（OpenAI，美国加利福尼亚州旧金山）和类似工具广泛采用之前，近年来同行评议期刊中 AI 辅助出版的流行率一直在增加。作者的自然写作特征、常见 AI 应用程序的使用以及在接受后出版阶段引入 AI 元素对 AI 检测分数的影响程度值得进一步研究。
人工智能辅助生物医学出版的最新趋势：定量文献计量分析
主要关键词
相关文件推荐
