法律实践中,融入人工智能 (AI) 的产品急剧增加。此类工具旨在协助完成广泛的核心法律任务,从搜索和汇总判例到起草文件。但这些工具中使用的大型语言模型容易“产生幻觉”或编造虚假信息,因此在高风险领域使用它们存在风险。最近,某些法律研究提供商宣称检索增强生成 (RAG) 等方法可以“消除”幻觉(Casetext,2023 年)或“避免”幻觉(Thomson Reuters,2023 年),或保证“无幻觉”的法律引用(LexisNexis,2023 年)。由于这些系统的封闭性,系统地评估这些说法具有挑战性。在本文中,我们设计并报告了第一个预先注册的人工智能驱动的法律研究工具的实证评估。我们证明提供商的说法是夸大其词。虽然与通用聊天机器人 (GPT-4) 相比,幻觉有所减少,但我们发现 LexisNexis (Lexis+ AI) 和 Thomson Reuters (Westlaw AI-Assisted Research 和 Ask Practical Law AI) 制作的 AI 研究工具在 17% 到 33% 的时间内都会产生幻觉。我们还记录了系统在响应能力和准确性方面的巨大差异。我们的文章做出了四个关键贡献。这是第一篇评估和报告基于 RAG 的专有法律 AI 工具性能的文章。其次,它引入了一个全面的、预先注册的数据集,用于识别和了解这些系统中的漏洞。第三,它提出了一种区分幻觉和准确法律反应的清晰类型学。最后,它提供了证据来告知法律专业人员在监督和验证 AI 输出方面的责任,这仍然是 AI 负责任地融入法律的一个核心悬而未决的问题。1
• 印度政府商业和工业及电子信息技术部国务部长 Jitin Prasada 先生 • 汤森路透高级记者 Aditi Shah 女士 • 戴姆勒印度商用车公司董事总经理兼首席执行官 Satyakam Arya 先生 • Mahindra Electric Automobile 首席运营官 Kausalya Nandakumar 女士 • Ather Energy 首席商务官 Ravneet Singh Phokela 先生 • 德国微电子研究工厂 (FMD) 和弗劳恩霍夫微电子集团董事总经理 Stephan Guttowski 博士。 • 印度 ZF 集团总裁兼负责人 Akash Passey 先生 • ACMA 前任总裁兼 Rane 集团董事长 Harish Lakshman 先生
• Kaira Can, Mumbai • Kennametal, Bangalore • Konecranes India, Pune • Kothari Hosiery, Kokata • Madras Chamber of Commerce & Industry • Magicrete Building Solutions, Mumbai • Messe Dusseldorf, New Delhi • Orient Press Limited, Mumbai • Pinnacle Engines India, Pune • Procam, Kolkata • Hydro Extrusion (Sapa印度的个人资料,班加罗尔)•萨拉·埃尔吉(Sara Elgi),哥伦比亚郡•孟买的辛德勒(Schindler India)•Sundaram Industries,Chennai•塔塔·瑞尔森(Tata Ryerson),加尔各答•蒂亚加拉贾(Kolkata)Sundram Iyengar&Sons,Madurai•VDMA,加尔各答•印度Wolkem,Udaipur
办公室地址:Max Planck聚合物研究所,Ackermannweg 10,55128 Mainz Tel。:06131 379120电子邮件:blom@mpip-mainz.mpg.de当前职位:主管学业教育和证书1983 - 1988年在荷兰Eindhoven技术大学应用物理学研究。科学证书/学位论文:半导体物理学,荷兰埃因霍温技术大学,1992年,由Wolter教授监督。Professional career 1992 – 2000 Research Scientist at Philips Research Laboratories, Eindhoven,The Netherlands 2000 – 2008 Full Professor (Physics) at the University of Groningen, Physics of Organic Semiconductors 2008 – 2012 Scientific Director of Holst Centre, Eindhoven, The Netherlands since 2012 Director at Max Planck Institute for Polymer Research, Mainz, Germany since 2015 Honorary Professor (Physics)在约翰内斯·古腾堡大学,德国美因尔斯,德国的组织技能和能力,奖项和奖学金(选择):欧盟笛卡尔奖2003年的共同奖励,用于开发用于展示的聚合物灯光发射二极管二极管二极管二极管,科学美国最重要的成就在2005年的研究,商业或政策的大多数重要成就,该奖项是《 2005年有机企业》的《武器》杂志,应用研究(TNO)(2009-2013),2011年,汤森路透在高度引用的研究人员中排名高度引用的研究人员,在材料科学领域的研究人员中排名前1%,在2014年汤姆森·路透(Thomson Reuters)在世界上最有影响力的科学思维列表中排名,获得了吉尔斯·霍尔斯·霍尔斯特(Gilles Holst)奖学金的皇家科学奖(皇家科学奖),这是皇家科学奖(皇家科学奖)(2015年),2018年,Crip of Science Archiel,2018年,2018年,2018年,Crip Inder of Science of Criped,2018年,2018年,CRAVERIAN奖学金。在材料科学领域的最高研究人员中。
○ 创立日期 : 1948 年 10 月 20 日 ○ 组织 : 4 个校区、20 个学院、12 个研究生院、110 个系及专业 ○ 在校学生数 : 28,525 名 (含 450 名留学生) ○ 校内教职员工数 : 2,481 名 (教职员工 (1,617 名)、行政人员 (864 名)) ○ 2016 年大学排名 - 韩国第 14 名、世界第 710 名 (2016 CWTS 莱顿排名) - 韩国第 17 名、世界第 537 名 (2016 世界大学排名中心) - 韩国第 20 名,亚洲最具创新力的大学 (2016 路透社和汤森路透) ○ 专业领域 : 生命科学、纳米及先进材料工程、
出席人员:首席执行官 Ken Gourlay、执行董事(金融和企业服务)、财务主管 Elaine Muir、税收和商业服务主管 Les Robertson、税收和商业服务采购服务经理 Caroline Macdonald、法律和民主服务主管 Lindsay Thomson、法律服务律师 Margaret McFadden、委员会服务经理 Helena Couperwhite 和金融和企业服务法律和民主服务委员会官员 Michelle McDermott;社区和邻里服务主管 Paul Vaughan、社区团队经理 Sheena Watson、住房服务主管 John Mills、服务经理 Mhairi Mullen 和住房服务服务经理 Joan Lamie;教育服务部门教育主管(早期教育和理事会支持)Shelagh McLean。
边缘冰区(MIZ)是海冰和开阔海洋之间的过渡区,这是一个强大,复杂的相互作用和海洋,海冰和大气之间的反馈区域,对数值建模和进行观察的挑战(Dumont,2022; 2022; Horvat,2022)。近年来,人们对MIZ过程的兴趣日益增加,以越来越多的原位,基于卫星和实验室观察性运动以及理论和数值研究表现出来。由于物理学家,数学家,海洋学家,数字建模者等的跨学科努力,进展是实质性和多向的。MIZ系统的关键组成部分,通常被视为其定义特征之一,是海冰 - 波浪相互作用。他们已经研究了很多年(Squire,2018年,2020年; Shen,2022; Thomson,2022),但大多数研究都集中在涉及现象的狭窄子集上。
汤森路透 2024 年未来专业人士报告帮助我们更好地了解如何推动创新,同时继续成为客户值得信赖的合作伙伴。今年,我们首次将企业高管纳入调查范围,为了解那些将就未来使用人工智能做出战略业务决策的人的心态提供了宝贵的见解。我们知道,并且从各类受访者那里听说,快速的变化需要战略上的重大转变,并设置一些基本护栏,以确保负责任和合乎道德地使用这项技术——这是我们共同的责任。
1 Bauhaus Luftfahrt eV,Willy-Messerschmitt-Str. 1,82024 Taufkirchen,德国;anais.habermann@bauhaus-luftfahrt.net(ALH);fabian.peter@bauhaus-luftfahrt.net(FP);florian.troeltsch@bauhaus-luftfahrt.net(FT)2 剑桥大学 Whittle 实验室,1 JJ Thomson Av.,剑桥 CB30DY,英国;ac2181@cam.ac.uk 3 代尔夫特理工大学航空航天工程学院,2629 代尔夫特,荷兰;b.dellacorte@tudelft.nl(BDC);m.vansluis@tudelft.nl(MvS)4 华沙理工大学动力与航空工程学院,Pl. Politechniki 1, 00-661 华沙,波兰;goraj@meil.pw.edu.pl(ZG);mkowalski@meil.pw.edu.pl(MK) 5 查尔姆斯理工大学力学与海洋科学系流体动力学系,412 96 哥德堡,瑞典;xin.zhao@chalmers.se(XZ);tomas.gronstedt@chalmers.se(TG) 6 工程高级计划,MTU Aero Engines AG,80995 慕尼黑,德国;julian.bijewitz@mtu.de 7 劳斯莱斯电气,劳斯莱斯德国有限公司,91058 埃尔朗根,德国;guido.wortmann@rolls-royce-electrical.com * 通讯地址:arne.seitz@bauhaus-luftfahrt.net