然而,人工智能的加速发展是一个重大且日益严峻的安全挑战。与核技术一样,人工智能本质上是一种两用技术,很容易被滥用于恶意目的。基于机器学习的人工智能系统从示例而不是预定义规则中学习执行任务,也带来了前所未有的安全风险,这与它们的统计性质有关,具有新的和不可预测的故障模式。它们不是很稳健,即它们的行为可能会在新的环境中突然改变,而且很难解释:它们是自主运行的“黑匣子”,我们不知道它们是如何或为什么运行的。谷歌 (BARD)、微软 (Bing) 或 OpenAI (ChatGPT) 无法阻止其对话代理产生事实错误和暴力或偏见行为。随着这些系统变得更加强大和自主,正确规范它们的目标,即确保系统的目标与用户的偏好和公共利益保持一致,正成为一个主要问题。随着人工智能的快速发展及其在各个领域的大规模普及,这些安全风险可能迅速增加,并成为国家和国际安全问题。
然而,人工智能的加速发展是一个重大且日益严峻的安全挑战。与核技术一样,人工智能本质上是一种双重用途技术,很快就会被滥用于恶意目的。基于机器学习的人工智能系统,从示例而不是预定义的规则中学习执行任务,也带来了与其统计性质相关的前所未有的安全风险,具有新的和不可预测的故障模式。它们不是很强大,即它们的行为可能在新的环境中突然改变,并且很难解释:它们是自主运行的“黑匣子”,我们不知道它们是如何或为什么运行的。谷歌 (BARD)、微软 (Bing) 或 OpenAI (ChatGPT) 无法阻止其对话代理产生事实错误和暴力或偏见行为。随着这些系统变得更加强大和自主,正确指定它们的目标,即确保系统的目标与用户的偏好和共同利益保持一致,正在成为一个主要问题。随着人工智能的快速发展及其在所有活动领域的大规模传播,这些安全风险可能会迅速增加,并代表国家和国际安全问题。
蒙田研究所是一家位于法国巴黎的非营利性独立智库。我们的使命是制定公共政策提案,旨在影响法国和欧洲的政治辩论和决策。我们汇集了来自不同背景的领导人——政府、民间社会、企业和学术界——以进行平衡的分析、国际基准和基于证据的研究。我们提倡一种平衡的社会愿景,其中开放和竞争的市场与机会平等和社会凝聚力齐头并进。一方面,我们坚定地致力于代议制民主和公民参与,另一方面,我们坚定地致力于欧洲主权和一体化,这构成了我们工作的思想基础。蒙田研究所由企业和个人资助,其中任何一个人的贡献都不超过其年度预算的 3%。
蒙田研究所是一家位于法国巴黎的非营利性独立智库。我们的使命是制定公共政策提案,旨在影响法国和欧洲的政治辩论和决策。我们汇集了来自不同背景的领导人——政府、民间社会、企业和学术界——以进行平衡的分析、国际基准和基于证据的研究。我们提倡一种平衡的社会愿景,其中开放和竞争的市场与机会平等和社会凝聚力齐头并进。一方面,我们坚定地致力于代议制民主和公民参与,另一方面,我们坚定地致力于欧洲主权和一体化,这构成了我们工作的思想基础。蒙田研究所由企业和个人资助,其中任何一个人的贡献都不超过其年度预算的 3%。