NAIIL 的努力以 NIST AI 风险管理框架 (AI RMF) 为基础。AI RMF 是在私营和公共部门的意见下开发的,是一个自愿框架,用于以灵活、结构化和可衡量的方式管理 AI 风险。AI RMF 旨在供自愿使用,以帮助组织将可信度考虑因素纳入 AI 产品、服务和系统的设计、开发、使用和评估中。
ARIA(评估人工智能的风险和影响)是 NIST 人工智能创新实验室 (NAIIL) 的一项计划,旨在改进人工智能风险和影响评估。ARIA 评估结果可能会改进人工智能技术,并建立人工智能风险和影响评估所需的工具、测量方法和指标。这些结果可以使组织提高其人工智能应用程序的可信度,并在获取或部署人工智能技术时做出更明智的决策。ARIA 建立了一个模块化评估环境,以在上下文中检查人工智能风险以及相关的正面和负面影响。提交的应用程序将在三个级别进行测试 - 1)模型测试以确认声称的功能,2)红队测试以引入风险和压力测试模型护栏,以及 3)现场测试以调查用户如何定期与人工智能应用程序和人工智能生成的信息互动 6。所有用户都将按照预定义的场景测试提交的应用程序。