摘要 - 零击对象导航(ZSON)使代理能够在未知环境中朝着开放式摄制对象导航。ZSON的现有作品主要集中于遵循单个说明,以查找通用对象类,忽略了自然语言互动的利用以及识别特定用户特定对象的复杂性。为了解决这些限制,我们引入了零击交互式个性化对象导航(Zipon),在与用户进行对话时,机器人需要导航到个性化目标对象。要解决Zipon,我们提出了一个新的框架,称为开放世界交互式个性化导航(Orion)1,该框架使用大型语言模型(LLMS)来做出顺序决策,以操纵不同的模块以进行感知,导航和交流。实验结果表明,可以利用用户反馈的交互式剂的性能会显示出显着改善。但是,对于所有方法,在任务完成与导航和互动效率之间获得良好的平衡仍然具有挑战性。我们进一步提供了更多有关不同用户反馈表对代理商绩效的影响的发现。