本综述记录了跨不同模态分类的表示方法,从纯粹基于内容的方法到利用外部结构化知识源的技术。我们介绍了与用于表示的三种范式相关的研究,即(a)低级模板匹配方法,(b)基于聚合的方法,和(c)深度表示学习系统。然后,我们描述现有的结构知识资源,并阐述使用此类信息丰富表示的必要性。接下来介绍利用知识资源的方法,根据如何利用外部信息进行组织,即(a)输入丰富和修改,(b)基于知识的细化和(c)端到端知识感知系统。随后,我们将进行高层次的讨论,总结和比较所提出的表示/丰富范式的优缺点,并在综述结束时概述相关研究成果和未来工作的可能方向。
主要关键词