详细内容或原文请订阅后点击阅览
教AI模拟广泛的笔触以素描像人类一样
SketchAgent是由MIT CSAIL研究人员开发的图形系统,它绘制了概念逐一概念,教授语言模型,可以自己表达概念并与人类合作。
来源:MIT新闻 - 人工智能当您试图交流或理解想法时,单词并不总是能解决问题。有时,更有效的方法是对该概念做一个简单的草图 - 例如,图解电路可能有助于了解系统的工作原理。但是,如果人工智能可以帮助我们探索这些可视化,该怎么办?尽管这些系统通常熟练地创建逼真的绘画和卡通绘画,但许多模型无法捕获素描的本质:逐步触及的迭代过程,这可以帮助人类集思广益并编辑他们想要代表自己的想法。
MIT的计算机科学和人工智能实验室(CSAIL)和斯坦福大学的新绘图系统可以像我们一样素描。他们的方法称为“ Sketchagent”,使用了多模式模型 - 在文本和图像上进行训练的AI系统,例如Anthropic的Claude 3.5十四行诗 - 将自然语言提示在几秒钟内变成草图。例如,它可以自行或通过协作来涂抹房屋,与人类绘画或合并基于文本的输入以分别绘制每个部分。
研究人员表明,Sketchagent可以创建各种概念的抽象图纸,例如机器人,蝴蝶,DNA螺旋,流程图,甚至是悉尼歌剧院。有一天,该工具可以扩展到互动艺术游戏中,该游戏可以帮助教师和研究人员绘制复杂的概念或为用户提供快速的绘画课程。
Sketchagent:一种协作系统,教授AI模型像人类一样素描。 视频:麻省理工学院CSail
csail Postdoc Yael Vinker是介绍Sketchagent的论文的主要作者,他指出,该系统为人类与AI进行交流的方式引入了一种更自然的方式。
纸 评估AI的素描能力