孩子的学习能力超越AI——我们仍不知原因

据我们所知,人们相互交谈至少已有 100,000 年的历史。一直以来,世界上只有一种东西可以完美流利地学习人类语言:人类的孩子。现在有两个。 ChatGPT 发布短短四年后,......

来源:MIT Technology Review _人工智能

“这简直太神奇了,”弗兰克说。“如果你用3000万个词训练GPT-2,你会得到一个胡言乱语生成器;你不会得到一个孩子。”

婴儿究竟是如何做到这一点的,这是一个谜。研究人员对孩子们在不同发育阶段学习的内容以及如何使用语言了解很多,但仍有很多我们不知道的东西。也许最持久的问题是为什么婴儿能够学习语言。人类语言的句法——将单词组合成句子的规则——包含递归、嵌套结构,使我们能够用有限的词汇库表达几乎无限的思想。这看起来对婴儿来说应该是一个难题。他们只是在一个深不可测的语言海洋的浅滩中嬉戏。然而,不知何故,这就足够了。从一滴水中,他们推断出了深度。

麻省理工学院语言学家诺姆·乔姆斯基在1950年代提出的一个解决方案是,婴儿天生就具备硬连线的语法知识。乔姆斯基是在回应心理学家B.F.斯金纳所倡导的对立观点,即语言习得完全是环境因素。斯金纳认为语言是通过条件反射和强化来学习的,就像狗学会如何坐下或握手以获得奖励一样。乔姆斯基通过引用“刺激贫乏”来反驳——即语言,尤其是句法,太复杂了,而孩子们接触语言的机会太“贫乏”,以至于他们无法完全从经验中学习。“他的标志性论点基本上是,语言不能纯粹基于统计学来学习,”加州大学欧文分校的语言学家和认知科学家理查德·富特雷尔说。相反,乔姆斯基假设语言基于一组逻辑规则,并认为儿童需要对这些规则有先天的认知,才能从语言的碎片中推导出其语法。

“这简直太神奇了……如果你用3000万个词训练GPT-2,你会得到一个胡言乱语生成器;你不会得到一个孩子。”