Cram Less to Fit More: Training Data Pruning Improves Memorization of Facts
本文在 ICLR 2026 基础模型导航和解决数据问题研讨会上被接受。大型语言模型 (LLM) 可能很难记住其参数中的事实知识,通常会导致幻觉和在知识密集型任务中表现不佳。在本文中,我们从信息论的角度将事实记忆形式化,并研究训练数据分布如何影响事实准确性。我们表明,每当训练数据事实中包含的信息量超过模型时,事实准确性就不是最佳的(低于容量限制)......
我最近收到了来自阿拉斯加费尔班克斯的 Jen Ostler 的一些信件。 Jen 最初于 2026 年 3 月 29 日向我之前发表的有关 Piper PA-28-161 Warrior ZK-EBM2 的博客文章发送了一条匿名评论。我回复了匿名帖子,希望提供 N9423C 的一些照片(因为它是在 Jen 时代注册的),并收到了以下回复。你好戴夫!我是这篇关于我在 90 年代训练的飞机的文章中意外的匿名评论者。当威廉/比尔·克雷尔拥有这架飞机时,我和他一起学习了飞行。我赢得了高中作文比赛,我的飞行训练是由一位“匿名捐助者”赞助的,我一直怀疑这实际上是比尔本人。我在 14 岁开车之前就已经开始飞
A multi-armed robot for assisting with agricultural tasks
人类经常用一只手抓住树枝以便更好地接近,而另一只手则用于执行主要任务,例如 (a) 树枝修剪和 (b) 花的手工授粉。 (c) Madhav 及其同事使用的方法概述,其中一个机器人操纵树枝将花朵移至 [...]
The robot lawn mower I recommend most is $347 off for Amazon's Spring Sale
Husqvarna Automower 430X 为我提供了新修剪草坪的所有好处,而且无需任何工作。
A multi-armed robot for assisting with agricultural tasks
人类经常用一只手抓住树枝以便更好地接近,而另一只手则用于执行主要任务,例如 (a) 树枝修剪和 (b) 花的手工授粉。 (c) Madhav 及其同事使用的方法概述,其中一个机器人操纵树枝将花朵移至 [...]