ParaRNN: Unlocking Parallel Training of Nonlinear RNNs for Large Language Models
循环神经网络 (RNN) 为序列建模奠定了基础,但其内在的序列性质限制了并行计算,为扩展造成了根本障碍。这导致了 Transformer 等可并行架构以及最近的状态空间模型 (SSM) 的主导地位。虽然 SSM 通过结构化线性递归实现高效并行化,但这种线性约束限制了它们的表达能力,并妨碍对复杂的非线性序列依赖关系进行建模。为了解决这个问题,我们提出了 ParaRNN,一个打破......
Mastering Non-Linear Data: A Guide to Scikit-Learn’s SplineTransformer
忘记僵硬的线条和疯狂的多项式。了解为什么样条曲线是特征工程的“金发姑娘”,它使用 Scikit-Learn 的 SplineTransformer 为非线性数据提供了灵活性和纪律的完美平衡。掌握非线性数据:Scikit-Learn SplineTransformer 指南的帖子首先出现在《走向数据科学》上。
The Machine Learning “Advent Calendar” Day 20: Gradient Boosted Linear Regression in Excel
从随机集成到优化:梯度提升解释机器学习“降临日历”第 20 天:Excel 中的梯度提升线性回归一文首先出现在《走向数据科学》上。
How I Optimized My Leaf Raking Strategy Using Linear Programming
从周末的琐事到有价值的运筹学原理的有趣应用我如何使用线性编程优化我的叶子收集策略一文首先出现在走向数据科学上。
The Subset Sum Problem Solved in Linear Time for Dense Enough Inputs
当输入值彼此足够接近时,著名的 NP 完全问题的最佳解决方案。在足够密集输入的线性时间内解决的子集和问题一文首先出现在《走向数据科学》上。
Board games boost young kids’ math skills, UO research review shows
玩线性数字棋盘游戏可以提高幼儿的数学技能,只需几十分钟的游戏就能产生持久的益处。
Male burrow investment drives differential sperm transfer in a South American spider
雄性洞穴投资驱动南美蜘蛛的精子转移差异摘要在雄性多次交配的物种中,雄性可能会根据多种因素(例如其生殖状况和身体状况及其性伴侣的情况)差异性地转移精子。蜘蛛因其独特的生殖系统、精子储存能力和多样化的交配策略,为研究性选择提供了特殊的模型。然而,影响该群体男性精子转移的因素仍有待探索。我们研究了新热带狼蛛 Allocosa senex 的精子转移模式,雄性狼蛛建造并捐赠洞穴作为生殖和父系投资。我们研究了男性和女性的特征,例如年龄和身体状况(即前体宽度和重量之间的线性回归的残差)以及男性对洞穴建设的投资(洞穴长度)是否影响精子转移。最后,我们测试了精子转移、射精次数和交配持续时间之间的关系。我们的结
When contraction is called expansion – Japanese government style
好了,我的假期结束了。并不是说我有一个!今天早上,我们向出版商提交了宏观经济学第二版的手稿,该书将于今年晚些时候出版。完成这样一个庞大的项目总是非线性的——过去的几个月是可怕的——检查一切然后……
Existence Of A Cost-Minimizing Solution In A Model With Extensive And Intensive Rent
1.0 引言这篇文章提出了一个结合粗放地租和集约地租的特殊案例模型。除了与土地相关的联合生产外,模型中不存在联合生产。只生产一种农产品,即“玉米”。每个玉米生产过程都在一种类型的土地上进行。不存在同时使用两种或多种未生产的自然资源的可能性。但更严格的条件是土地系数。在每种类型的土地上运行的过程可以严格按照每蒲式耳玉米生产的英亩数进行排序。不存在联系。此外,当采用两个过程的线性组合来消除土地时,生产系数不会出现负值。这些假设排除了例如达加塔(D'Agata,1983)中某些不存在和非唯一性的例子。我并不声称它们是通过经济推理来证明的。这篇文章是对共享流动资本模型属性的模型与不具有这些属性的联合生
Shell Oil Sued Over “Causing Typhoon” in Philippines in Major Test Case
壳牌诉讼是一个重要的测试案例。活动人士多年来一直在寻求财政支持和认可,以期他们的伪科学主张能够测量混乱和非线性的大气。这就是他们声称的完善程度和专业知识,许多人相信他们能够将个别天气事件的责任归咎于人类。大多数主流媒体毫无疑问地大肆宣传他们的炼金术声明,但看看这些归属声明如何在激烈的法庭论坛上引起“知识之友”的注意将会很有趣。
The Machine Learning “Advent Calendar” Day 17: Neural Network Regressor in Excel
神经网络通常感觉就像黑匣子。在本文中,我们仅使用 Excel 公式从头开始构建神经网络回归器。通过明确从前向传播到反向传播的每一步,我们展示了神经网络如何学习仅用少量参数来逼近非线性函数。机器学习“降临日历”第 17 天:Excel 中的神经网络回归器一文首先出现在《走向数据科学》上。
A Conjectured Sahm Index for November
11 月份失业率为 4.6%,而彭博社的预期为 4.5%。萨姆规则对我们是否处于经济衰退有何说明?没什么,因为我们没有 10 月份的数据(感谢 OMB 明智地宣布 BLS 员工不是必需品)。但假设我们对 9 月和 11 月的失业率进行线性插值,因此 [...]
The Machine Learning “Advent Calendar” Day 15: SVM in Excel
本文不是从边距和几何形状开始,而是从熟悉的模型逐步构建支持向量机。通过改变损失函数并重新使用正则化,SVM 自然地表现为经过优化训练的线性分类器。这种观点将逻辑回归、SVM 和其他线性模型统一到一个单一的、连贯的框架中。机器学习“降临日历”第 15 天:Excel 中的 SVM 帖子首先出现在走向数据科学上。
複素数について(その5)-複素解析(複素関数の微分・積分)-
■摘要 在本期《研究者之眼》系列中,我们将再次报道“虚数”以及由虚数和实数组成的“复数”,它们是什么、它们具有什么性质以及它们在社会中的用途。这次,我们将分三部分介绍复数分析,解释虚数和复数在数学世界中的应用。在第一节中,我们解释了复函数的定义,并解释了它们与真实函数的异同。第二次,我们将解释复杂函数的微分和积分及其性质。 ■目录 / 简介 / 复函数的微分 / 柯西-黎曼方程 / 复函数微分的性质 / 复函数的积分 / 复函数积分的性质 / 柯西积分定理 / 格林定理 / 不定积分 / 柯西积分公式 / 古萨特定理 / 莫雷拉定理 / 洛朗展开 / 留数定理 / 最后,在本期中在研究员之眼系
The Machine Learning “Advent Calendar” Day 14: Softmax Regression in Excel
Softmax 回归只是扩展到多个类别的 Logistic 回归。通过计算每个类别的一个线性分数并使用 Softmax 对其进行归一化,我们在不改变核心逻辑的情况下获得多类别概率。损失、梯度和优化保持不变。只是并行分数的数量增加。在 Excel 中实现,模型变得透明:您可以看到分数、概率以及系数如何随时间变化。机器学习“降临日历”日帖子14:Excel 中的 Softmax 回归首先出现在《Towards Data Science》上。
The Machine Learning “Advent Calendar” Day 13: LASSO and Ridge Regression in Excel
岭回归和套索回归通常被认为是线性回归的更复杂版本。事实上,预测模型保持完全相同。改变的是训练目标。通过对系数添加惩罚,正则化迫使模型选择更稳定的解决方案,尤其是当特征相关时。在 Excel 中逐步实现 Ridge 和 Lasso 使这个想法变得明确:正则化不会增加复杂性,它会增加偏好。机器学习“降临日历”第 13 天:Excel 中的 LASSO 和 Ridge 回归一文首先出现在《走向数据科学》上。
The Machine Learning “Advent Calendar” Day 12: Logistic Regression in Excel
在本文中,我们直接在 Excel 中一步步重建逻辑回归。从二进制数据集开始,我们探讨线性回归作为分类器为何举步维艰,逻辑函数如何解决这些问题,以及对数损失如何自然地从似然中出现。借助透明的梯度下降表,您可以在每次迭代中观察模型的学习情况,从而使整个过程直观、直观且令人惊讶地令人满意。机器学习“降临日历”第 12 天:Excel 中的逻辑回归首先出现在走向数据科学。
Ameles serpentiscaudaBattiston, Maioglio, Corneti, Forni & Luchetti, 2025DOI: doi.org/10.1080/03949370.2025.2571110 facebook.com/RobertoScheriniAbstract一种矮螳螂新种,Ameles serpentiscauda sp。十一月描述了撒丁岛(意大利)的特有种。该分类单元表现出高度复杂的求偶行为,其特征是腹部、尾丝和终末的协调运动,这是首次报道,并与阿梅莱斯属的已知行为特征进行了比较。使用了一个综合框架,将这些行为学数据与详细的形态学和分子系统发育相