Exploring Prediction Targets in Masked Pre-Training for Speech Foundation Models
语音基础模型，例如Hubert及其变体，在大量未标记的语音数据上进行了预训练，然后用于一系列下游任务。这些模型使用蒙版的预测目标，该模型学会了从未掩盖的上下文中预测有关掩盖输入段的信息。在此框架中的预测目标的选择会影响其在下游任务上的性能。例如，通过捕获韵律的目标进行预训练的模型学习适合与说话者相关的任务的表示形式，而那些预先训练的目标是捕获语音学的目标……
Whale Song Shares Structural Patterns With Human Language, Study Finds
一项新的研究发现，座头鲸歌与人类语言共享统计结构，这表明文化传播在塑造复杂的交流中起着关键作用。利用受婴儿语音学习启发的方法，研究人员确定了鲸鱼歌曲中的经常性模式，挑战了关于人类语言独特性的假设，并为语言演变提供了新的观点。 [...]
What Linguistic Analysis from the 2024 Debates Reveals about Harris, Trump, Walz and Vance
语言学家和社会语音学家 Nicole Holliday 分析了最近总统和副总统辩论中候选人使用的语言
