Wave-like behaviour in (0,1) binary sequences
该论文从量子理论视角出发,将复波函数作为类比概率测度,对有限 (0,1) 二进制序列(特别是基因组序列)进行了扩展研究,揭示了其频谱特征与声波性质的相似性。
163 篇论文
该论文从量子理论视角出发,将复波函数作为类比概率测度,对有限 (0,1) 二进制序列(特别是基因组序列)进行了扩展研究,揭示了其频谱特征与声波性质的相似性。
该研究通过分析大量头颈癌患者的数据,发现主观感知评估与客观声学测量之间存在显著关联,并建议单一的可懂度指标足以用于监测接受同步放化疗患者的言语功能。
该研究通过对 11 种自监督语音模型的大规模探测分析,揭示了其分层编码机制及深层层意外恢复说话人身份的特性,并发现中间层在捕捉动态韵律方面优于专用说话人嵌入,从而为选择可解释且任务最优的表示提供了指导。
本文提出了 InterActHuman 框架,通过引入布局对齐的音频条件及掩码预测器,实现了多概念(包括多人与物体)在视频中的精确区域绑定与高质量交互动画生成,有效解决了现有方法无法处理多主体复杂交互的局限。
本文提出了 Vevo2,一个统一的语音与歌声生成框架,通过引入两种新型音频分词器及多阶段建模策略,有效解决了标注数据稀缺问题,实现了对文本、韵律、风格及音色的灵活可控生成,并在多种合成、转换与编辑任务中展现出卓越的泛化能力。
本文提出了一种名为 TSPC 的两阶段音素中心架构,通过以扩展越南语音素集为中间表示的混合语言建模方法,在低计算资源下显著提升了越南语 - 英语代码转换语音识别的准确率。
本文提出了 BabyHuBERT,一个基于 1.3 万小时多语言儿童录音训练的自监督语音模型,其在区分目标儿童与不同说话者类型的任务中显著优于现有成人语音模型,有效解决了儿童中心长时录音分析中的语言差异挑战。
本文提出了集成音频编码器与 Mamba-2 骨干网络的 SAM 模型,通过系统分析揭示了联合微调、紧凑音频 Token 表示及指令监督对提升性能的关键作用,证明了其能以更少的参数实现媲美或超越更大规模 Transformer 模型的音频语言处理能力。
本文提出了名为 Noise-to-Notes (N2N) 的新框架,将自动鼓乐转录重新定义为基于扩散模型的生成式任务,通过引入退火伪 Huber 损失函数解决离散与连续值联合优化难题,并结合音乐基础模型特征显著提升了跨域鲁棒性,在多个基准测试中取得了最先进性能。
本文提出了将薛定谔桥训练范式与 Mamba 架构相结合的 Schrödinger Bridge Mamba(SBM)模型,该模型仅需单步推理即可在联合去噪和去混响任务中超越现有强基线方法,同时保持适合流式处理的实时性。
该论文提出了一种融合能量自适应混合增强与帧级注意力机制的多损失学习框架,通过优化特征提取与损失函数组合,在四个主流数据集上实现了语音情感识别的先进性能。
该论文针对现有语音反伪造基准缺乏多样性的问题,提出了包含 30 种不同 API 生成语音的 MultiAPI Spoof 数据集及 API 溯源任务,并设计了引入局部注意力机制的 Nes2Net-LA 模型,在复杂多变的伪造场景下实现了最先进的检测性能与鲁棒性。
本文提出了 RA-QA 基准系统,通过构建包含 900 万条多样化问答对的标准化数据集及统一评估协议,旨在解决现有呼吸音频问答研究在模态、设备和问题类型等真实世界异质性方面评估不足的局限,并揭示了当前模型在此类复杂场景下的性能瓶颈。
本文提出了 Aurchestra 系统,这是首个在资源受限的助听设备上实现细粒度、实时声景控制的技术,它通过动态界面和实时多输出提取网络,允许用户像音频工程师一样独立调节环境中最多五个重叠声源的声音。
本文介绍了 VoxKnesset,这是一个包含约 2300 小时、跨越 15 年且涵盖 393 位发言人的开源希伯来语议会演讲数据集,旨在通过基准测试揭示语音识别模型在长期老化条件下的性能退化,并推动对老龄化鲁棒性语音系统的研究。
本文针对训练无关的异常声音检测任务,系统评估了多种时间池化策略,并提出了一种结合相对偏差池化与广义均值池化的混合方法,在多个基准数据集上实现了超越现有训练系统及集成模型的最优性能。
本文通过实证研究揭示,尽管 Meta 的 SAM-Audio 模型能显著提升语音信号的感知质量,但将其作为预处理步骤应用于 Whisper 零样本语音识别时,反而会因信号与机器识别目标的不匹配而导致识别准确率(WER 和 CER)系统性下降。
本文针对孟加拉语长语音识别与说话人分离任务,提出了一种结合 WhisperX 锚定与 Whisper 时间戳分块的 ASR 策略,并通过在竞赛数据集上微调 Pyannote 分割模型以优化重叠语音处理,从而显著降低了词错率和说话人分离错误率。
本文提出了一种名为“先聚焦后聆听”(FTL)的即插即用音频增强器,它通过分离语音与非语音信号并结合模态路由与融合机制,在不重新训练大音频语言模型的情况下显著提升了其在噪声环境下的鲁棒性。
本文介绍了首个环境声音深度伪造检测挑战赛,通过汇集 97 支参赛队伍和 1748 份有效提交,系统阐述了任务定义、数据集构建、评估协议及基线系统,并基于顶尖系统的架构与训练策略分析,为该领域未来的研究方向提供了关键见解。