超越交叉重构:基于探测的声学传送编解码器解耦评估
音频与语音处理
2026-06-30 v1 声音
摘要
一些神经音频编解码器将语音解耦为编码内容、说话人身份和声学信息的潜在子空间,从而实现声学传送和语音转换。现有评估依赖于交叉重构质量,这无法可靠地检测跨分区的信息泄漏。我们扩展了一个基于探测的框架,通过回归房间声学参数(混响时间、清晰度和直达混响比)并对说话人身份进行分类来评估解耦程度,使用预期分区与非预期分区之间的差距作为解耦度量。应用于声学传送编解码器时,我们发现说话人身份在很大程度上被限制在其分区内,而由于训练目标,声学信息泄漏到语音嵌入中。声学嵌入在0.02秒内即可达到与监督基线相当的盲估计房间参数性能,表明在没有显式监督的情况下涌现了物理上有意义的结构。
引用
@article{arxiv.2606.31365,
title = {Beyond Cross-Reconstruction: Probing-Based Disentanglement Evaluation for Acoustic Teleportation Codecs},
author = {Philipp Grundhuber and Emanuël A. P. Habets},
journal= {arXiv preprint arXiv:2606.31365},
year = {2026}
}
备注
Accepted for Interspeech 2026