通过音频-触觉合成实现对刮擦和摩擦的直觉控制
声音
2024-01-12 v1 音频与语音处理
经典物理
摘要
合成过程的直觉控制是听觉感知与认知领域内一个持续的挑战。先前结合心理物理测试的声音建模工作，使我们的团队开发出一种合成器，能够基于对声源的语义描述提供对动作和物体的直觉控制。在此演示中，我们展示了该合成器的增强版本，其中我们加入了触觉刺激，以增强与模拟物体进行真实连续摩擦交互（摩擦和刮擦）的感觉。这之所以令人感兴趣，有几个原因。首先，它能够在存在其他模态刺激的情况下评估我们声音模型的真实感。其次，它能够比较与同一唤起相关的触觉和听觉信号结构，第三，它提供了一个工具来研究多模态感知，以及如何组合来自不同模态的刺激以提供逼真的用户界面。
引用
@article{arxiv.2401.05757,
title = {Intuitive Control of Scraping and Rubbing Through Audio-tactile Synthesis},
author = {Mitsuko Aramaki and Corentin Bernard and Richard Kronland-Martinet and Samuel Poirot and Sølvi Ystad},
journal= {arXiv preprint arXiv:2401.05757},
year = {2024}
}