中文

Ghostfinger:一种用于全计算指尖控制器的新型平台

人机交互 2021-07-28 v1

摘要

我们提出 Ghostfinger,一种用于高动态上下指尖触觉与控制的技术。该技术所提供的整体用户体验可被描述为与一个小全息图进行可触且可听的互动。更具体地,Ghostfinger 实现对算法基元动态实例化/参数化的自动可视化,这些基元共同决定当前指尖动作的触觉条件。该可视化的某些方面是视觉空间的:一个悬浮的透视光标提供手指垫换能器的实时、等比例显示,随用户移动。同时,每个触觉基元实例由一个悬浮块形状表示,按类型着色、透明度可变,并可能与其他此类块形状重叠。可视化的其他方面是符号性的:每个实例还由一个类型符号表示,若实例正在向用户提供输出,则在网格中亮起。我们讨论系统的用户界面、编程接口与潜在应用。这是从一个通用视角出发,阐明并强调计算原理在实现新型乐器声音控制中的独特赋能作用。除当前呈现的技术外,这也更广泛地反思了数字乐器(DMIs)在 NIME 中的角色。

关键词

引用

@article{arxiv.2107.12716,
  title  = {Ghostfinger: a novel platform for fully computational fingertip controllers},
  author = {Staas de Jong},
  journal= {arXiv preprint arXiv:2107.12716},
  year   = {2021}
}

备注

Proceedings of the International Conference on New Interfaces for Musical Expression, 2017