学会用耳朵听写

重新思考如何对复调音乐转写进行形式化建模，我们将其构建为一个强化学习任务。这样的任务表述包含了音乐智能体以及包含乐器与待转写声源的环境的概念。在此概念框架内，转写过程可描述为智能体在环境中与乐器交互，并通过跟随所听内容演奏而获得奖励。从一组离散动作——在其乐器上演奏的音符——中选择，智能体获得的奖励量取决于其演奏哪些音符以及何时演奏。这一过程类似于人类音乐家处理转写任务的方式，以及她通过在乐器上紧密模仿待转写声源所获得的满足感。在讨论理论框架及以此方式建模问题的益处后，我们将注意力集中于若干实际考量，并解决在难度递增的任务集上训练智能体达到可接受表现的困难。我们在部分受限环境中展示了有前景的结果。