香港故事丨人机交互音乐会:唱响不一样的《东方之珠》
2022-07-19 08:56
来源: 新华网

香港故事丨人机交互音乐会:唱响不一样的《东方之珠》

人工智能朗读:

组建人工智能“合唱团”

今年是香港回归祖国25周年,项目团队首先想到了歌曲《东方之珠》。“用人机交互的方式进行再创作,以此送上我们的祝福。”负责该项目的郭毅可说。

第一个挑战是“组建”320个虚拟歌手组成的人工智能“合唱团”。

通过收集专业歌手的录音歌曲,他们提取和分解了声乐的主要特点,开发了声乐的生成模型,成功创建了一个四声部的合唱,同时通过8个人的人声采样,生成320个具有全新音色的虚拟歌手,“组建”成团。

虚拟歌手们开始“唱”得并不好,会唱错、唱不上高音甚至破音跑调。“声音就是频率,教它们学唱歌不算太难,就是需要不断地通过调整频率进行改善。”郭毅可说。

1128839232_16580627877811n.jpg

在彩排中,香港浸会大学交响乐团音乐总监潘明伦身上多处绑着传感器,他不时与台下的技术团队进行沟通(7月11日摄)。新华社记者 吴晓初 摄

第二个挑战是表演时的人机互动。在舞台上,指挥和乐团是真人,虚拟歌手们要学会“听”指挥的指令,做到与交响乐团的现场演奏无缝衔接,而这并非易事。

记者在彩排现场看到,指挥潘明伦脱去了西装,他的腰上、肩上、手臂和手腕处都绑着装有传感器的绑带,他不时停下指挥,与台下的技术团队进行沟通磨合。

传感器的作用是把指挥的肢体动作“同声传译”给人工智能合唱系统。“难点也在于此,指挥的手势不是固定的,需要有个模糊逻辑让系统学习。开始挺乱的,现在越练越好了。”郭毅可说。

经过长达半年的科研攻关和人机磨合,浸大的人工智能合唱团成功地完成了与真人交响乐团的合作。

[编辑:柳娜]