平安首创AVM自动变奏模型,探秘全球首部AI交响变奏曲背后硬核技术( 六 )

AI 作曲主导,专家评价修改

从算法角度来说,交响变奏曲的谱曲过程类似于对序列数据进行处理和重新生成的过程。输入数据是一段音符序列,而输出则是和输入类似,但进行了修改,和原曲有一定差异的新音符序列。在生成过程中,模型还需要能够根据创作方提出的需求,不断调整模型的参数,使其能够根据要求在生成的序列中融入特定情感语义信息。在完成作品后,乐曲会交由专业人士进行修改和调整,确保符合交响乐的创作规则,具备传承经典性。

尽管谱写乐曲时,模型需要对序列数据进行处理,因此会用到 Seq2Seq 模型。但是,机器之心从平安人工智能研究院了解到,与一般的 Seq2Seq 模型不同,谱写变奏交响乐要求变奏段落以基本段落为基础,并表达不同的情感或语义。这就需要 Seq2Seq 模型同时具有迁移风格的能力。

为了使模型能够达到设计要求,研究院使用了大量的乐曲和带标注的旋律数据训练模型,然后用训练好的模型对《我和我的祖国》等基础曲目进行处理。总共生成了 4 个版本的曲目,交由音乐家进行评价、调优,并最终交由专业的演出乐队进行演奏。

推荐阅读