东京大学研究生院助理教授高道新之助领导的研究小组在东映公司祖昆研究所的一项合同研究项目中,开发了一种技术,可以人工再现歌手松户谷由美 50 年前出道时的歌声。
日本流行音乐文化实时受到欧美流行音乐文化的影响,形成了新音乐和日本独特的J-POP文化,文化之间的相互作用又创造了新的文化。同样,如果有价值的音频材料能够以现代音质再现,它可以为新文化的创造做出贡献。
这次,研究小组的目的是人工再现松户谷由美的歌声,松户谷由美从新音乐时代到现在一直活跃在音乐人的第一线,就像她50年前那样。她出道时的声音材料很少,而且不适合再现歌声,因此很难使用传统的信息技术。
因此,研究小组开发了一种“多语音合成”系统,可以同时进行机器学习,实现“文本到语音合成”,即从文本中合成语音,“歌声合成”,从歌词中合成歌声,以及将某个歌声转换为当时的歌声的“歌声转换”,使用了逐步合成变换任务混合学习算法。它还采用“数据编辑/修剪方法”,半自动删除机器学习不需要的数据。结果,他们成功地在新歌中再现了当时的声调和演唱表情,音质与现代兼容。
重新制作的歌声将与松户谷由美出道时的歌手名“新井由美”进行二重唱,并将作为歌曲“Call”的音乐视频(MV)在 YouTube 上向公众公开。我回来了”(2022 年 10 月)1 天)已完成。
希望利用这项研究成果,通过过去的歌声和音频数据与当前文化的互动,创造出新的歌曲创作和欣赏方式。