东京大学研究生院助理教授高道新之助领导的研究小组在东映公司祖昆研究所的一项合同研究项目中,开发了一种技术,可以人工再现歌手松户谷由美 50 年前出道时的歌声。

 日本流行音乐文化实时受到欧美流行音乐文化的影响,形成了新音乐和日本独特的J-POP文化,文化之间的相互作用又创造了新的文化。同样,如果有价值的音频材料能够以现代音质再现,它可以为新文化的创造做出贡献。

 这次,研究小组的目的是人工再现松户谷由美的歌声,松户谷由美从新音乐时代到现在一直活跃在音乐人的第一线,就像她50年前那样。她出道时的声音材料很少,而且不适合再现歌声,因此很难使用传统的信息技术。

 因此,研究小组开发了一种“多语音合成”系统,可以同时进行机器学习,实现“文本到语音合成”,即从文本中合成语音,“歌声合成”,从歌词中合成歌声,以及将某个歌声转换为当时的歌声的“歌声转换”,使用了逐步合成变换任务混合学习算法。它还采用“数据编辑/修剪方法”,半自动删除机器学习不需要的数据。结果,他们成功地在新歌中再现了当时的声调和演唱表情,音质与现代兼容。

 重新制作的歌声将与松户谷由美出道时的歌手名“新井由美”进行二重唱,并将作为歌曲“Call”的音乐视频(MV)在 YouTube 上向公众公开。我回来了”(2022 年 10 月)1 天)已完成。

 希望利用这项研究成果,通过过去的歌声和音频数据与当前文化的互动,创造出新的歌曲创作和欣赏方式。

参考:[东京大学信息科学研究生院]跨越时空再现50年前的歌声——利用小数据通过任务混合深度学习再现歌声——(PDF)

东京大学

成立于明治10年。日本历史最悠久、日本知识最前沿的大学

东京大学成立于1877年(明治10年),由东京开成学校和东京医学院合并而成。自成立以来,它作为日本领先的大学和东西方文化融合的学术中心,以世界上独特的方式发展了教育和研究。因此,在广泛的领域产生了许多人力资源,许多研究成果 […]

大学学报在线编辑部

这是大学学报的在线编辑部。
文章由对大学和教育具有高水平知识和兴趣的编辑人员撰写。