您的当前位置:首页>创新 > 正文

全球微头条丨情感语音转换技术研究取得新进展

  • 2022-08-24 10:06:03 来源:科技日报


(资料图)

科技日报呼和浩特8月23日电(记者张景阳通讯员胡红波)记者23日从内蒙古大学计算机学院获悉,该院刘瑞研究员所在科研团队与日本大阪大学科学与工业研究所科研团队合作,在国际信号处理领域TOP期刊《IEEE/ACM音频、语音和语言处理会刊》发表了“通过源滤波网络将独立于说话人的情感解耦以进行语音转换”的最新研究成果。

据介绍,情感语音转换(VC)旨在将中性语音转换为情感声音,同时保留语言信息和说话者的身份。科研团队注意到,将情感特征与其他语音信息(例如内容、说话者身份等)解耦是实现高质量转换效果的关键。由于情感语音中声学特征的解耦更加复杂,面向中性语音的特征解耦一直无法得到很好的处理。

科研团队针对情感语音转换的声学特征解耦问题开展研究,提出了一种基于“源—滤波器”模型的情感语音转换系统,具体来说,是为了解决情感语音转换的特征解耦问题而提出一种新颖的基于“源—滤波器”模型的情感VC模型(简称SFEVC),以从音色和音调特征中准确过滤说话人独立的情感线索。SFEVC模型由多通道编码器、情感独立编码器、预训练的说话人相关编码器和相应的解码器组成。所有编码器模块都采用信息瓶颈自动编码器。

为了进一步提高各种情绪的转化质量,研究团队还提出了基于二维VA(激活度—效价)空间的训练策略。实验结果表明,SFEVC模型以及VA训练策略的表现均优于所有基线系统,并基于非平行数据在说话人无关的情感VC场景下实现了最优性能。

标签: 语音转换 语言信息 自动编码器

推荐阅读

全球微头条丨情感语音转换技术研究取得新进展

科技日报呼和浩特8月23日电(记者张景阳通讯员胡红波)记者23日从内蒙古大学计算机学院获悉,该院刘瑞研...

【天天热闻】在科技周这个展区,人人都是“冬奥健儿”

科普时报实习记者吴桐8月22日,2022年全国科技活动周主场活动暨北京科技周正如火如荼地进行着。下午不到...

环球看热讯:暑假不知道去哪“遛娃”?快来科技周打卡!

科普时报记者罗朝淑8月21日,在2022年全国科技活动周暨北京科技周期间,记者走进北京通州绿心城市森林公...

精彩看点:新方法让电动汽车10分钟充电90%

科技日报记者 张梦然尽管电动汽车越来越受欢迎,但许多消费者仍在犹豫是否要换车。一个原因是,电动汽...

天天快资讯丨玻色因:为美丽按下暂定键

科普时报记者史诗面部暗黄无光、肌肤干燥缺水,这些症状都是在提醒你,你的皮肤正在慢慢老化。那皮肤该...

猜您喜欢

【版权及免责声明】凡注明"转载来源"的作品,均转载自其它媒体,转载目的在于传递更多的信息,并不代表本网赞同其观点和对其真实性负责。亚洲科技网倡导尊重与保护知识产权,如发现本站文章存在内容、版权或其它问题,烦请联系。 联系方式:8 86 239 5@qq.com,我们将及时沟通与处理。

业界