您的位置:首页 > 科技 >

情感语音转换技术研究取得新进展

2022-08-24 17:41:00 来源:科技日报

记者23日从内蒙古大学计算机学院获悉,该院刘锐研究员研究团队与日本大阪大学科学与产业研究所研究团队合作,在国际信号处理领域顶级期刊《IEEE/ACM音频、语音和语言处理会刊》上发表了“通过源滤波网络解耦非特定人情感进行语音转换”的最新研究成果。

据介绍,情感语音转换(VC)旨在将中性语音转换为情感语音,同时保留语言信息和说话人的身份。研究小组注意到,将情感特征与其他语音信息(如内容、说话者身份等)分离开来。)是实现高质量转化效果的关键。由于情感语音中声学特征的解耦比较复杂,中性语音的特征解耦处理不好。

研究团队对情感语音转换的声学特征解耦进行了研究,提出了基于“源-滤波器”模型的情感语音转换系统。具体而言,提出了一种基于"源-过滤器"模型的情感VC模型(简称SFEVC ),以解决情感语音转换的特征解耦问题,从而从音色和音调特征中准确过滤说话人的独立情感线索。SFEVC模型由多声道编码器、情感无关编码器、预训练的说话人相关编码器和相应的解码器组成。所有编码器模块均采用信息瓶颈自动编码器。

为了进一步提高各种情绪的转化质量,研究团队还提出了基于二维VA(激活度-效能)空间的训练策略。实验结果表明,SFEVC模型和VA训练策略的性能优于所有基线系统,在基于非并行数据的非特定人情感VC场景中取得了最佳性能。

栏目导读

改了!618前淘宝改名:手机淘宝正式更名为淘宝

终于改了!618前,手机淘宝正式改名为淘宝。记者发现,目前在AppStore等各大应用商店里,原来手机淘宝APP的名称已经变成了淘宝。据悉,这是

2021-05-27 16:54

天猫618预售火爆,犀牛工厂订单排到下个月

太火爆了,工厂订单已经排到了下个月!5月26日,犀牛智造计划排产总监陈哲发了一则朋友圈。天猫618预售启动后,一批尝试即卖即产服饰商家销

2021-05-27 16:55

造车“二进宫” 美的再陷多元化怪圈?

  为提振投资者信心,美的近来真的很努力。对于意兴阑珊的资本市场,这家家电巨头接连打出了回购牌、增持牌以及王炸——进军新能源汽车产

2021-06-01 10:42

特斯拉深陷信任危机 新能源产品供求双方须心怀足够敬畏

日前,有网友向工信部提交信件表示:把动能回收功能与加速踏板相结合,让加速踏板具有明显制动效果这一设计违背常理、违背汽车百年驾驶习惯

2021-06-01 14:35

中消协测评:奥克斯、科龙空调样机自清洁细菌表现较差

  如今消费者选购空调时,除了基本的温度调控功能,更多人倾向关注附加了自清洁、除菌、新风、净化、舒适等健康理念和功能的产品,但这些

2021-06-04 14:43