最后我再介绍一下我们近期开展的基于序列到序列模型框架的非平行语音转换方法的研究工作 。 虽然前面介绍的VCC2018方法可以取得较好的非平行语音转换效果 ， 但是其仍存在一些不足 。 例如 ， 基于语音识别器提取的文本内容表征中难以保证不含有说话人相关信息、语音识别模型和转换生成模型没有联合训练、仍采用帧到帧映射的模型框架等 。
因此 ， 我们提出了一种基于表征解耦的序列到序列非平行语音转换方法 。 该方法在序列到序列建模框架下 ， 可以实现对于语音中文本相关内容和话者相关内容的有效分离 。 其核心思想如图所示 。 在训练阶段 ， 利用识别编码器和话者编码器分别提取语音中的文本和话者相关表征 。 同时我们通过训练准则的设计保证这两种表征相互独立 ， 不会纠缠 。 在训练过程中 ， 我们也会利用语音对应的转写文本 。 从转写文本中提取的信息可以为从语音中提取文本表征提供有效参考 。 在合成阶段 ， 通过组合从源说话人语音中提取的文本表征 ， 以及目标说话人的话者表征 ， 可以实现从源说话人语音到目标说话人语音的转换 。
推荐阅读
-
穿搭|简约才高级，初秋通勤风穿搭示范，清雅知性气质满分
-
-
国际人物志|还取下手铐挑衅，英国逃犯发视频对警察叫嚣“来抓我”
-
-
祁连军武|日媒感慨：百年变局将至，神龙一号成功着陆！美鹰派大佬一声不吭
-
带男孩和带女孩儿有什么差别？过来人的经验，建议收藏
-
我爱追TVB唐诗咏忍不住发文澄清！，被曲解嫁马国明
-
发型|小心网上那些算命的！可能会害了你！八字不能乱透露
-
-
迪丽热巴|众星同天齐营业，赵丽颖迪丽热巴风格差别大，肖战又奶又帅气
-
波梓的时尚手账|杨幂美颜恢复！新杂志销量可观，百变穿衣减龄又高级
-
高校|这两所不是211重点大学，但却是国内百强名校，综合实力很高
-
可不可以简单就营商环境论营商环境?可不可以简单音谱
-
指尖上的王者|出装看不懂没关系，本文为你详细分解，沈梦溪成世冠第一法师
-
球场十二人▲真能顺利进行有望收入1亿欧，国米今夏回笼资金就指望这3人
-
|将军分羊肉忘给车夫，第二天车夫把他拉去敌营，从此诞生一成语
-
-
产业气象站 AMD二季度财报亮眼、台积电7nm产能吃紧
-
-
全网球APP 大威分享健康饮食配方：比较喜欢吃生食和素食
