最后我再介绍一下我们近期开展的基于序列到序列模型框架的非平行语音转换方法的研究工作 。 虽然前面介绍的VCC2018方法可以取得较好的非平行语音转换效果 ， 但是其仍存在一些不足 。 例如 ， 基于语音识别器提取的文本内容表征中难以保证不含有说话人相关信息、语音识别模型和转换生成模型没有联合训练、仍采用帧到帧映射的模型框架等 。
因此 ， 我们提出了一种基于表征解耦的序列到序列非平行语音转换方法 。 该方法在序列到序列建模框架下 ， 可以实现对于语音中文本相关内容和话者相关内容的有效分离 。 其核心思想如图所示 。 在训练阶段 ， 利用识别编码器和话者编码器分别提取语音中的文本和话者相关表征 。 同时我们通过训练准则的设计保证这两种表征相互独立 ， 不会纠缠 。 在训练过程中 ， 我们也会利用语音对应的转写文本 。 从转写文本中提取的信息可以为从语音中提取文本表征提供有效参考 。 在合成阶段 ， 通过组合从源说话人语音中提取的文本表征 ， 以及目标说话人的话者表征 ， 可以实现从源说话人语音到目标说话人语音的转换 。
推荐阅读
-
张柏芝早就被绿了？谢霆锋10年后终于公开女儿，原来王菲早已知晓
-
-
月球|开始行动了！NASA登月联盟在月球上发现水，却将中国排除在外
-
华为荣耀|突然宣布！荣耀营销经理退休，引发网友猜疑
-
-
Logo设计也可以二次元化，说不准某些图标的灵感正是来自于二次元
-
世界上最古老的四种文字分别是什么 世界上最古老的六大文字
-
-
招聘|用招聘网站的后台告诉你，为什么你投了几百份简历，很少有人回复
-
无敌改装车▲RR：Type-RR，最强思域FD2！Mugen
-
张爱玲|张爱玲在晚年崇尚“极简主义生活”，并非穷困潦倒，稿费拿到手软
-
AutoR智驾 逆行外卖小哥、深夜拥堵轻松应对，元戎启行自动驾驶汽车挑战“宇宙最强街道”
-
-
-
三十年体坛故事|7连杀+赛季双杀！上港仍是国安梦魇 御林军争冠梦碎？
-
-
教育部|教育部重要通知，2条升学途径被堵死！家长无语：之前努力白费了
-
妻子伺候二婚丈夫五年，继子来医院探望一趟，妻子含泪提出离婚
-
-
