最后我再介绍一下我们近期开展的基于序列到序列模型框架的非平行语音转换方法的研究工作 。 虽然前面介绍的VCC2018方法可以取得较好的非平行语音转换效果 ， 但是其仍存在一些不足 。 例如 ， 基于语音识别器提取的文本内容表征中难以保证不含有说话人相关信息、语音识别模型和转换生成模型没有联合训练、仍采用帧到帧映射的模型框架等 。
因此 ， 我们提出了一种基于表征解耦的序列到序列非平行语音转换方法 。 该方法在序列到序列建模框架下 ， 可以实现对于语音中文本相关内容和话者相关内容的有效分离 。 其核心思想如图所示 。 在训练阶段 ， 利用识别编码器和话者编码器分别提取语音中的文本和话者相关表征 。 同时我们通过训练准则的设计保证这两种表征相互独立 ， 不会纠缠 。 在训练过程中 ， 我们也会利用语音对应的转写文本 。 从转写文本中提取的信息可以为从语音中提取文本表征提供有效参考 。 在合成阶段 ， 通过组合从源说话人语音中提取的文本表征 ， 以及目标说话人的话者表征 ， 可以实现从源说话人语音到目标说话人语音的转换 。
推荐阅读
-
中秋节|中秋之夜话中秋『中秋节的来历』，决不是为了推翻元朝而来
-
梦见很多跳蚤跳到自己身上 梦见跳蚤跳到自己身上去捉它
-
【】中小微企业“日子”过得怎么样？还有哪些困难待解？
-
母婴说事■会使小孩越来越自卑，家长们都该知道，著名心理学家：这3种行为
-
-
“情人档”成剧宣大战，檀健次刷屏却喜忧参半，李现新剧跑粉严重
-
『伊卡尔迪』惺惺作态还是吐露心声？伊卡尔迪密友称他不想和国米做对
-
整容|澳女生浑身纹身把自己整成“蓝眼白龙”，称终于活成喜欢的样子
-
-
-
原创▲女科蜜原创歌曲火了！在学校文艺汇演致敬科比，歌词令人心碎
-
石家庄最大驾考学员今年86岁 科目一及“三力”测试都得了95分
-
中国的牛肉能做牛排吗，能做的话和普通做牛排需要有啥注意的吗做出的牛排和西方的牛有啥差别吗
-
-
英国|“临门一脚”掉链子！中方3亿剂疫苗生产推迟，特朗普“押宝”失败！
-
军军解读|都被我国果断拒绝，终于轮到我国技术封锁！美国多次来访高价求购
-
九游网|绚烂水晶花瓣速刷攻略，《DNF》绚烂水晶花瓣怎么刷
-
夺命哈士奇|iPhone12Pro概念图：无刘海浴霸4摄，豪横设计让人爱不释手
-
中新网|全国百位知名主持人同聚一台 致敬“最可爱的人”
-
快资讯|刚刚官宣定档的4部新剧，《月上重火》上榜，你最期待哪一部？
