创新文本转语音技术:提升合成效率与独立性
2025-01-14 19:21
No.1328806233708437504
技术概要
PDF全文
本项技术突破性地提出了一种文本转语音生成方法,属于语音合成技术领域,旨在解决现有系统中语音合成效率低下和对对齐信息依赖性的问题。该方法通过三个核心步骤实现:首先,通过自监督学习提取参考语音特征,并进行离散化处理,形成参考语义标记序列;其次,结合文本标记与参考语义标记,生成目标语义标记序列;最后,对目标语义标记序列进行预测,生成多层声学标记序列,并据此合成目标语音。该技术的应用将显著提升语音合成的效率和独立性。
背景技术
现有技术中,许多文本到语音(Text To Speech,TTS)系统采用自回归模型,如序列到序列模型(Seq2Seq)。这些模型在生成语音时逐个标记地预测,导致合成速度较慢,且容易受到长距离依赖问题的影响。 一些TTS系统依赖于文本和语音之间的对齐信息,如音素到语音帧的对齐。这种依赖增加了系统的复杂性,需要额外的对齐工具或算法,且在处理不同语言或语音特性时可能不够灵活。 另外,传统的TTS系统通常采用单阶段模型,直接从文本生成语音。这种模型在处理复杂的语音特性时可能不够精细,难以同时兼顾内容和韵律的生成。并且,在语义表示的离散化过程中,尤其是在音调丰富的语言中,现有技术如k-means方法可能导致信息损失,影响语音质量和韵律的准确性。
实现思路
阅读余下40%
技术概要为部分技术内容,查看PDF获取完整资料
该技术已申请专利,如用于商业用途,请联系技术所有人!
技术研发人员:
王远程武执政
技术所属: 香港中文大学(深圳).
相关技术
一种维纳增益的设计方法 一种维纳增益的设计方法
基于FPGA的深海水声数据压缩方法与装置 基于FPGA的深海水声数据压缩方法与装置
一种自适应感知的一维离散时间信号活动检测方法和系统 一种自适应感知的一维离散时间信号活动检测方法和系统
一种基于多域声学特征融合的说话人识别方法、装置及设备 一种基于多域声学特征融合的说话人识别方法、装置及设备
一种语音转换的信息处理方法和系统 一种语音转换的信息处理方法和系统
基于多尺度全局卷积网络的语音关键词识别方法及系统 基于多尺度全局卷积网络的语音关键词识别方法及系统
神经网络的训练方法、语音降噪方法、设备及存储介质 神经网络的训练方法、语音降噪方法、设备及存储介质
跨语言文本中实体语义识别处理方法、系统及存储介质 跨语言文本中实体语义识别处理方法、系统及存储介质
一种高效文字转语音的方法及系统 一种高效文字转语音的方法及系统
一种用于智慧呼叫的语义识别方法及系统 一种用于智慧呼叫的语义识别方法及系统
技术分类
电信、广播电视和卫星传输服务 电信、广播电视和卫星传输服务
互联网软件服务 互联网软件服务
集成电路设计 集成电路设计
信息集成数字服务 信息集成数字服务
电气机械制造 电气机械制造
计算机、通信、电子设备制造 计算机、通信、电子设备制造
医药制造、生物基材料 医药制造、生物基材料
石油煤矿化学用品加工 石油煤矿化学用品加工
化学原料制品加工 化学原料制品加工
非金属矿物加工 非金属矿物加工
金属制品加工 金属制品加工
专用设备制造 专用设备制造
通用设备制造 通用设备制造
通用零部件制造 通用零部件制造
汽车制造业 汽车制造业
铁路、船舶、航天设备制造 铁路、船舶、航天设备制造
电力、热力生产和供应 电力、热力生产和供应
燃气生产和供应 燃气生产和供应
水生产和供应 水生产和供应
房屋建筑、土木工程 房屋建筑、土木工程
交通运输、仓储和邮政 交通运输、仓储和邮政
农、林、牧、渔业 农、林、牧、渔业
采矿业 采矿业
农副、食品加工 农副、食品加工
烟草、酒水加工 烟草、酒水加工
纺织皮具居家制品 纺织皮具居家制品
文教体娱加工 文教体娱加工
苏ICP备18062519号-5 © 2018-2025 【123技术园】 版权所有,并保留所有权利