无人直播场景中的语音技术:真实拟声的文本转语音技术实现

AI(人工智能)的进步和直播带货的兴起,语音技术在这个场景中的应用也日益需求增多。尤其是在无人直播带货中,语音技术的重要性更是突出。其中,音色替换和可预测感情文本转语音(TTS)是两种关键的语音技术,对于提升无人直播带货的体验和购买欲望具有重要作用。

流程包括文本预处理、声学模型处理训练和后处理三个步骤。首先,文本预处理会对标注的文本分析和处理,例如分词、词性标注和语法分析等。然后,声学模型训练会将文本转化为声学特征,这个过程通常需要大量的语音数据来训练。最后,后处理会对生成的语音波形进行优化和调整,以使其更符合直播带货的需求。

首先,我们需要准备所需的工具和整合包,包括各种软件和工具库。这些工具 我会在下方分享出来,音频切片+音频标注+模型训练首先,我们需要对训练声音素材进行提纯处理,去除掉背景音和杂音。这里推荐使用UVR工具进行声音提纯。

无人直播场景中的语音技术:真实拟声的文本转语音技术实现 第2张插图

二、对声音素材进行切片

无人直播场景中的语音技术:真实拟声的文本转语音技术实现 第3张插图

三、对分段音频 进行 文本标注切片好的音频经过手动筛选过短的音频 放入 raw_audio 点击 0.带标点符号的标注

1.标注完成
打开 bert vist2 整合包 启动 webui

2.创建 文件夹
启动 webui 创建训练的模型 自己创建目录 将切好片的声音文件 放入 custom_character_voice 将标注好的文本放入 filelists

3.文本预处理
生成bert 文件,生成 emo文件,写入 训练参数 批大小 根据显卡设置 我这里设置16

演示视频

无人直播场景中的语音技术:真实拟声的文本转语音技术实现 第4张插图文件下载
auto_DataLabeling.zip
Android/PC
17.7GB
百度网盘
更新时间:2023-12-09 17:09:01
免责声明

本站提供的一切软件、教程和内容信息仅限用于学习和研究目的;不得将上述内容用于商业或者非法用途,否则,一切后果请用户自负。本站信息来自网络收集整理,如果您喜欢该程序和内容,请支持正版,购买注册,得到更好的正版服务。我们非常重视版权问题,如有侵权请邮件与我们联系处理。敬请谅解!
如若转载,请注明出处:https://www.zxki.cn/8367.html

上一篇 2023-12-9 16:53
下一篇 2023-12-9 17:43

相关推荐

发表评论

为了防止灌水评论,登录后即可评论!

已有 5 条评论