情感陪伴
基于大语言模型的微调及高度定制化的语音模型,你可以轻松的将你想要他/她/它变成你的虚拟数字人助手,因此你可以随时让你喜欢的人合理聊天、为你提供帮助。同时这可以极大地缓解你身处异国他乡的孤独情绪。
只是想尝试一下?查看演示视频。
数字人计划
为了实现一个体验较为良好的数字人,我们的产品包含了以下三个方面的改造,语言模型(LLMs)、文本转语音模型(TTS)以及图像生成模型(DiM)。
注意事项
这里请务必关注隐私政策
语言模型
在征得你们的同意后,我们会使用你的一些对话数据来帮助训练或微调,一个特质的大语言模型,这会使得助手的说话方式风格和你期望的角色非常一致。
文本转语音模型
我们只需要不到1分钟的音频数据(当然是时间越长越好), 就可以生成一个你所期望角色的语音模型,这会使得助手的音色语气语调和你期望的角色非常接近。(如果有2分钟或以上的音频,可以做到最终的效果和那个角色几乎没有任何差别)
这里有两个示例:
游戏《原神》中的角色“刻晴”:
原始音色与对应文本
“希望我们的节目能让期待节目的人感到高兴。”
“我不敢断言是或不是,但可能性确实非常大。”
克隆音色与对应文本示例
“ 基于大语言模型的微调及高度定制化的语音模型,你可以轻松的将你想要的任何角色变成你的虚拟数字人助手,这可以极大地缓解你身处异国他乡的孤独情绪。”
开发者“予成”:
原始音色与对应文本
“我现在正在测试我们留学助手的文本转语音模型。”
克隆音色与对应文本示例
“助手由高度可制化的多模太大语言模型以及快速语音克隆文本转语音技术构建,可以让你喜欢的角色以虚拟数字人的形式陪伴你在异国他乡的求学生涯。”
形象克隆模型
这里我们 仅仅需要角色的几张照片即可,最终深沉的形象可以是各种风格,这里可以参考链接中的内容。
更多计划
可以向我们反馈