查看: 1093|回复: 0

PaddleHub元宇宙直通车:手把手教你造个虚拟数字人!

[复制链接]

48

主题

4

回帖

211

积分

高级会员

Rank: 2

积分
211
发表于 2022-9-10 14:38:10 | 显示全部楼层 |阅读模式
元宇宙时代已经来临,当你看到网络新闻上形形色色的虚拟人的时候,是不是有些心动?
你是否跟以前的我一样会想创造虚拟人需要很大的成本和技术投入,

普通开发者单枪匹马根本无法办得到?
现在这些都不再是问题,

助你快速实现!


B站展示链接:https://www.bilibili.com/video/BV1GM4y1F7f2

背后支持虚拟数字人的“神秘力量”,其实是飞桨PaddlePaddle强大的开源生态和AI能力。

PaddleSpeech将文字转换成语音,让虚拟数字人有了自己的声音。

PaddleGAN的人脸生成赋予了虚拟数字人一张可爱的脸蛋,表情迁移、唇形合成(同步)模型驱动虚拟数字人的脸部活动,让虚拟人更加栩栩如生。

目前PaddleHub已经把以上模型纳入了模型库当中,现在只需要简单的十几行代码调用模型,输入图片和文字,即可生成一个生动形象的虚拟数字人。

技术原理:

实现虚拟数字人生成总共需要调用三个模型,分别是First Order Motion(表情迁移)、Text to Speech(文本转语音)和Wav2Lip(唇形合成)。
具体技术步骤如下:


来源:https://aistudio.baidu.com/aistudio/projectdetail/3345856

631c30b55956e.png
物欲横流,谁主沉浮?
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

快速回复 返回顶部 返回列表