
专利摘要显示,本专利涉及人工智能领域,尤其涉及深度学习、计算机视觉、虚拟 / 增强现实和图像处理技术领域,可应用于虚拟数字人、元宇宙等场景。具体实现方案包括:响应于获取的语音数据,确定初始语音特征;对初始语音特征进行时序增强处理,得到目标语音特征;基于目标语音特征和目标虚拟对象的基准面部图像,生成唇形图像序列;根据唇形图像序列,对目标虚拟对象进行驱动,使目标虚拟对象执行与语音数据匹配的唇部动作。

IT之家发现,简而言之,这个专利可使虚拟数字人在说话时的唇部动作更加接近真人。值得一提的是,百度此前已经正式对外确认将发布类 ChatGPT 项目“文心一言”(ERNIE Bot),如果再结合这个技术,那么就能打造更加逼真的虚拟数字人了。
未经允许不得转载:新聚网 » 百度新专利可使虚拟数字人深度学习唇部动作

新聚网
哈佛大学开源 AI 训练数据集“Institutional Books 1.0”,涵盖馆藏 98.3 万本图书
Android XR 智能眼镜 XREAL Project Aura 重要参数公布:双芯驱动,70+° FoV
全球首个儿科大模型在北京荣华医院落地,诊断准确率优于主治医师平均水平
小米米家前开盖旅行箱 18 英寸开启众筹,369 元
共建韩国最大 AI 数据中心、容纳 6 万个 GPU,亚马逊 AWS 与 SK 集团合作
OpenAI Codex 人工智能编程工具推出新功能:可一次生成多个方案
性能提升 90%,Anthropic 首次公开多智能体系统构建全流程





