AI数字人交互课 Maya建模到UE5接 图1

AI 数字人这门课偏技术,不是教你套模板做口播视频,而是从建模到语音交互自己搭一套能实时对话的虚拟角色。

整条线分两块工具:Maya 负责角色,从基础约束、蒙皮、融合变形,到骨骼搭建、权重绘制、表情 Blendshape 和元音制作;UE5 负责场景与交互,材质贴图、大模型接入、语音唤醒、语音合成、Audio2face 实时面部驱动都在这里做。

大模型接入这一章讲了五种路子:ChatGPT、百度文心一言、星火、离线本地模型,还有本地知识库的批量存储。语音交互章节分了离线和 Audio2face 两个版本,各自都能打包输出成可运行的程序,最后一个案例是抓取抖音弹幕让数字人回应。

课程声明的局限要提前知道:只做教学,不给源码和成品工程;Maya 和 UE5 都要自己装,显卡不够的机器跑起来会很吃力;没有建模基础的人,前两章会过得比较慢。

课时安排是六章,从 3 分钟的介绍课到 42 分钟的表情制作,全套约十五小时。下面是完整的章节目录。

第一章:Maya角色基础篇

教学课程介绍和角色选定

数字人环境安装与搭建

Maya约束基础

Maya蒙皮基础

Maya融合变形基础

第二章:Maya角色高级骨骼技术

角色基础骨骼搭建

角色衣服头发骨骼搭建

蒙皮权重绘制

角色蒙皮权重传递

头发动力学

第三章:Maya角色高级骨骼技术

角色表情制作基础

表情BlandShape制作

元音制作技术

表情绑定和权重传递

角色其他部位的绑定和驱动

材质设定和导出设定

第四章:UE5角色基础设定

角色模型和场景导入设置

虚拟场景材质设置

眼球材质制作

身体材质制作

头发材质制作

骨骼重指定和角色封装

头发动力学

第五章:UE5大模型接入

语音识别唤醒角色

ChatGPT大模型接入

离线大模型接入

百度文心一言接入

星火大模型接入

本地知识库(本地服务器批量存储)

场景搭建和摄像机设置

第六章:UE5实时语音交互

语音合成(离线版本)

蓝图整合(离线版本)

眨眼睛动画制作

角色动作自然随机切换

打包输出(全离线版本

Python环境安装

Audio2face接入虚拟人

动作随机切换(Audio2face版本)

语音合成调用API

抖音弹幕抓取直播

打包输出(Audio2face版本)

第1章 第一章

1-1 教学课程介绍和角色选定(3分钟)

1-2 数字人环境安装与搭建(7分钟)

1-3 maya的约束基础(16分钟)

1-4 Maya蒙皮基础(19分钟)

1-5 Maya的Blendshape融合变形基础(17分钟)

第2章 第二章

2-1 角色骨骼建立01(17分钟)

2-2 角色骨骼建立02(8分钟)

2-3 角色权重绘制01(35分钟)

2-4 角色权重绘制02(18分钟)

2-5 衣服权重绘制(9分钟)

2-6 头发制作和权重(19分钟)

第3章 第三章

3-1 表情制作原理与准备(9分钟)

3-2 表情制作01(35分钟)

3-3 表情制作02(42分钟)

3-4角色表情制作03(25分钟)

3-5 角色表情制作04(5分钟)

3-6元音制作(33分钟)

3-7 表情BS与绑定模型整合(10分钟)

3-8 口腔睫毛绑定制作(25分钟)

3-9 口腔睫毛眉毛驱动(19分钟)

第4章 第四章

4-1 角色材质整理和导出(33分钟)

4-2 导入到UE5和整理(12分钟)

4-3 角色材质添加(14分钟)

4-4 骨骼重指定和角色封装(5分钟)

4-5 头发动力学(8分钟)

第5章 第五章

5-1 语音唤醒 (10分钟)

5-2 ChatGPT接入(7分钟)

5-3 百度文心一言接入(5分钟)

5-4 离线大模型接入(7分钟)

5-5 星火大模型接入(12分钟)

5-6 本地知识库(9分钟)

第6章 第六章

6-1 语音合成(离线版本)(9分钟)

6-2 蓝图整合(离线版本)(9分钟)

6-3 环境制作和摄像机添加(12分钟)

6-4 眨眼动画制作 (11分钟)

6-5 角色动作自然随机切换(40分钟)

6-6 打包输出(离线版本)(24分钟)

6-7 Python环境安装(8分钟)

6-8 Audio2face接入虚拟人(16分钟)

6-9 动作随机切换(37分钟)

6-10 语音合成调用(7分钟)

6-11 抖音弹幕抓取交互(17分钟)

6-12 打包输出(Audio2face版本)(10分钟)

相关阅读

资源下载地址

隐藏内容
本内容需权限查看
  • 普通: 19.9金币
  • 年度会员: 免费
  • 永久会员: 免费
已有84人解锁查看

相关阅读

声明:本站所有文章,如无特殊说明或标注,均为本站原创发布。任何个人或组织,在未征得本站同意时,禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益,可联系我们进行处理。客服QQ:2350288510