AI数字人定制,融合Maya建模与UE5技术,实时语音交互,打造个性化虚拟角色

课程亮点:
这套AI数字虚拟人定制课程,将虚拟人制作技术与AI大模型技术巧妙融合,涵盖了当前市场上最主流的核心技术。通过学习,你将真正掌握如何打造属于自己的定制化产品,让创意落地成为现实。
课程注重实践,通过丰富的项目练习巩固理论知识,提升你的实际操作能力。同时,我们还提供就业与职业指导,帮助你更好地融入行业,增强职场竞争力。
温馨提示:本课程仅供教学使用,不提供对应源码,请提前知悉。
行业前景:
随着实时语音交互需求不断增长,AI数字虚拟人定制市场正蓬勃发展,前景广阔。本课程旨在培养专业的AI数字虚拟人才,让你掌握虚拟人定制开发、AI大模型接入、实时语音交互等核心技能,为企业提供创新解决方案。
成功案例包括智能客服、前台智能助理、数字人直播等,这些应用在商业上具有巨大价值。用数字人代替人工,能够实现降本增效。学习这一领域,将为你创造广泛的就业机会,成为未来数字化时代的关键人才。
你将学到什么:
课程将带你从零开始,通过定制超写实角色,完整跑通AI数字人的一整套交互技术。在Maya建模部分,你将掌握模型基础知识、骨骼建立、表情制作、动力学等技术。通过UE5,你将学习材质贴图、各类大模型接入、本地知识库批量存储、语音唤醒、语音合成,以及Audio2face实时面部驱动等技能。最终,你将能独立制作出可用于落地的AI数字虚拟人。
课程内容概览:
第一章:Maya角色基础篇
课程介绍与角色选定、数字人环境安装与搭建、Maya约束基础、Maya蒙皮基础、Maya融合变形基础。
第二章:Maya角色高级骨骼技术
角色基础骨骼搭建、角色衣服头发骨骼搭建、蒙皮权重绘制、角色蒙皮权重传递、头发动力学。
第三章:Maya角色高级表情技术
角色表情制作基础、表情BlendShape制作、元音制作技术、表情绑定和权重传递、角色其他部位绑定与驱动、材质设定和导出设定。
第四章:UE5角色基础设定
角色模型和场景导入设置、虚拟场景材质设置、眼球/身体/头发材质制作、骨骼重指定和角色封装、头发动力学。
第五章:UE5大模型接入
语音识别唤醒角色、ChatGPT大模型接入、离线大模型接入、百度文心一言接入、星火大模型接入、本地知识库(本地服务器批量存储)、场景搭建和摄像机设置。
第六章:UE5实时语音交互
语音合成(离线版本)、蓝图整合(离线版本)、眨眼睛动画制作、角色动作自然随机切换、打包输出(全离线版本)、Python环境安装、Audio2face接入虚拟人、动作随机切换(Audio2face版本)、语音合成调用API、抖音弹幕抓取直播、打包输出(Audio2face版本)。
详细课时安排:
第一章(共5课时,约62分钟):1-1 教学课程介绍和角色选定(3分钟)、1-2 数字人环境安装与搭建(7分钟)、1-3 Maya约束基础(16分钟)、1-4 Maya蒙皮基础(19分钟)、1-5 Maya的Blendshape融合变形基础(17分钟)。
第二章(共6课时,约106分钟):2-1 角色骨骼建立01(17分钟)、2-2 角色骨骼建立02(8分钟)、2-3 角色权重绘制01(35分钟)、2-4 角色权重绘制02(18分钟)、2-5 衣服权重绘制(9分钟)、2-6 头发制作和权重(19分钟)。
第三章(共9课时,约203分钟):3-1 表情制作原理与准备(9分钟)、3-2 表情制作01(35分钟)、3-3 表情制作02(42分钟)、3-4 角色表情制作03(25分钟)、3-5 角色表情制作04(5分钟)、3-6 元音制作(33分钟)、3-7 表情BS与绑定模型整合(10分钟)、3-8 口腔睫毛绑定制作(25分钟)、3-9 口腔睫毛眉毛驱动(19分钟)。
第四章(共5课时,约72分钟):4-1 角色材质整理和导出(33分钟)、4-2 导入到UE5和整理(12分钟)、4-3 角色材质添加(14分钟)、4-4 骨骼重指定和角色封装(5分钟)、4-5 头发动力学(8分钟)。
第五章(共6课时,约50分钟):5-1 语音唤醒(10分钟)、5-2 ChatGPT接入(7分钟)、5-3 百度文心一言接入(5分钟)、5-4 离线大模型接入(7分钟)、5-5 星火大模型接入(12分钟)、5-6 本地知识库(9分钟)。
第六章(共12课时,约200分钟):6-1 语音合成(离线版本)(9分钟)、6-2 蓝图整合(离线版本)(9分钟)、6-3 环境制作和摄像机添加(12分钟)、6-4 眨眼动画制作(11分钟)、6-5 角色动作自然随机切换(40分钟)、6-6 打包输出(离线版本)(24分钟)、6-7 Python环境安装(8分钟)、6-8 Audio2face接入虚拟人(16分钟)、6-9 动作随机切换(37分钟)、6-10 语音合成调用(7分钟)、6-11 抖音弹幕抓取交互(17分钟)、6-12 打包输出(Audio2face版本)(10分钟)。
会员资源
会员用户免费查看此资源升级会员
