广州硅基技术3D数字人3D动画直播超写实3D数字人创作

全媒体交互式真3D数字人虚拟直播系统可实现：

一、超写实3D数字人创作模块：

★1.一键自定义捏脸、换装，千种形象任意搭配任

★2.资源库包含几十种静、动态人物常用动作，多种静态、动态表情、姿势，神态生动逼真

3.动作库可自行添加配置动作模组。

4.可直接将动作应用于角色预览，支持 720度全方位视角查看。

5.动作库自带分类，如静态动作、动态动作。

6.显示界面显示信息包括：动作持续时长、数据类型等

7.主流的动作文件，可应用于3DMax、Maya、MotionBuilder、Unity3D、UnrealEngine4 等主流 3D软件及开发引擎使用。

8.资产管理：资产库、交易中心、教程文档

9.可以实现3D数字人面部细节的雕刻、发行颜色等变换

10.支持3D数字人服装颜色材质任意改变，服装贴图一键上传

11.海量3D场景道具，个性搭建，可设置直播间背景和前景，道具和贴图，背景音乐

12.自定义运镜效果，支持直播内容预览和储存，支持视频云端存储和本地播放。满足大片级视觉享受

二、动捕数字人交互模块：

1.可任意切换虚拟角色及场景

2.支持自定义角色模型导入

3.支持实时光照，呈现实时的光影效果.

4.支持自定义制定环境光颜色，

5.支持区域灯光开关控制，人体主光灯，人体辅助灯光，环境光

★6.海量3D场景道具，屏幕，展示台，建筑，装饰，自然，其他等多种个性搭建，可设置直播间背景和前景，道具和贴图，背景音乐

★7.自定义运镜效果，静态运镜，动态运镜。支持直播内容预览和储存，支持视频云端存储和本地播放。满足大片级视觉享受

8.多种静态、动态表情、姿势，神态生动逼真。

9.支持面容实时驱动捕捉真人脸部。

10.支持多种惯性动作捕捉设备，和单目摄像头实时驱动模型。

三、数字人智能交互模块：

3.1.1 AI数字人交互软件（含模型）

★1.定制大模型问答库，可开放对接国内大模型的接口能力（可调用API）

★2.支持对话交互功能：包括AI驱动动作逻辑、动捕设备预置动作、语音驱动表情和面部捕捉训练表情，以实现动作与表情的协同和融合。支持ai弹幕互动，比如问答互动（本地库，公用库）、行为互动（比如跳舞、抱抱、跑、蹦高等）、定时互动；

3.基于人工智能技术和深度学习模型的虚拟人形象；

★4.复杂的算法和模型训练，数字人呈现出逼真的外观、动作和语音表达；通过Audio toFace技术，我们能根据语音信号自动生成与语音内容匹配的面部表情。我们还利用高精度面部捕捉技术收集丰富的表情数据，训练虚拟人的表情模型，提高表情逼真度；

5.实时交互沟通；

6.硬件加密;

7.支持PBR、实时渲染；

8支持Lumen实时响应场景；

★9.支持语音、文本、键盘、鼠标、触屏、预设指令、手柄、Optitrack等多模态输入；

10.支持实时语音识别和转换；

11.包含预设动作，支持动作定制。动作丰富自然流畅无卡点；

12.支持软件界面定制。

3.1.2 AI语音大模型驱动

1.软件适用性强、交互方式简单、高度可视化；

2.个性化对话内容定制；

3.结合大模型实现更准确、自然的问答结果；

4支持大模型定制化；

5.支持多并发；

6.支持敏感词屏蔽；

7.支持公有云、私有云和本地部署；

★8.支持长文本转短文本、长文本撰写、智能问答、短文本交流等AIGC算法；

9.知识库/问答库提供丰富的参数设置，支持为数字人配置专属的行业知识和能力，实现更加的服务能力；

3.1.3 声音定制

1.采用的语音合成技术和音频处理算法；

2.参数可调整，包括音调、音色、语速等；

3.个性化定制服务，满足特定场景的要求；

4.安全防卫功能，防止克隆声音泄露；

3.1.4 AI智能短视频

★1.Ai播报功能，上传文本、音频即可一键驱动，快速生成短视频

★2.支持长传图片或视频，识别图片视频内容，快速生成直播文本

支持段落文案画中画，支持段落穿插引导直播脚本：打招呼、求关注、互动形式介绍、感谢语等。

3.支持AI创作短视频脚本文案；输入关键词或描述语，AI自动生成文案脚本；可复制文案

创作入口，数字资产列表展示，内置5个数字营销场景

四、XR虚拟演播系统

1.海量3D场景道具，屏幕，展示台，建筑，装饰，自然，其他等多种个性搭建，可设置直播间背景和前景，道具和贴图，背景音乐

2.自定义运镜效果，静态运镜，动态运镜。支持直播内容预览和储存，支持视频云端存储和本地播放。

★3.支持一键抠像、多路高精度抠像、资源管理、特技切换台、调音台、多场景切换、本地素材播放、区域遮挡、局部抠像、阴影倒影、虚拟灯光等设置

★4.需要提供场景编辑软件，编辑软件能对场景中的物件进行大小，位置，纹理贴图等属性进行调整；并且支持导入3DS、FBX、OBJ和X等格式的模型文件以及jpg、png、bmp等图片文件的导入

5.支持手柄控制720度运镜动态模式

6.需支持一次性载入多个场景，场景之间可做特技快速切换，可边播边载入场景。

7.产品采用物理渲染引擎

8.需支持过高精度三角形和四角形面片数组成的三维模型场景，纹理贴图容量不小于20G。

9.场景中需支持添加多盏虚拟灯光，且能独立调整没盏灯光的位置和方向；灯光调整后，虚拟物体的表面亮度会跟着一起变化，以实现动态光效；

★10.场景中大屏物件需要支持可替换为本地视频、图片、PPT、摄像机信号、IVGA信号、网络信号等；大屏物件的纹理支持“播出动画”效果，且运动方向和速度可调

★11.需要支持混合编单，能把场景、前景、图文等节目元素放到一个播出单中；播出单能通过快捷键控制，以实现快速播出的效果

12.需要支持虚拟变焦效果；近景人物清晰，背景变虚；远景人物及背景都清晰。（此项功能需提供视频演示）

13.需要支持视频、图片及音频等素材的预览及设置入出点；并且可以一起放到播单中播放；素材需要支持预加载，以保证素材的完整播出；支持多种播放方式，例如：顺序播放、循环播放、断点播放、备播等；素材支持添加过度特技

14.包含新闻播出单模块、新闻模板管理模块、新闻模板属性编辑模块、新闻播出预览模块