产品基础使用问题
数字人合成平台支持哪些类型的数字人?不同类型数字人适用于什么场景?
平台支持2D数字人、3D数字人、写实数字人三类:
-
2D数字人:
基于Live2D技术,具备口型同步、表情动作库等功能,适用于轻量化应用场景(如客服咨询、简单科普)
-
3D数字人:
遵循WebGL协议,高精度口型同步+三维场景渲染,适用于高保真展示场景(如产品发布会、虚拟展厅)
-
写实数字人:
支持Wav2lip、musetalk等先进模型,具备声音克隆、全身视频拼接等功能,适用于直播带货、高端客服等需要真实感的场景
如何给数字人配置动作和唤醒词?支持哪些触发方式?
通过“数字人动作配置模块”操作:
-
基础配置:
关联动作参数与数字人形象,自定义触发条件和执行逻辑
-
唤醒/动作词设置:
可添加唤醒词(激活数字人)、停止词(休眠)、动作触发词(联动动作+播报)、表情触发词(联动表情+情感)
-
触发方式:
支持语音关键词识别(ASR)、摄像头识别(如检测人员出现触发打招呼)、外部设备信号(仅私有化定制版支持)、前端按键触发
知识库如何上传和更新?支持哪些文件格式?
通过“知识库管理模块”操作:
-
录入方式:
支持手动录入单条知识,或批量导入文件(兼容PDF、Word、TXT格式)
-
更新方式:
直接编辑已录入知识片段,或重新上传更新后的文件覆盖原有内容
-
数据安全:
本地部署版采用Milvus/Weaviate向量数据库存储,结合本地向量化模型,保障数据不泄露(轻量版仅支持Coze线上知识库)
语音识别和合成支持方言吗?能自定义声音吗?
-
方言支持:
线上ASR支持多种方言识别,识别准确率达98%以上(本地ASR无方言功能)
-
声音自定义:
仅平台版及以上支持声音克隆(本地TTS克隆相似度95%+),平台版/语音助手版限1个克隆声音,私有化版可按需定制;线上TTS提供100+种音色,支持语速、语调、情感风格调节
数字人可以发布到哪些设备?发布流程复杂吗?
-
支持设备:
基础支持电脑(Windows/macOS)、手机(iOS/Android)、平板、一体机;私有化版额外支持LED大屏、全息投影、移动机器人、自助终端等
-
发布流程:
简单便捷,提供三种标准化路径——生成PC客户端、Web嵌入组件、手机APP/小程序,支持API接口扩展对接第三方平台,发布前可在后台进行讲话测试、表情交互测试
二次开发相关问题
哪些版本支持二次开发?提供源码吗?
仅私有化定制部署版支持二次开发:
-
私有化定制部署版:
按需提供源码,适合具备二开能力的团队,支持深度定制(如扩展发布场景、对接专属智能设备、开发独特交互流程)
-
限制说明:
轻量版、平台版、语音助手版均不提供源码,无法二次开发
二次开发时,能接入第三方大模型或智能体吗?
可以,具体支持程度因版本而异:
-
平台版/语音助手版:
内置支持接入第三方大模型与智能体(无需二次开发):本地大模型基于Ollama标准接口,支持100+款主流LLM部署;线上模型兼容OpenAI接口,可接入chatgpt、豆包、kimi等;智能体支持fastGPT、Dify等开源框架本地部署,或对接云端服务
-
私有化定制部署版:
无厂商限制,线上/本地大模型、智能体均可自由接入,支持深度适配自有技术栈
二次开发中,如何扩展数字人的动作库或表情库?
仅私有化定制版提供源码,可基于源码扩展,核心步骤如下:
-
1.
新增动作/表情资源文件(需符合Live2D/WebGL等对应技术规范)
-
2.
在动作配置模块的源码中,添加新动作的编码、触发条件(如关键词、设备信号)
-
3.
关联动作与数字人形象,配置执行逻辑(如动作频次、与语音同步内容)
-
4.
通过发布接口测试新动作,确认兼容目标终端设备
能否二次开发对接自有业务系统(如CRM、ERP)?
可以,私有化定制版直接支持通过SDK/接口实现对接:
-
接口对接:
平台提供标准化API接口,可自定义修改接口路径,实现数字人与自有系统的数据互通(如从CRM获取客户信息,通过数字人进行精准服务)
-
私有化部署优势:
私有化版支持本地部署,可直接与内网业务系统对接,保障数据传输安全
二次开发时,语音模块能否替换为自有ASR/TTS引擎?
私有化定制版直接支持替换:
-
本地引擎替换:
本地ASR/TTS支持自定义部署开源引擎(如替换为自有优化的语音模型)
-
线上引擎替换:
线上引擎可脱离平台默认的阿里云、腾讯云等服务商,对接自有部署的ASR/TTS接口
-
限制说明:
轻量版、平台版、语音助手版固定使用平台预设引擎,无法替换
高级使用与场景适配问题
数字人的眼球跟随技术如何启用?需要额外硬件吗?
眼球跟随技术目前仅支持2D数字人,分两种模式启用:
-
基础模式:
无需额外硬件,后台开启“跟随鼠标/触摸”功能即可,数字人眼球实时追踪操作
-
进阶模式:
需搭配指定摄像头(如罗技C920e、海康威视DS-U1),仅私有化定制版支持该模式,可将摄像头纳入报价范围,开启后自动人脸追踪
如何实现数字人与安防设备联动(如告警时自动播报)?
仅私有化定制部署版支持该功能,配置步骤:
-
1.
在“动作配置模块”添加“告警播报动作”及对应语音内容
-
2.
通过平台提供的外部设备信号接口,对接安防设备的告警输出端
-
3.
设定触发逻辑:当安防设备发送告警信号时,自动触发数字人执行告警播报动作
多智能体协同工作如何配置?适用于什么场景?
通过“聚合智能体”功能实现(仅私有化定制部署版支持):
-
配置方式:
基于AgentSkills技术架构,在智能体管理模块中添加多个智能体,设置技能融合规则和协同逻辑(如一个智能体负责问答,一个负责动作控制)
-
适用场景:
复杂业务处理(如电商导购,智能体A解答商品问题,智能体B触发带货动作,智能体C对接订单系统)
本地部署版本如何保障大模型和知识库的运行效率?
平台通过架构优化保障效率:
-
知识库优化:
采用Milvus/Weaviate向量数据库,支持高效检索,批量导入海量知识后仍能快速匹配关键词
-
大模型优化:
基于Ollama框架优化部署,支持模型轻量化配置,适配不同硬件性能,本地响应延迟低于300ms
-
硬件建议:
部署时保障服务器CPU、GPU性能(推荐GPU显存≥16G),可进一步提升运行流畅度
数字人支持多并发访问吗?不同版本的并发限制是多少?
支持多并发访问,并发路数限制如下:
-
轻量版:
1路语音并发(同一时间仅1人可与数字人交互)
-
平台版/语音助手版:
3路语音并发,适合中小型团队或门店使用
-
私有化定制版:
无并发路数限制,支持大规模场景(如大型展会、多终端同步服务)