yesPmp

全流程一条龙制作，交付EXE，用户穿上捕捉设备，打开软件直接就可以串流，进行视频录制、直播等。

功能细节：

1 多终端统一控制

展厅智能化总控平板APP集成所有数字人终端的控制功能，具体功能如下：

1.     数字人终端选择

通过平板/其他控制设备（甲方提供）列表的形式可选择任意指定的数字人终端进行操作。

2.     实时智能交互

平板/其他控制设备（甲方提供）选择指定的数字人终端，按下对话按键对平板进行语音输入操作，指定的数字人在其对应的终端上进行实时反馈。

3.     播放指定动画

平板/其他控制设备（甲方提供）选择指定的数字人窗口，通过不同按键控制该数字人播放指定的预设动画，包括脚本、动作、表情。

4.     终端语音设备开启/关闭

平板/其他控制设备（甲方提供）选择指定终端窗口下达指令，数字人进行回复硬件设备上的麦克风音量控制（甲方程序完成），以避免参观过程中的干扰问题。

2 灵活部署

可以通过服务器端统一部署，适配多种多个显示硬件，包括但不限于全息展示柜、智慧大屏、一体机等。

3 语音交互                                         

1.多模态输入

支持识别语音/文本输入。

2. 语音输出

开放NLP模型接口，配合接入指定的LLM，同时配置好ASR、STA、TTS等大模型。

3. 知识库及数据查询

通过ASR语音识别，NLP自然语言处理，准确识别用户意图，调取指定LLM知识库部分的知识和数据并进行语音输入。

4. 多媒体素材调用及退出

识别到大模型知识库中对应部分包括图片、视频、链接等素材时，（暂定）通过web弹窗的形式弹出素材，通过平板按键或者默认计时素材自动关闭反馈数字人对话场景。通过按键或者语音可弹出预设的二维码。

5.     唇形驱动

卡通数字人进行语音输出时，数字人进行文本识别进行动画匹配。

4 智能迎宾

针对入口区数字人全息展示柜，配置红外线识别器，可辨识访客是否站在机器面前，当捕捉到访客信息时，自动播放预设的欢迎动画。

5 数字人显示/隐藏

针对指挥中心智慧大屏终端，可通过平板控制数字人的显示/隐藏，并预设登场/退场动画。