AIAgentConfig

asr 语种 Id。 可选：

• zh_mandarin 中文

• en 英文

• zh_en 中英混

• es 西班牙语

• jp 日语

语音断句检测阈值，静音时长超过该阈值会被认为断句，参数范围 200ms～1200ms，默认值 400ms。

Asr 热词列表。热词列表最大支持 128 个词。

打断阈值参数。取值范围：[0,11], 默认值：11。

• 0 表示关闭 vad 功能。
• 1-10 设置数字越高表示越难打断。
• 11 与之前显著不同，前处理对话音损伤更低，抗干扰更强。

asr 自研接入透传参数。

语音活动检测的最短持续时间阈值，用于控制打断的灵敏度。0 表示关闭此功能。有效范围：200 到 2000 毫秒。常用[200,500] 对应 1-4 个字。默认为空，不生效。

音色 ID，修改后下句话生效。不填写则使用智能体模版配置的音色 ID。仅针对预置 TTS 生效。输入长度不超过 64。可选值参考：智能语音效果示例。

可选音色列表。

TTS 发音规则，数组长度不超过 20 个，规则按顺序执行。

当前仅支持 minimax，可选值： speech-01-turbo / speech-02-turbo

当前仅支持 minimax，默认为空。增强对指定的小语种和方言的识别能力，设置后可以提升在指定小语种/方言场景下的语音表现。如果不明确小语种类型，则可以选择"auto"，模型将自主判断小语种类型。支持以下取值：

当前仅支持 minimax，minimax 当前支持 7 种情绪：

• happy：高兴
• sad：悲伤
• angry：愤怒
• fearful：害怕
• disgusted：厌恶
• surprised：惊讶
• calm：中性

支持全平台。 cosyvoice 默认 1.0，取值范围：0.5-2.0。 minimax 默认 1.0， 取值范围: 0.5-2.0。

llm/mllm 历史对话上下文

llm/mllm 历史对话上下文最大保留轮次，默认 10 次。

启动通话后 llm 的系统提示词。

阿里云百炼应用中心参数，类型为 JSON 字符串。参数格式参考： 阿里云百炼应用中心参数

额外的 OpenAI 协议 LLM 的查询参数, 参数必须使用 key=value 格式,多个参数用 & 连接,所有值必须为字符串类型。

开启后，llm 回复完整结果之后，智能体会向客户端发送完整 llm 结果。此开关不影响字幕的流式生成。

功能映射列表，用于将智能体能力与 LLM 函数对应。当前只支持和用户自定义 openai 协议 llm 的函数调用。

文本输出最小长度（字符数），小于该长度的文本会被缓存等待拼接，范围[0, 100]，0 或空表示不限制，默认空。

文本输出最大延迟时间（毫秒），超过该时间强制输出已缓存文本，。范围[1000,10000]，0 或空表示不限制，默认空。

大模型消息历史，是否和 tts 播放内容保持一致。默认 false。开启后，保存的大模型消息和 tts 播放内容保持一致。

数字人的模型 id。

是否支持语音打断，默认 true。

触发对话中断的特定词汇或短语列表。

是否使用声纹识别的开关。默认值：false。开启声纹时需要传入合法的声纹 Id

声纹识别的唯一身份 ID。默认值：不填。传入的声纹 id 必须已经通过声纹注册接口注册，接口文档参考：注册人声声纹

用于判断用户轮次结束的关键词列表。

轮次检测的模式。

• Normal（默认值）：普通模式，不使用 AI 判断语义；

• Semantic：用 AI 根据上下文语义，判断是否说完话了。

AI 模式下的停顿判定时间，单位:毫秒，默认值-1。

• -1: AI 自动判断合适的等待时间

• 0-10000: 自定义等待时间，建议设置在 0-1500ms

画面静止帧检测配置。

画面无效帧检查参数配置。

人数统计功能配置。

设备识别配置。

头部动作识别配置。

视线偏移识别配置。

通话环境音 ID，可以在控制台上智能体配置的高级配置中获取。

通话背景音的音量，可选值：[0, 100]，0 表示关闭。

用户长时间静默时的问询播报配置。

LLM 响应延迟时的播报配置。