通过阅读本文,您可以了解如何快速在阿里云上构建AI实时互动能力。
购买指南
您可以通过购买功能体验月包的方式,来体验AI实时互动功能。体验包购买,请前往功能体验月包。
如果您需要使用阿里云AI实时互动服务,您需要满足以下条件:
智能体服务企业订阅版本升级为标准版或旗舰版。订阅版本升级,请前往智能媒体服务订阅模式。
开通AI实时互动功能。功能开通,请前往功能购买。
企业订阅服务中的订阅金额可用于抵扣后续功能使用所产生的费用。不同的订阅版本,所享受的抵扣折扣不同,具体请参考企业订阅服务。
快速构建概览
五步快速构建AI实时互动能力:
编排实时工作流:根据需求自定义工作流模板或使用预置工作流模板,使智能体按照既定流程进行工作。目前支持您选择创建语言通话或3D数字人通话类型的工作流模板。每个工作流均已预先配置节点,包括RTC、TTS(文本转语音)、STT(语音转文本)、LLM(大语言模型)、3D数字人等节点,以确保智能体在各种情况下高效运作。
准备ARTC应用:ARTC提供了低延迟的音视频通信能力,使得用户与智能体之间交互更加流畅自然,为AI实时互动建立起实时音视频通信的基础。
创建智能体:根据用户的需求选择实时工作流和ARTC应用,定制一个全新的智能体,直接与最终用户进行音视频交互。
体验智能体:您可以通过在客户端扫描体验二维码,以体验您刚才创建的智能体。
集成智能体:将智能体集成到自己的应用中,让智能体按照工作流在实时音视频中运行,实现AI实时互动的能力。
第一步 编排实时工作流
实时工作流主要用于智能体中,智能体需要依赖实时工作流编排的流程进行工作。系统中已包含实时工作流的系统预置模板提供使用,如需自定义实时工作流请参照以下步骤:
登录智能媒体服务控制台。
左侧导航栏单击AI实时互动,进入工作流管理。
工作流管理中可查看系统预置模板、自定义模板、定制模板。
点击管理可查看工作流详情。
创建自定义模板,请参见创建与管理工作流模板。
第二步 准备ARTC应用
ARTC是智能体和用户之间建立起实时音视频通信基础,实现AI实时互动需要准备一个ARTC应用,如果当前没有可以使用的ARTC应用,参照以下步骤创建ARTC应用:
登录视频直播控制台。
在左侧导航栏单击
。单击创建应用。
填写自定义的实例名称,勾选服务协议后,点击立即购买。
提示开通成功后,刷新应用管理页面,即可查看您新建的实时音视频应用。
说明创建应用默认不产生费用 , 实际按照您具体云上用量后付费。更多信息,请参见实时音视频费用。
第三步 创建智能体
智能体是AI实时互动的核心,是与用户进行互动的对象,您可以自定义满足自己需求的智能体。
第四步 体验智能体
当前仅华东2(上海)地区支持体验智能体功能
智能体创建完成后,您可以使用Demo扫描体验二维码来进行智能体的体验。
扫描下面二维码并安装(或复制扫描后的地址至浏览器进行下载并安装)体验Demo。
在控制台生成Demo体验二维码。
在终端设备上扫描生成的Demo体验二维码。
第五步 集成智能体
完成了智能体的创建后,接下来就是把智能体应用起来,将智能体集成到自己的应用中,请参见总览。