AI实时互动快速入门

通过阅读本文,您可以了解如何快速在阿里云上构建AI实时互动能力。

购买指南

您可以通过购买功能体验月包的方式,来体验AI实时互动功能。体验包购买,请前往功能体验月包

如果您需要使用阿里云AI实时互动服务,您需要满足以下条件:

说明
  • 企业订阅服务中的订阅金额可用于抵扣后续功能使用所产生的费用。不同的订阅版本,所享受的抵扣折扣不同,具体请参考企业订阅服务

快速构建概览

五步快速构建AI实时互动能力:

  1. 编排实时工作流:根据需求自定义工作流模板或使用预置工作流模板,使智能体按照既定流程进行工作。目前支持您选择创建语言通话或3D数字人通话类型的工作流模板。每个工作流均已预先配置节点,包括RTC、TTS(文本转语音)、STT(语音转文本)、LLM(大语言模型)、3D数字人等节点,以确保智能体在各种情况下高效运作。

  2. 准备ARTC应用:ARTC提供了低延迟的音视频通信能力,使得用户与智能体之间交互更加流畅自然,为AI实时互动建立起实时音视频通信的基础。

  3. 创建智能体:根据用户的需求选择实时工作流和ARTC应用,定制一个全新的智能体,直接与最终用户进行音视频交互。

  4. 体验智能体:您可以通过在客户端扫描体验二维码,以体验您刚才创建的智能体。

  5. 集成智能体:将智能体集成到自己的应用中,让智能体按照工作流在实时音视频中运行,实现AI实时互动的能力。

image

第一步 编排实时工作流

实时工作流主要用于智能体中,智能体需要依赖实时工作流编排的流程进行工作。系统中已包含实时工作流的系统预置模板提供使用,如需自定义实时工作流请参照以下步骤:

  1. 登录智能媒体服务控制台

  2. 左侧导航栏单击AI实时互动,进入工作流管理。

  3. 工作流管理中可查看系统预置模板、自定义模板、定制模板。

    image

  4. 点击管理可查看工作流详情。

    image

  5. 创建自定义模板,请参见创建与管理工作流模板

第二步 准备ARTC应用

ARTC是智能体和用户之间建立起实时音视频通信基础,实现AI实时互动需要准备一个ARTC应用,如果当前没有可以使用的ARTC应用,参照以下步骤创建ARTC应用:

  1. 登录视频直播控制台

  2. 在左侧导航栏单击直播+ > 实时音视频 > 应用管理

  3. 单击创建应用

  4. 填写自定义的实例名称,勾选服务协议后,点击立即购买。

    image

  5. 提示开通成功后,刷新应用管理页面,即可查看您新建的实时音视频应用。

    说明

    创建应用默认不产生费用 , 实际按照您具体云上用量后付费。更多信息,请参见实时音视频费用

第三步 创建智能体

智能体是AI实时互动的核心,是与用户进行互动的对象,您可以自定义满足自己需求的智能体。

  1. 登录智能媒体服务控制台

  2. 左侧导航栏单击AI实时互动,进入智能体管理。

  3. 单击创建智能体,请参见创建与管理智能体

    image

第四步 体验智能体

说明

当前仅华东2(上海)地区支持体验智能体功能

智能体创建完成后,您可以使用Demo扫描体验二维码来进行智能体的体验。

  1. 扫描下面二维码并安装(或复制扫描后的地址至浏览器进行下载并安装)体验Demo。

    image

  2. 控制台生成Demo体验二维码。

    image

  3. 在终端设备上扫描生成的Demo体验二维码。

    image

第五步 集成智能体

完成了智能体的创建后,接下来就是把智能体应用起来,将智能体集成到自己的应用中,请参见总览