电商网站智能推荐
电商网站智能推荐基于阿里巴巴的大数据和人工智能技术，结合在电商行业的多年积累，为开发者提供个性化推荐服务，提升商品的购买率和转化率。概述 本实践以电商网站为例，通过日志服务采集日志，将RDS作为后端数据服务、MaxCompute作为数据...
自动化治理-物化视图
当您在面对大数据计算任务频繁且存在大量相似子查询场景时，DataWorks支持自动化治理，智能推荐物化视图，为您提供了一种智能化、自动化的解决方案。当您启用此功能时，DataWorks能够自动识别和分类MaxCompute中的相似子查询，并生成物化...
服务测试
测试过程中，您触发的行为数据智能推荐将自动为您推送到系统中，并可在行为消息中查看记录。同样地，如果您部署在APP/小程序/PC端时，终端用户实时发生的行为同样需要同步给智能推荐。体验测试使用如下：通过点击体验测试的返回结果中的...
产品概述
产品描述 Dataphin是集产品、技术、方法论于一体的智能大数据平台建设引擎，为您提供数据引入、规范定义、建模研发、资产管理、数据服务等全链路智能数据建设及治理服务。功能 描述 Dataphin全托管 全托管又称公共云多租户模式，只需购买...
效果测试期及控制台中的问题
曝光数据对于智能推荐而言是必须数据，如果您没有曝光数据，在初始化启动服务时需要构造曝光数据，并埋点采集曝光行为以增量形式上报。目前智能推荐支持多种行为，具体参考各行业的数据规范：电商行业、新闻行业、内容行业，算法模型训练的...
创建数据源
目前智能推荐的全量数据源只支持ODPS，您需要先将全量启动数据上传至对应的DataWorks（MaxCompute：原ODPS）项目中。如果已经有ODPS的项目，可以忽略此步骤。DataWorks（数据工场）是基于MaxCompute（原ODPS）作为核心的PaaS平台产品，详情...
代码智能推荐
本文介绍过滤器中代码的智能推荐功能。该功能可以利用AI模型帮助用户生成组件数据处理的代码。用户可以在对话框中描述数据处理的需求，并支持对推荐的代码内容进行修改。前提条件 已登录DataV控制台 已进入画布编辑器页面 操作步骤 在当前...
数据源
实时数据源配置：您需要确认上传的行为数据中是否包含曝光/traceInfo数据，这两类数据对于智能推荐算法来说是必须的。如果您暂时没有办法提供准确的曝光/traceInfo数据，选择“否，需特殊处理”后AIRec可以自动补足曝光/traceInfo数据，以...
快速启动AIRec冷启动版
二、数据准备 使用智能推荐冷启动版服务时，您需要上传三张表的数据，分别为用户表、物品表、与行为表，上传规范详见：冷启动版数据规范 说明 行为表需要圈选至少20万用户的历史行为数据上传，作为初始数据用于训练模型，以便提供后续推荐...
产品概述
AIRec智能推荐 阿里云智能推荐AIRec（Artificial Intelligence Recommendation，简称AIRec）基于阿里巴巴大数据和人工智能技术，结合在电商、内容、新闻资讯、视频直播和社交等多个行业领域的积累，为全球企业及开发者提供个性化推荐服务。...
曝光过滤实现
未来智能推荐也会提供其他产品使用户可以方便串联智能召回引擎与Redis等其他存储引擎。在请求召回引擎前，您需要从其他存储引擎曝光数据的item_id。使用filter子句完成曝光过滤 在查询请求中，使用filter子句，将曝光物品过滤掉，达到曝光...
离线存储授权
一、操作场景 I 通过自有MaxCompute历史数据启动 登录智能推荐控制台。2.在创建实例时选择历史数据启动，配置启动数据源、配置实时数据源、配置离线数据源详见：通过历史数据启动实例。重要 1、在配置启动数据源之前，需要在MaxCompute中...
什么是智能推荐AIRec
阿里云智能推荐AIRec（Artificial Intelligence Recommendation，简称AIRec）基于阿里巴巴大数据和人工智能技术，结合在电商、内容、新闻资讯、视频直播和社交等多个行业领域的积累，为全球企业及开发者提供个性化推荐服务。您只需要按约定...
数据查询
通过数据查询功能，您可以查看您推送至AIRec智能推荐服务的数据推送记录，以及查询实例现有user表、item表中的数据。推送消息记录查询 用户和物品的信息可以多次更新，用户行为也可以重复产生（如复购），每次都会产生一条更新记录。您可以...
全量数据管理概述
数据源相关概念 目前智能推荐系统的数据源只支持MaxCompute（ODPS），后续会陆续开放OSS，RDS等其他方式。MaxCompute：大数据计算服务（MaxCompute，原名ODPS）是一种快速、完全托管的TB/PB级数据仓库解决方案，详情参见 MaxCompute 表：表...
通过全服务端SDK快速启动实例
IV 配置离线存储 您可以设置您的离线数据存储（实时数据源的离线存储位置），您可以选择将这部分数据直接写回您的自有MaxCompute，也可以写到智能推荐的MaxCompute，由智能推荐托管。开通离线存储，代表将智能推荐服务训练所需的离线数据...
通过友盟+服务端SDK快速启动实例
选择友盟应用 IV 配置离线存储 您可以设置您的离线数据存储（实时数据源的离线存储位置），您可以选择将这部分数据直接写回您的自有MaxCompute，也可以写到智能推荐的MaxCompute，由智能推荐托管。开通离线存储，代表将智能推荐服务训练所...
数据对接期
曝光数据作为用户后续任何行为数据的前提，对于智能推荐算法来说是必须的，但如果您暂时没有办法提供准确的曝光数据，您可以选择让AIRec智能推荐自动补足曝光数据，以快速启动实例。如您需要开启此功能：操作设置：在智能推荐控制台中，...
数据埋点指南
本文通过新闻行业举例说明，智能推荐适合什么样的场景，需要怎么样的埋点数据进行模型训练。使用业务场景 以智能推荐的 猜你喜欢、新闻行业 为例，适用于首页的feed流推荐，以优化用户的点击率为主。如下图所示：目的为通过终端用户的浏览...
SQL增强操作
功能 是否支持 限制 云原生大数据计算服务MaxCompute-EXPLAIN 是 无 云原生大数据计算服务MaxCompute-CLONE TABLE 是 无 云原生大数据计算服务MaxCompute-参数化视图 是 创建参数化视图 不支持表值参数table。支持any以及MaxCompute的所有...
技术架构选型
本教程中使用阿里云大数据产品Dataphin配合MaxCompute，完成整体的数据建模和研发流程。完整的技术架构如下图所示。其中，Dataphin的数据集成及同步负责完成源业务系统数据引入。MaxCompute作为整个大数据开发过程中的离线计算引擎。...
冷启动版功能详解
冷启动版简介 新用户冷启动版是AIRec智能推荐针对冷启动场景特殊优化的版本，依靠大流量用户访问、留存、LTV提升为目的，推荐给主要目标是希望提升新用户留存效率、效果的客户选择并使用。冷启动版会结合友盟+产品，利用友盟+数据洞察...
获取推荐结果（冷启动版）
概述 本篇文档将介绍如何从AIRec智能推荐服务获取推荐结果数据，当您请求获取推荐结果的接口时，推荐结果数据将以JSON格式回传给您。本篇文档内容适用版本：冷启动版。参数说明 请求参数：参数 类型 描述 是否必填 userId string 用户唯一...
Dataphin支持的实时数据源
Ververica Flink支持的实时数据源 存储类型 数据源类型 读 写 维表读 大数据存储 MaxCompute 支持 支持 支持 DataHub 支持 支持-Hologres 支持 支持 支持 数据湖 Hudi 支持 支持-Iceberg 支持（仅支持原生DDL方式）支持（仅支持原生DDL方式...
Dataphin支持的实时数据源
Ververica Flink支持的实时数据源 存储类型 数据源类型 读 写 维表读 大数据存储 MaxCompute 支持 支持 支持 DataHub 支持 支持-Hologres 支持 支持 支持 数据湖 Hudi 支持 支持-Iceberg 支持（仅支持原生DDL方式）支持（仅支持原生DDL方式...
准备工作
测试数据 智能推荐服务提供了可以用来测试的数据，您可以从下面的链接中下载对应的数据。下载链接：测试数据下载地址。二、核对行为埋点逻辑是否符合规范 智能推荐需要至少具备曝光、点击行为数据，并且曝光数据要大于点击数据。详细的内容...
数据集成支持的数据源
离线集成支持的数据源 数据源 读取 写入 大数据存储型数据源 MaxCompute 支持 支持 Hologres 支持 支持 IMPALA 支持 支持 TDH Inceptor 支持 支持 StarRocks 支持 支持 Hudi 支持 支持 Doris 支持 支持 GreenPlum 支持 支持 TDengine 不...
基本概念
DataWorks：数加·Dataworks是一个提供了大数据OS能力、并以all in one box的方式提供专业高效、安全可靠的一站式大数据智能云研发平台。同时能满足用户对数据治理、质量管理需求，赋予用户对外提供数据服务的能力。友盟SDK：客户端SDK用于...
数据集成支持的数据源
离线集成支持的数据源 数据源 读取 写入 大数据存储型数据源 MaxCompute 支持 支持 Hive 支持 支持 Hologres 支持 支持 IMPALA 支持 支持 TDH Inceptor 支持 支持 Kudu 支持 支持 StarRocks 支持 支持 Hudi 支持 支持 Doris 支持 支持 ...
创建MaxCompute数据源
背景信息 MaxCompute即阿里云大数据计算服务，适用于数据分析场景的企业级SaaS（Software as a Service）模式云数据仓库，以Serverless架构提供快速、全托管的在线数据仓库服务，消除了传统数据平台在资源扩展性和弹性方面的限制，最小化...
创建MaxCompute数据源
背景信息 MaxCompute即阿里云大数据计算服务，适用于数据分析场景的企业级SaaS（Software as a Service）模式云数据仓库，以Serverless架构提供快速、全托管的在线数据仓库服务，消除了传统数据平台在资源扩展性和弹性方面的限制，最小化...
数据源白名单配置
产品名称 操作说明 云原生大数据计算服务MaxCompute 设置白名单 实时数仓Hologres IP白名单 云数据库ClickHouse 设置白名单 消息队列Kafka版 配置白名单 云原生分布式数据库PolarDB-X 设置白名单 云原生分布式数据库PolarDB-X（2.0）设置白...
创建Hudi数据源
背景信息 Hudi即Apache Hudi，Hudi是一个通用的大数据存储系统，将核心仓库和数据库功能直接引入到数据库中，并支持记录级别的插入更新和删除数据的能力。权限说明 仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据...
指标监控及报警的使用方法
相关概念 运行指标 智能推荐将实例的动态情况汇总计算产生的关于实例状态的数据指标。智能推荐系统持续的产生指标，用户不需要关心指标的计算流程。云监控 阿里云平台的产品。智能推荐将计算好的运行指标同步到云监控，用户通过 云监控控制...
创建Hudi数据源
背景信息 Hudi即Apache Hudi，Hudi是一个通用的大数据存储系统，将核心仓库和数据库功能直接引入到数据库中，并支持记录级别的插入更新和删除数据的能力。更多信息，请参见 Apache Hudi官网。权限说明 仅支持 超级管理员、数据源管理员、...
创建Impala数据源
通过创建Impala数据源能够实现Dataphin读取Impala的业务数据或向Impala写入数据。本文为您介绍如何创建Impala数据源。背景信息 Impala是用于处理存储在Hadoop集群中大量数据的SQL查询引擎。如果您使用的是Impala，在导出Dataphin数据至...
配置DataHub输出组件
配置DataHub输出组件，可以将外部数据库中读取数据写入到DataHub，或从大数据平台对接的存储系统中将数据复制推送至DataHub，进行数据整合和再加工。本文为您介绍如何配置DataHub输出组件。前提条件 已创建DataHub数据源。具体操作，请参见...
配置DataHub输出组件
配置DataHub输出组件，可以将外部数据库中读取数据写入到DataHub，或从大数据平台对接的存储系统中将数据复制推送至DataHub，进行数据整合和再加工。本文为您介绍如何配置DataHub输出组件。前提条件 已创建DataHub数据源。具体操作，请参见...
配置DM（达梦）输出组件
配置DM（达梦）输出组件，可以将外部数据库中读取的数据写入到DM（达梦），或从大数据平台对接的存储系统中将数据复制推送至DM（达梦），进行数据整合和再加工。本文为您介绍如何配置DM（达梦）输出组件。前提条件 已创建DM（达梦）数据源...
配置DM（达梦）输出组件
配置DM（达梦）输出组件，可以将外部数据库中读取的数据写入到DM（达梦），或从大数据平台对接的存储系统中将数据复制推送至DM（达梦），进行数据整合和再加工。本文为您介绍如何配置DM（达梦）输出组件。前提条件 已创建DM（达梦）数据源...
- 产品推荐
- 这些文档可能帮助您