VPC NAT网关发布公告
阿里云发布VPC NAT网关，VPC NAT网关通过自定义SNAT、DNAT规则转换私网地址到特定的私网地址，适用于混合云使用指定地址互访、VPC互访地址冲突等场景。VPC NAT网关简介 VPC NAT网关能够为VPC内的ECS实例提供网络地址转换服务，使多个ECS...
配置转换组件
背景信息 ETL支持的转换组件如下：表JOIN 字段计算器 表记录过滤 使用限制 ETL支持的转换组件存在如下限制：表JOIN：仅支持两个表之间做JOIN操作。字段计算器 和 表记录过滤：仅支持单个表结构。前提条件 已完成数据源信息的配置。配置表...
配置流程
或者给源表新增一个字段，并为该字段配置函数进行赋值，源表该字段经过赋值转换后写入目标库。前提条件 当前仅支持在华东1（杭州）、华东2（上海）、华北1（青岛）、华北2（北京）、华北3（张家口）、华南1（深圳）、华南3（广州）和中国...
数据集填报
字段配置 数据集表格转换为明细表后将进入该字段的配置面板，所有拖入的数据集的字段都会出现在面板左侧。您可以在不同字段之间切换，当您点击到一个还没有转换为填报控件的字段时，可进行一键转换。说明 转换的规则为：数值型字段转为数值...
使用ETL分析实时订单
将鼠标指针移动至已完成配置的流表和维表上，单击圆点拉出连接线，分别将流表和维表与 表 Join-1 连接起来。单击画布区域的 表 Join-1，根据页面信息配置转换组件。在 节点配置 页签，设置以下参数，配置节点信息。区域 参数 说明 转换名称...
一键实时同步至AnalyticDB for MySQL 3.0
说明 目标表名将根据您在 设置表名的映射规则 阶段配置的表名转换规则自动转换。功能 描述 为非主键表选择主键 由于当前方案不支持无主键表同步，所以您需要单击 同步主键 列的 按钮，为无主键表设置 自选主键，即选择表中一个或部分字段...
配置并管理实时同步任务
说明 目标表名将跟据您在 设置表名的映射规则 阶段配置的表名转换规则自动转换。功能 描述 为非主键表选择主键 由于当前方案不支持无主键表同步，所以您需要单击 同步主键 列的 按钮，为无主键表设置 自选主键，即选择表中一个或部分字段...
通过整库迁移配置集成任务
名称转化配置：非必选，名称转换配置可将您来源表的表名、字段名进行替换或过滤数据后进行同步。单击 名称转换配置。在 名称转换配置 页面，配置转换规则。表名转换规则：单击 新建规则，在规则项中填写 来源表待替换字符串 和 目标表替换...
RDS/PolarDB 数据源配置分库分表
依次叠加，同时需要和库中的其他表区分开，比如分表的名字是table_goods_1、table_goods_2、table_goods_3、库中还有表名为table_goods_cate_1，如果有此种情况将无法区分非分表的表 多库多表最大可配置10个库 配置步骤 用户可通过点击“线...
RDS/PolarRDB 数据源配置分库分表
依次叠加，同时需要和库中的其他表区分开，比如分表的名字是table_goods_1、table_goods_2、table_goods_3、库中还有表名为table_goods_cate_1，如果有此种情况将无法区分非分表的表 多库多表最大可配置10个库 配置步骤 用户可通过点击“线...
索引表配置
索引表配置介绍 索引表配置是向量检索版中最重要的一个配置，它描述了原始文档的数据格式，并基于这些数据如何构建索引。这些索引包括倒排索引、正排索引、摘要索引。 索引表配置 配置概览 {"table_name":"sample","fields":[],...
索引表配置
索引表配置介绍 索引表配置是召回引擎版中最重要的一个配置，它描述了原始文档的数据格式，并基于这些数据如何构建索引。这些索引包括倒排索引、正排索引、摘要索引。 索引表配置 配置概览 {"table_name":"sample","fields":[],...
在Pod中访问外部网络
不同的地址配置方式不同：配置访问公网IPv4地址 在访问公网IPv4地址时，Pod使用的IP地址是私网IP地址。如果Pod需要访问外部公网，需要使用公网的EIP或者NAT网关。以下介绍3种为Pod配置公网的方式。访问方式 网关和EIP配置 对外使用的公网IP...
BUILD
BUILD任务用于将实时写入的数据转换为历史数据格式。在该过程中会构建索引、清理冗余数据、执行异步DDL任务等，将数据从写优化转变为读优化。注意事项 BUILD期间，不能执行 INSERT OVERWRITE SELECT 导入任务，需等待BUILD任务结束才能执行...
一键实时同步至MaxCompute
映射规则包括 源表名和目标表名转换规则 和 目标表名规则：源表名和目标表名转换规则：源端表名支持通过正则表达式转换为目标端最终写入的表名。示例1：将源端doc_前缀的表数据，写入前缀为pre_的目标表中。示例2：将多张表数据写入到一张...
一键实时同步至MaxCompute
映射规则包括 源表名和目标表名转换规则 和 目标表名规则：源表名和目标表名转换规则：源端表名支持通过正则表达式转换为目标端最终写入的表名。示例1：将源端doc_前缀的表数据，写入前缀为pre_的目标表中。示例2：将多张表数据写入到一张...
概述
孪生体与物理设备之间是解耦关系，您可使用数据映射功能，将...重要 数据服务中自定义存储表映射到IoT孪生引擎的数据类型都是String，IoT孪生引擎会将该字符串转换成对应孪生节点的属性类型，如果转换失败则跳过。如何配置数据映射 添加数据源
基于分箱组件实现连续特征离散化
字段信息 源表字段信息 配置 表名 后，系统会自动同步该数据表的 源表字段信息，无需手动配置。单击画布中的 分箱 组件，在右侧面板，配置参数（仅配置如下参数，其他参数使用默认值即可）。页签 参数 描述 字段设置 特征列 选择 f1、f2、f...
生命周期管理介绍
功能说明 您可以通过生命周期管理对数据湖中的数据库、数据表配置数据管理规则，可以基于数据最后访问时间、分区值、分区/表最后修改时间、分区/表创建时间四种规则类型，对数据定期进行存储类型转换，从而节省数据存储成本。同时，可以...
功能更新动态（2024年）
配置过滤转换组件 配置脚本模式输入组件 配置脚本模式组件 配置Amazon S3输入组件 配置Amazon S3输出组件 查看及管理离线集成任务列表 计算任务 计算任务提交时，针对循环依赖的错误提示信息进行优化，展示具体的节点名称、节点ID、依赖...
文档更新动态（2024年）
更新说明 配置过滤转换组件 配置脚本模式输入组件 配置脚本模式组件 配置Amazon S3输入组件 配置Amazon S3输出组件 查看及管理离线集成任务列表 数据开发-编码研发-离线任务开发 计算任务提交时，针对循环依赖的错误提示信息进行优化，展示...
通过整库迁移配置集成任务
名称转化配置：非必选，名称转换配置可将您来源表的表名、字段名进行替换或过滤数据后进行同步。单击 名称转换配置。在 名称转换配置 页面，配置转换规则。表名转换规则：单击 新建规则，在规则项中填写 来源表待替换字符串 和 目标表替换...
逻辑表调度配置概述
逻辑表调度配置入口 请参见 逻辑表任务配置入口，进入逻辑表任务配置页面。单击调度配置，进入逻辑表 调度配置 对话框。逻辑表调度配置 在逻辑表 调度配置 对话框，您需根据下表配置逻辑表任务的调度相关信息。配置项 描述 数据延迟 用于...
逻辑表调度配置概述
逻辑表调度配置 在逻辑表 调度配置 对话框，您需根据下表配置逻辑表任务的调度相关信息。配置项 描述 数据延迟 用于自动重跑逻辑表在 最大延迟天数 周期内的全部数据。配置调度属性 逻辑表调度属性用于定义逻辑表任务在调度过程中的调度...
整库离线同步至MaxCompute
说明 目标表名将跟据您在 设置表名的映射规则 阶段配置的表名转换规则自动转换。功能 描述 为非主键表选择主键 由于当前方案不支持无主键表同步，所以您需要单击 同步主键 列的 按钮，为无主键表设置 自选主键，即选择表中一个或部分字段...
整库离线同步至MaxCompute
说明 目标表名将根据您在 设置表名的映射规则 阶段配置的表名转换规则自动转换。功能 描述 为非主键表选择主键 由于当前方案不支持无主键表同步，所以您需要单击 同步主键 列的 按钮，为无主键表设置 自选主键，即选择表中一个或部分字段...
配置并管理实时同步任务
说明 目标表名将跟据您在 设置表（库）名的映射规则 阶段配置的表名转换规则自动转换。功能 描述 为非主键表选择主键 由于当前方案不支持无主键表同步，所以您需要单击 同步主键 列的 按钮，为无主键表设置 自选主键，即选择表中一个或部分...
MySQL一键实时同步至MaxCompute
说明 目标表名将根据您在 设置表（库）名的映射规则 阶段配置的表名转换规则自动转换。功能 描述 为非主键表选择主键 由于当前方案不支持无主键表同步，所以您需要单击 同步主键 列的 按钮，为无主键表设置 自选主键，即选择表中一个或部分...
MySQL一键实时同步至MaxCompute
说明 目标表名将根据您在 设置表（库）名的映射规则 阶段配置的表名转换规则自动转换。功能 描述 为非主键表选择主键 由于当前方案不支持无主键表同步，所以您需要单击 同步主键 列的 按钮，为无主键表设置 自选主键，即选择表中一个或部分...
一键实时同步至DataHub
说明 目标表名将根据您在 设置表名到Topic的映射规则 阶段配置的表名转换规则自动转换。功能 描述 为非主键表选择主键 若您在上一步骤中未勾选 支持源表无主键同步，但源端部分无主键表需要同步，您可以单击 同步主键 列的 按钮，为无主键...
统计表
配置统计表结构，用于导入统计表数据。统计表记录用户执行相关操作的统计数据。基于统计表数据，可以进行 人群筛选。前提条件 已在您配置的 计算源 中存储统计表，数据格式请参考 统计表数据要求。确保您的统计表中的所有用户ID类型均已在...
一键实时同步至Elasticsearch
说明 目标表名将根据您在 设置表名到索引名的映射规则 阶段配置的表名转换规则自动转换。功能 描述 选择主键替代方案 如果来源库有主键，则同步数据时会直接使用该主键进行去重。如果来源库没有主键，则您需要单击 图标，自定义主键，即使...
一键实时同步至Kafka
说明 目标表名将跟据您在 设置表名到Topic的映射规则 阶段配置的表名转换规则自动转换。功能 描述 为非主键表选择主键 如果来源库有主键，则同步数据时会使用该主键值作为kafka记录的key，确保同主键的变更有序写入kafka的同一分区。如果...
整库离线同步至Elasticsearch
说明 目标表名将根据您在 设置表名到索引名的映射规则 阶段配置的表名转换规则自动转换。功能 描述 选择主键替代方案 如果来源库有主键，则同步数据时会直接使用该主键进行去重。如果来源库没有主键，则您需要单击 图标，自定义主键，即使...
配置并管理实时同步任务
说明 目标表名将根据您在 设置表名到Topic的映射规则 阶段配置的表名转换规则自动转换。功能 描述 为非主键表选择主键 如果来源库有主键，则同步数据时会使用该主键值作为kafka记录的key，确保同主键的变更有序写入kafka的同一分区。如果...
订单汇总
配置订单汇总表结构，用于导入订单汇总表数据。导入的数据可生成 RFM模型，RFM模型可用于 RFM分析、人群筛选 等。前提条件 已在您配置的 计算源 中存储订单汇总表，数据格式请参考 订单汇总表数据要求。确保您的订单汇总表中的所有用户ID...
订单明细
配置订单明细表结构，用于导入订单明细表数据。基于订单明细数据，可以进行 人群筛选，还可以生成 RFM模型、偏好类标签 等自定义标签，RFM模型可用于 RFM分析、人群筛选 等。前提条件 已在您配置的 计算源 中存储订单明细表，数据格式请...
用户行为
配置用户行为表结构，用于导入用户行为表数据。用户行为表记录用户的浏览、加购、收藏、购买等行为。基于用户行为数据，可以进行 人群筛选，还可以生成 AIPL模型、偏好类标签 等自定义标签，AIPL模型可用于 AIPL用户分析、AIPL流转分析、...
数据加密
背景信息 创建数据表时默认不加密，如果要配置数据表加密，需要在创建数据表时配置加密相关参数。表格存储 提供基于密钥管理服务（Key Management Service，简称KMS）密钥加密和基于自带密钥（Bring Your Own Key，简称BYOK）自定义密钥...
用户标签
配置用户标签表结构，用于导入用户标签表数据。用户标签表记录用户的一系列特征属性。通过为字段配置标签别名的方式给用户打标签，在使用标签时，实质上是在使用对应的字段。基于用户标签数据，可以形成 用户画像，可以进行 透视分析、人群...
- 产品推荐
- 这些文档可能帮助您