Upsert Kafka
String 否 无 该配置项仅用于源表和结果表的列名区分，解析和生成Kafka消息key部分时，该前缀会被移除。说明 使用该配置时，value.fields-include 必须配置为EXCEPT_KEY。value.format 读取或写入Kafka消息value部分时使用的格式。String ...
VALUES
结果表的列数据类型由出现在该列的表达式的显式或者推导类型组合决定，决定的规则与 UNION 相同。在大型的命令中，在语法上允许 VALUES 出现在 SELECT 出现的任何地方。因为语法把它当作一个 SELECT，可以为一个 VALUES 命令使用 ORDER BY...
存储格式
列存表可以提供平均 3~5倍的较高数据压缩率。列存表必须是追加优化表，即要创建一个列存表，必须指定为"appendonly=true。下述语句创建了一个列存表bar。CREATE TABLE bar(a int,b text)WITH(appendonly=true,orientation=column)...
表存储格式定义
列存表 列存表（Column-Oriented Table）的按列存储格式，数据访问只会读取涉及的列，适合少量列的数据查询、聚集等数据仓库应用场景，在此类场景中，列存表能够提供更高效的I/O。但列存表不适合频繁的更新操作或者大批量的INSERT写入场景...
文本摘要预测
输出列选择 配置数据结果表的列名。默认值为 predictions,beams。预测数据输出 配置预测结果文件在OSS Bucket中的路径。使用自有模型 是否使用PAI默认模型，进行直接预测。取值如下。是 否（默认值）是否为Megatron模型 仅支持文本摘要训练...
支持的连接器
支持的连接器 连接器 支持类型 运行模式 API类型 是否支持更新或删除结果表数据 源表 维表 结果表 消息队列Kafka√流模式 SQL和DataStream 不支持更新和删除结果表数据，只支持插入数据。实时数仓Hologres√流模式和批模式 SQL和DataStream...
通过Flink访问宽表引擎
背景信息 您可以将 云原生多模数据库 Lindorm 宽表作为Flink中的维表或者结果表，通过Flink SQL或者Flink DataStream访问Lindorm宽表。前提条件 通过社区版Flink访问Lindorm宽表时，宽表引擎为2.4.3及以上版本。如果使用阿里云Flink访问，...
Flink全托管
Hologres源表、维表和结果表 在Flink全托管中支持Hologres源表、维表和结果表，详细的使用说明请参见 实时数仓Hologres。Flink实时消费Binlog Hologres Connector支持实时消费Binlog，从VVR 6.0.3版本开始支持JDBC模式的流式源表，相比...
更新或删除数据（UPDATE|DELETE）
查看结果表中只有val为1、3的数据 select*from mf_tt6 where dd='01' and hh='02';返回结果+-+-+-+-+|pk|val|dd|hh|+-+-+-+-+|1|1|01|02|3|3|01|02|+-+-+-+-+清空列数据 使用 clear column 命令清空普通表的列，将不再使用的列数据从磁盘...
pg_partitioned_table
例如，值 1 3 表示第一个和第三个表列组成了分区键。这个数组中的零表示对应的分区键列是一个表达式而不是简单的列引用。partclass oidvector 对于分区键中的每一个列，这个域包含要使用的操作符类的OID。partcollation oidvector 对于分区...
分区表系统视图
例如，值 1 3 表示第一个和第三个表列组成了分区键。这个数组中的零表示对应的分区键列是一个表达式而不是简单的列引用。partclass 对于分区键中的每一列，包含要使用的操作符类的OID。partcollation 对于分区键中的每一列，包含用于分区的...
分区表系统视图
例如，值 1 3 表示第一个和第三个表列组成了分区键。这个数组中的零表示对应的分区键列是一个表达式而不是简单的列引用。partclass 对于分区键中的每一列，包含要使用的操作符类的OID。partcollation 对于分区键中的每一列，包含用于分区的...
COPY
如果没有指定列列表，则该表的所有列除了生成的列都会被复制。query 其结果要被复制的 SELECT、VALUES、INSERT、UPDATE 或者 DELETE 命令。注意查询周围的圆括号是必要的。对于 INSERT、UPDATE 以及 DELETE 查询，必须提供一个 RETURNING ...
ListTable
调用ListTable接口获取当前实例下已创建的所有表的表名。注意事项 如果一个表刚刚创建成功，该表名会...Java SDK：列出表名称 Go SDK：列出表名称 Python SDK：列出表名称 Node.js SDK：列出表名称.NET SDK：列出表名称 PHP SDK：列出表名称
高温报警
create table file(-定义结果表输出字段 productKey varchar,deviceName varchar,temperature double,-温度值 ts timestamp,-数据产生的时间 gmtCreate timestamp-流引擎接收到数据的时间)with(type='file',-定义了结果表类型，edgebus表示...
快速入门
创建结果表fresult，包含三个列：uID（车辆ID）、rName（区域名称）、rID（区域ID）。CREATE TABLE fresult(uID VARCHAR,rName VARCHAR,rID INT,PRIMARY KEY(uID));写入地理围栏数据 向地理围栏表regions写入测试数据，共三个区域：SoHo、...
UPDATE
update 操作用于将Transactional分区表或非分区表中行对应的单列或多列数据更新为新值。前提条件 执行 delete、update 操作前需要具备目标Transactional表的读取表数据权限（Select）及更新表数据权限（Update）。授权操作请参见 ...
PyODPS节点实现结巴中文分词
在PyODPS 3节点中运行下方示例代码，对上传至 jieba_test 表中的测试数据进行分词，并回显分词结果表的前十行数据。def test(input_var):import jieba result=jieba.cut(input_var,cut_all=False)return"/".join(result)#odps.stage.mapper...
CREATE TABLE AS（CTAS）语句
此类变更依赖于下游Sink支持的列类型变更规则，不同的结果表支持的列类型变更规则也不相同，请参考结果表文档获取其支持的列类型变更规则，目前只有Paimon支持处理列类型变更。对于不支持列类型变更的下游系统，比如Hologres，CTAS无法支持...
评分卡预测
其它三列为预测结果列，其含义如下表所示。列名 列类型 列描述 prediction_score DOUBLE 预测分数列。线性模型中特征值和模型权重值直接相乘相加的结果，对应到评分卡模型中，如果模型进行了分数转换，则该分数输出转换后的得分。...
使用PyODPS节点进行结巴中文分词
在PyODPS 3节点中运行下方示例代码，对上传至 jieba_test 表中的测试数据进行分词，并回显分词结果表的前十行数据。def test(input_var):import jieba result=jieba.cut(input_var,cut_all=False)return"/".join(result)#odps.stage.mapper...
预测
输出结果列名 输出表的结果列。输出分数列名 输出i表的分数列。输出详细列名 输出表的详细列。稀疏矩阵 使用KV格式表示稀疏数据。key与value分隔符 默认为英文冒号（:）。kv对间的分隔符 默认为英文逗号（,）。执行调优 核心数 与参数 每个...
迁移时源库为SQL Server的注意事项及限制
说明 相关表信息的查看方法，请参见 如何查看SQL Server中堆表、无主键表、压缩表、含计算列的表信息。如需跨版本迁移，请提前确认兼容性。为保障增量数据迁移延迟的准确性，解析源端日志做增量同步模式，DTS会在源库中创建触发器dts_cdc_...
K均值聚类
附加列 附加输出至聚类结果表的输入列，列名以半角逗号（,）分隔。输入为稀疏矩阵 使用KV格式表示稀疏数据。kv键间分隔符 默认为半角逗号（,）。kv键内分隔符 默认为半角冒号（:）。参数设置 聚类数 取值范围为1~1000。距离度量方式 支持 ...
方案实现
本文介绍实现大数据分析方案的详细配置操作，包括在RDS MySQL中创建源表、在表格存储中创建结果表、在实时计算Flink中创建作业并启动和在表格存储中分析数据。步骤一：在RDS MySQL中创建源表 通过DMS登录RDS MySQL。具体操作，请参见 通过...
GROUP BY子句
参数说明 参数 说明 key 日志字段名称或聚合函数计算结果列，即支持按照日志字段名称或聚合函数计算结果列进行分组。GROUP BY子句支持单列或多列。aggregate function 聚合函数。GROUP BY子句常与min、max、avg、sum、count等聚合函数搭配...
表头设置
通过配置“无结果表值”，当用户问句中所查询信息与“无结果表值”相匹配时，那么机器人则给出表格问答场景下有关表头信息的兜底回复。内容配置：在“无结果表值”输入框中输入有关表值后，点击“添加”按钮即可完成“无结果表值”的新增。...
ORDER BY子句
参数说明 参数 说明 列名 列名即为日志字段名称或聚合函数计算结果列，即支持按照日志字段名称（KEY）或聚合函数计算结果列进行排序。DESC 降序排列。ASC 升序排列。示例 示例1：统计不同请求状态码对应的请求次数，并按照请求次数降序排列...
人工审核
审核成功：表示该音视频机审完成并机审成功，其审核模板列将展示所使用的机审模板，机审结果列会显示 违规、疑似 或 正常 的结果。审核失败：表示该音视频机审完成但机审失败，其审核模板列将展示所使用的机审模板，机审结果列会显示为-。...
音视频审核
审核成功：表示该音视频机审完成并机审成功，其审核模板列将展示所使用的机审模板，机审结果列会显示 违规、疑似 或 正常 的结果。审核失败：表示该音视频机审完成但机审失败，其审核模板列将展示所使用的机审模板，机审结果列会显示为-。...
投递日志到MaxCompute（旧版）
说明 最大配置3个分区列，请谨慎选择自定义字段作为分区列，保证一次投递任务中生成的分区数目小于512个，否则会导致投递任务写数据到MaxCompute表失败，整批数据无法投递。时间分区格式 时间分区格式，配置示例和参数详细请参见 参考示例 ...
UPDATE
结果表有主键 如果为表设置了主键（PK），那么主键索引文件就可以通过PK快速定位到RID，然后定位到数据文件。在UPDATE的过程中也是如此，可以通过主键快速过滤出要更新的文件，减少文件扫描；如果没有主键，更新就很容易退化成全表更新，...
Db2 for LUW同步至AnalyticDB MySQL版 3.0
说明 若 同步类型 选择了 库表结构同步，您需要定义待同步的表在 云原生数据仓库AnalyticDB MySQL版 3.0中的 类型、主键列、分布键 等信息，详情请参见 CREATE TABLE。主键列 可以是选择多个列组成联合主键，且需要从 主键列 中选择1个或者...
PolarDB MySQL版同步至AnalyticDB MySQL 3.0
DTS会在目标库的同步目标表中增加_dts_data_source 列（类型为text）来存储数据来源，并且将以 DTS实例ID:数据库名称:schema名称:表名 的格式写入列值用于区分表的来源，例如 dts*:dtstestdata:testschema:customer1。多表归并功能基于任务...
PolarDB-X 2.0同步至云原生数据仓库 AnalyticDB MySQL...
若同步对象为表级别，且需进行编辑（如表列名映射），单次同步任务的表数量超过5000时，建议您拆分待同步的表，分批配置多个任务，或者配置整库的同步任务，否则任务提交后可能会显示请求报错。Binlog日志：在PolarDB-X 2.0控制台参数设置...
RDS MySQL同步至AnalyticDB MySQL 3.0
DTS会在目标库的同步目标表中增加_dts_data_source 列（类型为text）来存储数据来源，并且将以 DTS实例ID:数据库名称:schema名称:表名 的格式写入列值用于区分表的来源，例如 dts*:dtstestdata:testschema:customer1。多表归并功能基于任务...
RDS增量导入
{"name":"datetime","value":"datetime"}]}]} 参数 描述 必选 mapping[y].srcTableName RDS源表表名 是 mapping[y].targetTableName Phoenix目标表名 是 mapping[y].columns RDS表和Phoenix表列的对应 是 mapping[y].columns[x].name ...
RDS增量导入
.targetTableName Phoenix目标表名 是 mapping[y].columns RDS表和Phoenix表列的对应 是 mapping[y].columns[x].name Phoenix的列名 是 mapping[y].columns[x].value 对应RDS列名 是 mapping[y].columns[x].isPk 指定主键列 是 mapping[y]....
API概览
DescribeDataObjectColumnDetailV2 查询数据对象列详情V2 调用本接口查询数据表的列识别结果。安全配置 API 标题 API概述 CreateConfig 修改异常告警通用配置 调用CreateConfig接口修改异常告警通用配置模块的参数。DescribeConfigs 查询...
模型预测
excluded_cols 无 输出保留列 否 在预测结果表中原样输出的列。reserved_cols 无 预测详情输出列 否 选择预测模型的输出到MaxCompute表的映射，详情请参见 EasyRec离线预测。output_cols 默认为 probs double miniBatch的大小 否 minibatch...
- 产品推荐
- 这些文档可能帮助您