转换函数
TO_TMINTERVAL 描述 该函数将 CHAR、VARCHAR2、NCHAR 或 NVARCHAR2 数据类型的字符串转换为 INTERVAL YEAR TO MONTH 值。语法 TO_YMINTERVAL(char)参数 参数 说明 char CHAR、VARCHAR2、NCHAR 或 NVARCHAR2 类型，为要转换的字符串。返回...
同步时源库为Db2 for LUW的注意事项及限制
若您将列名仅大小写不同的字段写入到目标MySQL数据库的同一个表中，可能会因为MySQL数据库列名大小写不敏感，导致同步结果不符合预期。在数据同步完成后，建议使用 analyze table<表名>命令检查数据是否已写入目标表。例如，在MySQL触发HA...
数据类型转换
MaxCompute SQL允许数据类型之间的转换，类型转换方式包括显式类型转换和隐式类型转换。显式类型转换 显式类型转换是通过 CAST 函数将一种数据类型的值转换为另一种类型的值，在MaxCompute SQL中支持的显式类型转换，如下表所示。关于CAST...
配置AnalyticDB for MySQL输出
重要 节点名称必须是大小写字母、中文、数字、下划线（_）以及英文句号（.），且不能超过128个字符。单击 确认。在实时同步节点的编辑页面，单击 输出>AnalyticDB for MySQL 并拖拽至编辑面板，连线已配置好的输入或转换节点。单击 ...
配置DataHub输出
重要 节点名称必须是大小写字母、中文、数字、下划线（_）以及英文句号（.），且不能超过128个字符。单击 确认。在实时同步节点的编辑页面，鼠标单击 输出>DataHub 并拖拽至编辑面板，连线已配置好的输入或转换节点。单击 DataHub 节点，...
配置Hologres输出
重要 节点名称必须是大小写字母、中文、数字、下划线（_）以及英文句号（.），且不能超过128个字符。单击 确认。在实时同步节点的编辑页面，单击 输出>Hologres 并拖拽至编辑面板，连线已配置好的输入或转换节点。单击 Hologres 节点，在 ...
数据转换
在使用统计图表进行格式化展示前，您可以通过数据转换对查询分析结果进行处理。例如合并多个查询分析结果、对查询分析结果进行分类等。注意 仅统计图表（Pro版本）支持设置数据转换。日志服务支持的统计图表（Pro版本），请参见 图表类型。...
配置MaxCompute输出
重要 节点名称必须是大小写字母、中文、数字、下划线（_）以及英文句号（.），且不能超过128个字符。单击 确认。在实时同步节点的编辑页面，单击 输出>MaxCompute 并拖拽至编辑面板，连线已配置好的输入或转换节点。单击 MaxCompute 节点，...
配置Kafka输出
重要 节点名称必须是大小写字母、中文、数字、下划线（_）以及英文句号（.），且不能超过128个字符。单击 确认。在实时同步节点的编辑页面，鼠标单击 输出>Kafka 并拖拽至编辑面板，连线已配置好的输入或转换节点。单击 Kafka 节点，在 ...
配置Elasticsearch输出
重要 节点名称必须是大小写字母、中文、数字、下划线（_）以及英文句号（.），且不能超过128个字符。单击 确认。在实时同步节点的编辑页面，单击 输出>Elasticsearch 并拖拽至编辑面板，连线已配置好的输入或转换节点。单击 Elasticsearch ...
离线同步常见问题
MongoDB Reader是否大小写敏感？怎么配置MongoDB Reader超时时长？向包含主键自增列的目标表写入数据，需要如何配置OTS Writer？在时序模型的配置中，如何理解_tag和is_timeseries_tag两个字段？离线同步场景及解决方案 离线同步任务如何...
功能特性
数据迁移 数据迁移功能帮助您实现同构或异构数据源之间的数据迁移，适用于数据上云迁移、阿里云内部跨实例数据迁移、数据库拆分扩容等业务场景 功能集 功能 功能描述 参考文档 同构迁移 逻辑迁移 支持同构数据库间的数据迁移。自建MySQL...
JSON_FORMAT
将JSON数据转换成STRING类型，默认不自动进行美化。命令格式 string json_format()参数说明 json：必填，待处理的JSON。返回值说明 返回STRING类型。使用示例 示例1：将NUMBER类型的JSON数据转换为字符串。select json_format(json '123');...
优化数据转换
Databricks使用嵌套类型优化高阶函数和 DataFrame 操作的...请参阅以下文章以了解如何开始使用这些优化的高阶函数和复杂数据类型：Higher-order functions Transform complex data types 说明 详细内容可参考Databricks官网文章：优化数据转换
转换元数据
OSS-HDFS服务支持在未部署任何导入和导出工具的情况下，直接将OSS元数据转换为OSS-HDFS元数据。前提条件 已开通并授权访问OSS-HDFS服务。具体步骤，请参见 开通并授权访问OSS-HDFS服务。仅 华北3（张家口）地域支持将OSS元数据转换为OSS-...
Sensors Data（神策）数据源
BigInt2Date 将BigInt大整数类型的数据转换为Date时间类型。示例"dataConverters":[{"type":"BigInt2Date"}]无 Str2Int 将String字符串类型的数据转换为Int整数类型。示例"dataConverters":[{"type":"Str2Int"}]无 Str2Double 将String字符...
ATAN2
计算 expr1/expr2 的反正切函数。命令格式 double atan2(,)参数说明 expr1：必填。DOUBLE类型。输入为STRING、BIGINT、DECIMAL类型时，会隐式转换为...相关函数 ATAN2函数属于数学函数，更多数据计算、数据转换的相关函数请参见 数学函数。
函数列表
函数列表包括数据类型转换函数、时间类型转换函数和基础数据类型的函数等。本文介绍函数的表达式及其使用说明。背景信息 您可结合支持的脚本语法，调用函数将设备自定义Topic数据存储到物联网平台的时序数据存储空间。脚本的使用说明，请...
FROM_CHARSET
MaxCompute FROM_CHARSET支持将指定编码格式的二进制数据转换为UTF-8格式的字符串，以便后续进行计算时使用。本文为您介绍FROM_CHARSET函数的命令格式、参数说明以及使用示例。命令格式 STRING FROM_CHARSET(binary,string,[string])参数...
UTL_I18N
RAW_TO_CHAR Function 将未在数据库字符集中编码的RAW数据转换为VARCHAR2字符串。ESCAPE_REFERENCE 此函数将文本字符串转换为与当前文档使用的字符集不同的字符参考副本。字符引用主要用于HTML和XML文档中，以独立于文档的编码表示字符。...
Delta Engine 概述
Delta Engine 优化可加快数据湖操作速度，并支持各种工作负载，从大规模 ETL 处理到临时交互式查询均可。其中许多优化都自动进行；只需要通过将Databricks 用于数据湖即可获得这些 Delta Engine 功能的优势。通过文件管理优化性能 自动优化...
使用场景
包含但不限于如下场景：数据迁移与同步 使用DMS任务编排配置和管理数据迁移或数据同步任务，将数据从一个数据源迁移到另一个数据源，或实现同数据源、不同数据源之间的数据实时同步。数据清洗与加工 DMS任务编排可以用于数据清洗和加工任务...
添加ClickHouse数据源
网络 数据源可选的网络类型。说明 当前仅支持外网访问。域名 连接数据库的地址。重要 该地址是DataV服务器能够通过公网或阿里云部分Region内网访问您数据库的域名或IP地址。端口 数据库设置的端口。用户名 登录数据库的用户名。密码 登录...
常见问题
此时需要通过SQL函数将TIMESTAMP类型的数据转换成DATETIME类型，在转换的过程中会出现各种预料不到的错误。解决方法：目标表中最好不要使用TIMESTAMP或DATETIME类型的字段，使用VARCHAR类型代替。参考文档：【流数据与大屏DataV】如何使用...
概述
大部分阿里云用户以CSV格式将数据存储在OSS上，若要提高数据扫描性能，需要借助第三方工具对文件进行格式转换，然后将转换后的数据上传至OSS，整个过程比较繁琐。为减轻用户工作量，您可以直接使用DLA来转换文件格式。假设将1.2GB的数据以...
流式ETL
ETL支持通过可视化拖拉拽操作、Flink SQL语句配置任务，并结合DTS的高效流数据复制能力，可以实现流式数据的抽取、数据转换和加工、数据装载。在降低开发门槛和业务系统影响的同时提升效率，丰富企业实时数据处理和计算场景，赋能企业数字...
什么是ETL
ETL支持通过可视化拖拉拽操作、Flink SQL语句配置任务，并结合DTS的高效流数据复制能力，可以实现流式数据的抽取、数据转换和加工、数据装载。在降低开发门槛和业务系统影响的同时提升效率，丰富企业实时数据处理和计算场景，赋能企业数字...
将MySQL数据迁移到Redis
将业务中的热数据保存到Redis，用户通过应用直接从Redis中快速获取常用数据，或者在交互式应用中使用Redis保存活跃用户的会话，都可以极大地降低后端关系型数据库的负载，提升用户体验。使用Redis作为缓存首先需要将关系型数据库中的数据...
通配符列
背景信息 在大数据量的场景下，传统SQL通常无法满足业务需求。例如车联网场景，数据通常有几百甚至上千个列，且这些列多数情况下并不是固定的。如果此时想要写入新的列，则需要执行ALTER TABLE语句，这样的操作非常影响写入效率。Lindorm...
转换函数
本文介绍了 PolarDB-X 支持的转换函数。PolarDB-X 支持如下转换函数：函数名 描述 示例 BINARY 将字符串s转换为...输出：>RUNOOB CAST(x AS type)转换数据类型 字符串日期转换为日期：SELECT CAST("2017-08-29"AS DATE);输出：>2017-08-29
审计经典网络数据库实例
如果需要审计经典网络数据库实例，您需要先通过ClassicLink功能实现经典网络的ECS与VPC中的数据库审计系统互通，并在经典网络的ECS上部署Agent程序。前提条件 VPC中启用ClassicLink时，需要满足限定条件，具体请参见ClassicLink概述的 使用...
数据转换模块
通过数据转换模块可以对数据进行归一化、离散化、Index化或WOE转换。配置组件 您可以使用以下任意一种方式，配置数据转换模块组件参数。方式一：可视化方式 在 Designer 工作流页面配置组件参数。页签 参数 描述 字段设置 输入表选择的特征...
ETL工具支持概览
支持的ETL工具见下，可以同时参见更详细的同步方案列表 数据迁移及同步方案综述：数据传输服务（DTS）：阿里云提供的实时数据同步服务，可以将其他数据源（RDS MySQL，ECS自建MySQL，PolarDB等）实时同步数据到 AnalyticDB PostgreSQL版，...
添加ClickHouse数据源
网络 数据源可选的网络类型。域名 连接数据库的地址。重要 该地址是DataV服务器能够通过公网或阿里云部分Region内网访问您数据库的域名或IP地址。端口 数据库设置的端口。用户名 登录数据库的用户名。密码 登录数据库的密码。数据库 单击 ...
CAST
MaxCompute CAST是数据类型转换函数，支持将一个表达式结果（expr）转换成目标数据类型（type）。本文为您介绍CAST函数的命令格式、参数说明以及使用示例。命令格式 cast(<expr>as)参数说明 expr：必填。待转换数据源。type：必填。目标...
最佳实践
本文以轮播列表柱状图组件使用数据过滤器筛选出B站网页内的视频为例，为您演示如何使用数据过滤器。操作步骤 登录 DataV控制台。在 我的可视化 页面，选择您创建的可视化应用，单击 编辑。在 画布编辑器 页面，单击 图标打开 资产列表，在...
如何对JSON类型进行高效分析
PolarDB 列存索引（In Memory Column Index，IMCI）功能推出了完备的虚拟列与列式JSON功能等，可以快速处理大数据和多种数据类型（包括结构化数据与半结构化数据等），并提供高效的数据分析、查询与流计算能力，适用于数据分析、数据仓库与...
集成与开发概览
通过可视化拖拉拽操作、SQL语句（100%兼容Flink）两种方式配置流式加工任务，实现流式数据的抽取、数据转换和加工、数据装载能力，适用于日志、在线数据实时加工处理、实时统计报表等各类实时数据开发场景。数据开发 任务编排。更多信息，...
使用示例
本文以 轮播列表柱状图 组件，使用数据过滤器筛选出B站网页内的每日推荐数据为例，为您演示数据过滤器的详细使用方法。前提条件 在可视化应用编辑器页面，添加所需要的 轮播列表柱状图 组件，详情请参见 添加资产。操作步骤 登录 DataV控制...
其它函数
其它函数如下表所示：函数 功能 CAST 将数据转换为目标数据类型。COALESCE 获取参数中第一个非NULL的值。GREATEST 返回参数中最大的值。IF 判断指定的条件是否为真。IS_CELLPHONE_NUMBER 判断指定的文本是否为手机号。LEAST 返回参数中...
- 产品推荐
- 这些文档可能帮助您