引擎功能
数据库内机器学习 Lindorm时序引擎提供开箱即用的数据库内机器学习服务。您可以通过SQL语句直接在数据库内完成整个机器学习流程，挖掘更深的数据价值。使用数据库内机器学习服务的优势主要体现在以下几个方面：简单易用：无需掌握专业的...
表数据管理
ODC 中用颜色标识您对表中数据的操作，新增的数据用绿色标识，删除的数据用红色标识，修改后的数据用橙色标识。编辑态下，导航栏提供了以下操作键功能编辑表中的数据：功能 说明 添加行 单击该功能键将在表中指定位置插入一个空行。双击...
UTL_I18N
RAW_TO_CHAR Function 将未在数据库字符集中编码的RAW数据转换为VARCHAR2字符串。ESCAPE_REFERENCE 此函数将文本字符串转换为与当前文档使用的字符集不同的字符参考副本。字符引用主要用于HTML和XML文档中，以独立于文档的编码表示字符。...
概述
因此，您可以将文本类型的数据转换为ORC格式或者PARQUET格式，通过DLA扫描转换格式后的数据，在提高数据扫描性能的同时也帮助您节省一定的数据扫描费用。大部分阿里云用户以CSV格式将数据存储在OSS上，若要提高数据扫描性能，需要借助第三...
常见问题
此时需要通过SQL函数将TIMESTAMP类型的数据转换成DATETIME类型，在转换的过程中会出现各种预料不到的错误。解决方法：目标表中最好不要使用TIMESTAMP或DATETIME类型的字段，使用VARCHAR类型代替。参考文档：【流数据与大屏DataV】如何使用...
ETL工具支持概览
支持的ETL工具见下，可以同时参见更详细的同步方案列表 数据迁移及同步方案综述：数据传输服务（DTS）：阿里云...支持简单的数据转换。支持通过解析Binlog，准实时地从MySQL同步数据到 AnalyticDB PostgreSQL版。其他支持Greenplum的ETL工具。
DataStudio侧实时同步任务配置
在实时同步数据的过程中，如果您希望将输入的数据转换为需要使用的格式进行输出，则可以配置数据转换方式。在实时同步任务编辑页面左侧的 转换 区域，拖拽需要使用的数据转换方式组件至右侧面板。目前，同步单表数据支持的转换方式如下：...
数据类型转换
本文为您介绍迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 租户时，数据类型转换的支持范围。支持的转换类型 数值类型 分类 MySQL 数据库 OceanBase 数据库 MySQL 租户 整型 支持指定字段长度，SIGNED、UNSIGNED、ZEROFILL。INT INT ...
下载备份
说明 云盘实例的快照备份下载发起后，系统会产生一个数据转换的下载任务，该任务未成功完成时（包括任务进行中及任务失败），无法获取下载链接，该情况下不会产生和收取外网流量费用。任务成功完成后，用户在使用链接下载时按实际产生的...
分析数据
④ 更多 单击 更多，您可以选择如下图表：面积图 条形图 散点图 股票图 插件：目前支持 类型转换，单击 图标，您可以将选中的数据 转换为数值型 和 转换成字符型。快捷键列表 单击 图标，查看各功能对应的快捷键。您可以在编辑页面的单元格...
Tunnel命令常见问题
这种情况下可以先用少量的数据进行测试，当-td 及-fd 调试成功后再上传全量数据。使用Tunnel Upload命令上传数据时，需要上传很多数据文件到一个表中，是否有方法写一个脚本就可以把文件夹下的所有数据文件上传上去？Tunnel Upload命令支持...
数据保护规则简介
说明 进行任意查询时，涉及的数据都可以用<数据库，数据表，数据列>来表示。只有当数据库、数据表、数据列都被一条规则中的 meta 数据匹配上时，数据才会按照规则中指定的算法进行处理。在设置数据保护规则时，您需要保证 不同规则作用的...
数据标准概述
应用场景 某集团IT团队制定了关于 员工性别 的数据标准：用male表示男性，用female表示女性，用unknown表示未知。首先，数据标准管理员创建了 性别 码表并同步到开发人员；接着创建了 员工性别 标准，值域范围引用 性别 码表，并添加了 ...
数据标准概述
应用场景 某集团IT团队制定了关于 员工性别 的数据标准：用male表示男性，用female表示女性，用unknown表示未知。首先，数据标准管理员创建了 性别 码表并同步到开发人员；接着创建了 员工性别 标准，值域范围引用 性别 码表，并添加了 ...
什么是ETL
ETL支持通过可视化拖拉拽操作、Flink SQL语句配置任务，并结合DTS的高效流数据复制能力，可以实现流式数据的抽取、数据转换和加工、数据装载。在降低开发门槛和业务系统影响的同时提升效率，丰富企业实时数据处理和计算场景，赋能企业数字...
流式ETL
ETL支持通过可视化拖拉拽操作、Flink SQL语句配置任务，并结合DTS的高效流数据复制能力，可以实现流式数据的抽取、数据转换和加工、数据装载。在降低开发门槛和业务系统影响的同时提升效率，丰富企业实时数据处理和计算场景，赋能企业数字...
CREATE CAST
不推荐在设计自己的数据类型时用它）。一个造型函数的返回类型必须等于目标类型或者能二进制强制到目标类型。通常，强制转换必须具有不同的源和目标数据类型。但是，如果它有一个带有多个参数的强制转换实现函数，则可以声明具有相同源类型...
继承和转换
DDM支持不同类型的数据模型转换，模型类型包括：Logical(default)、Hive(2.x)、MongoDB、Gbase、Oracle(11g,10g,9i)、MariaDB、Cassandra、PostgreSQL、SQLServer(2008,2014,2012)、DB2、Gauss、Hana、MaxCompute、MySQL和Teradata等。...
ODPS-0123091
value 'xx' cannot be casted from yy to zz 错误信息示例 ODPS-0123091:Illegal type cast-in function cast,value 'xx' cannot be casted from YY to ZZ 问题描述 执行数据类型转换的时候出错，大多数情况下是由输入的数据不合法导致的。...
日期数据格式转换：STRING、TIMESTAMP、DATETIME互相...
日期数据格式转换常见场景如下：STRING转换为TIMESTAMP STRING转换为DATETIME TIMESTAMP转换为STRING TIMESTAMP转换为DATETIME DATETIME转换为TIMESTAMP DATETIME转换为STRING STRING转换为TIMESTAMP 应用场景 将STRING类型数据转换为...
CAST函数
输入值类型 DECIMAL(m,d)、FLOAT、INT/INTEGER、SMALLINT、TINYINT BIGINT DOUBLE DATE、DATETIME、TIMESTAMP、TIME VARCHAR JSON 转换规则 若VARCHAR类型或BIGINT类型的数据不符合时间类型格式，转换后的结果为NULL。例如，将VARCHAR类型...
Sensors Data（神策）数据源
示例"dataConverters":[{"type":"Str2Double"}]无 Str2BigDecimal 将String字符串类型的数据转换为BigDecimal高精度数值类型。示例"dataConverters":[{"type":"Str2BigDecimal"}]无 IfNull2Default 当字段值为null时，将字段值设置为...
冷数据归档
即用户根据数据存储量和查询时间覆盖范围，确定多长时间之前的数据需要转移到冷存储。在时序引擎中，冷热分界线的设置单位是 天。含义是某条时序数据的时间戳如果满足下述条件，则该数据被视作冷数据。冷数据的判定标准如下：当前时间-数据...
加载矢量数据
ogr2ogr命令行工具 ogr2ogr 是GDAL/OGR提供的矢量数据转换工具，支持Esri Shapefile，MapInfo和FileGDB等常见矢量数据类型。矢量数据类型参见 矢量数据类型。说明 使用ogr2ogr命令行工具加载矢量数据，请先确保GDAL支持postgis驱动格式。...
加载矢量数据
ogr2ogr命令行工具 ogr2ogr 是GDAL/OGR提供的矢量数据转换工具，支持Esri Shapefile，MapInfo和FileGDB等常见矢量数据类型。矢量数据类型参见 矢量数据类型。说明 使用ogr2ogr命令行工具加载矢量数据，请先确保GDAL支持postgis驱动格式。...
加载矢量数据
ogr2ogr命令行工具 ogr2ogr 是GDAL/OGR提供的矢量数据转换工具，支持Esri Shapefile，MapInfo和FileGDB等常见矢量数据类型。矢量数据类型参见 矢量数据类型。说明 使用ogr2ogr命令行工具加载矢量数据，请先确保GDAL支持postgis驱动格式。...
加载矢量数据
ogr2ogr命令行工具 ogr2ogr 是GDAL/OGR提供的矢量数据转换工具，支持Esri Shapefile，MapInfo和FileGDB等常见矢量数据类型。矢量数据类型参见 矢量数据类型。说明 使用ogr2ogr命令行工具加载矢量数据，请先确保GDAL支持postgis驱动格式。...
创建数据源
该配置项默认为 true，表示不会自动将内置的数据库转移到绑定的项目。ODC 识别的数据库系统内置数据库如下：OceanBase Oracle：SYS。OceanBase MySQL：information_schema,mysql,test,oceanbase。在的弹窗中输入连接名后，单击 确定 按钮，...
数据类型转换
本文为您介绍迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle 租户的数据类型转换。支持的转换类型 Oracle 数据库 OceanBase 数据库 Oracle 租户 描述 INTEGER NUMBER(38,0)INT NUMBER(38,0)SMALLINT NUMBER(38,0)BINARY_FLOAT BINARY...
新建 TiDB 数据源
建议您为数据迁移项目创建一个专属的数据库用户，该用户必须具备相关的数据操作权限。详情请参见 创建 TiDB 数据库用户。如果您需要订阅 TiDB 增量日志，请准备 Kafka 数据源和 Kafka Topic。并且，请根据 TiDB 官方文档，提前创建 TiDB ...
数据安全
数据备份与恢复 云原生多模数据库 Lindorm 宽表引擎支持数据备份恢复功能，该功能基于数据生态服务中的数据迁移，将数据存储至阿里云对象存储服务OSS（Object Storage Service，简称OSS）中，定期全量备份数据，实时增量同步数据，来满足对...
使用场景
数据清洗与加工 DMS任务编排可以用于数据清洗和加工任务的编排和执行，如数据清洗、数据匹配、数据合并、数据转换等，确保数据的准确性和完整性。数据集成与汇总 使用DMS任务编排集成和汇总不同数据源的数据，进行数据聚合和分析，生成报表...
通过实时计算订阅数据
说明 如果数据格式不匹配，需要进行相应的 数据格式转换 工作，例如使用 from_unixtime 函数等。示例代码如下：INSERT INTO target_table SELECT t.dts_order_id,t.dts_buyer_id,t.dts_buyer_name,t.dts_product_id,t.dts_product_name,t....
连接方式概述
ORM 框架 ORM 对象关系映射（Object Relational Mapping，简称 ORM），是一种程序技术，用于实现面向对象编程语言里不同类型系统的数据之间的转换。从效果上说，它其实是创建了一个可在编程语言里使用的"虚拟对象数据库。在连接 OceanBase ...
概述
当应用程序通过规则中指定的账号连接至数据库并查询规则中指定的列时，Proxy会先将数据库返回的数据脱敏转换，再将脱敏后的数据返回给客户端。上图的脱敏规则为：仅当使用 testAcc 账号连接数据库进行查询时生效。仅对查询结果中 name 和 ...
按扫描量付费
您可以根据不同的业务需求，把原始数据转换为上述三类格式，然后只扫描您需要的数据列，无需扫描所有数据，从而节省扫描费用。压缩数据：对原始数据进行压缩来减少数据量，建议压缩格式为Parquet或者Orc格式，然后使用DLA扫描压缩过的数据...
概述
汇总表 您可以结合业务数据分析和数仓分层，将一些明细的事实数据和维度数据先进行汇总分析，创建汇总表，后续数据分析时直接取用汇总表中的数据即可，无需再取用明细表和维度表中的数据。逆向建模 逆向建模主要用于将其他建模工具生成的...
识别任务说明
导出敏感数据识别结果 数据安全中心 数据识别 和 数据检索 等页面展示的数据为使用主用模板和通用识别模板检测出的最新敏感数据。导出任务功能提供导出主用模板或已启用模板检测出的敏感数据的能力。创建导出任务后，数据安全中心会获取您...
连接方式概述
ORM 框架 ORM 对象关系映射（Object Relational Mapping，简称 ORM），是一种程序技术，用于实现面向对象编程语言里不同类型系统的数据之间的转换。从效果上说，它其实是创建了一个可在编程语言里使用的"虚拟对象数据库。在连接 OceanBase ...
概述
以下是常见的应用场景：数据存储与计算安全场景：在不可信环境中（如第三方平台），Spark全密态计算引擎 可以为关键的数据分析应用（如投资和财务分析）提供数据保护，保证用户数据在存储与计算过程中的安全，降低明文数据泄露风险。...
- 产品推荐
- 这些文档可能帮助您