DBMS_JOB包用来创建和管理定时任务,用户可以提交定时任务在数据库中定时执行。DBMS_LOB包提供了对大对象的访问和操作方式,包括BLOB和CLOB等。DBMS_LOCK包提供了将当前会话暂停一段时间的sleep内置函数。DBMS_METADATA包提供了获取数据库...
DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务,需先将已创建的数据源或集群绑定至数据开发...
需要注意的是,脱敏保护后的数据无法展示为原值,因此推荐用在临时查询等场景,不推荐在数据交换等场景中使用。加解密方案 Dataphin支持在数据集成中针对敏感数据进行加密或者解密。Dataphin支持常见的商密和国密,如AES、RSA、SM4等算法;...
需要注意的是,脱敏保护后的数据无法展示为原值,因此推荐用在临时查询等场景,不推荐在数据交换等场景中使用。加解密方案 Dataphin支持在数据集成中针对敏感数据进行加密或者解密。Dataphin支持常见的商密和国密,如AES、RSA、SM4等算法;...
调用本接口查询已完成扫描授权的MaxCompute数据包的信息,例如数据包的名称、数据包所属者的账号、数据包的风险等级等。接口说明 本接口一般用于 MaxCompute 数据包列表查询,便于搜索和敏感信息概览。QPS 限制 本接口的单用户 QPS 限制为 ...
ApsaraDB for OceanBase数据源提供读取和写入ApsaraDB for OceanBase数据的双向功能,您可以使用ApsaraDB for OceanBase数据源配置同步任务同步数据。本文为您介绍DataWorks的ApsaraDB For Oceanbase数据同步能力支持情况。支持的版本 离线...
通过数据订阅功能,您可以实时订阅源库的增量数据,轻松帮助业务实现轻量级缓存更新、业务异步解耦、含ETL逻辑的数据实时同步等场景。本文将介绍如何创建 RDS MySQL 数据订阅任务。前提条件 已创建源 RDS MySQL 实例,创建方式,请参见 ...
说明 您可以根据需要选择Extractor、StorageHandler或Outputer类型:Extractor:自定义输入数据解析器,用来实现自定义处理数据读取的逻辑,即如何读取非结构化数据。StorageHandler:用于指定和配置自定义Extractor和Outputer的实现类。...
PolarDB PostgreSQL版(兼容Oracle)支持交换两个分区或者子分区的内容。本文详细介绍了其语法及示例。语法说明 交换分区 ALTER TABLE<target_table>EXCHANGE PARTITION<target_partition>WITH TABLE[(INCLUDING|EXCLUDING)INDEXES][(WITH|...
附录:数据类型 数据类型映射 为确保编写Java UDF过程中使用的数据类型与MaxCompute支持的数据类型保持一致,您需要关注二者间的数据类型映射关系。具体映射关系如下。说明 在MaxCompute中不同数据类型版本支持的数据类型不同。从...
Databricks数据洞察(简称DDI)是基于Apache Spark的全托管大数据分析平台。产品内核引擎使用Databricks Runtime,并针对阿里云平台进行了优化。DDI为您提供了高效稳定的阿里云Spark服务,您无需关心集群服务,只需专注在Spark作业的开发上...
xml 数据类型可以被用来存储 XML 数据。它比直接在一个 text 域中存储 XML 数据的优势在于,它会检查输入值的结构是不是良好,并且有支持函数用于在其上执行类型安全的操作。使用这种数据类型要求在安装时用 configure-with-libxml 选项...
图数据库GDB是一种用于处理高度互连数据集场景(例如社交网络、实施图谱)的在线数据库服务。本文介绍创建GDB实例的方法。前提条件 已注册阿里云账号。注册流程请参见 注册阿里云账号。如果您使用RAM账号购买GDB实例,您需要确保已拥有阿里...
数据元管理通过分析业务流程,抽象关键业务对象和业务对象属性,并把关键业务对象新建为数据元,并配置数据元的类型、长度、质量校验函数和引用数据字典,为模型标准化设计及数据治理过程中的质量监控提供规则依据。本文介绍如何新建数据元...
数据元管理通过分析业务流程,抽象关键业务对象和业务对象属性,并把关键业务对象新建为数据元,并配置数据元的类型、长度、质量校验函数和引用数据字典,为模型标准化设计及数据治理过程中的质量监控提供规则依据。本文介绍如何新建数据元...
2024-3-7 开启冷数据归档 数据与缓存一站式 PolarDB MySQL版 支持数据与缓存一站式功能,在保证数据强一致性的同时,面向在线业务场景构建一套完整的数据库+缓存的解决方案。2024-3-12 灰度发布中 PolarDB MySQL推出数据与缓存一站式功能 ...
存储资源包 是一种预付费的存储容量资源包,可以抵扣同一地域下按量付费的存储容量费账单,您可以通过购买 存储资源包 来降低存储成本。单击 立即创建。说明 您可在左侧单击 实例列表>MySQL,查看目标实例的创建进度和状态。相关文档 创建...
背景信息 Hive是基于Hadoop的一个数据仓库工具,用来进行数据的提取、转化、加载,可以存储、查询和分析存储在Hadoop中的大规模数据。Hive数据仓库工具能将结构化的数据文件映射为一张数据库表,并提供SQL查询功能,能将SQL语句转变成...
背景信息 Hive是基于Hadoop的一个数据仓库工具,用来进行数据的提取、转化、加载,可以存储、查询和分析存储在Hadoop中的大规模数据。Hive数据仓库工具能将结构化的数据文件映射为一张数据库表,并提供SQL查询功能,能将SQL语句转变成...
GeoTools是一个遵循OGC标准,用于处理地理空间数据的工具包,实现了OGC标准的数据模型和接口,很多地理工具都基于GeoTools开发,详情请参见 https://geotools.org/ Geometry 在OGC的定义中,Geometry用来表示一个空间对象,例如空间点对象...
当您面对业务扩展需要构建 云数据库ClickHouse 集群时,本文档为您提供了在 云数据库ClickHouse 控制台上新建集群的详细步骤,帮助您快速搭建起 云数据库ClickHouse 集群。前提条件 已注册阿里云账号。具体操作,请参见 注册阿里云账号。...
PolarDB PostgreSQL版(兼容Oracle)支持按时间点恢复数据和按备份集(快照)恢复数据两种恢复方式,将历史数据恢复到新集群中。本文介绍如何按备份集(快照)恢复数据。注意事项 恢复后的集群包含原集群的数据和账号信息,不包含原集群的...
PolarDB PostgreSQL版 支持按时间点恢复数据和按备份集(快照)恢复数据两种恢复方式,将历史数据恢复到新集群中。本文介绍如何按备份集(快照)恢复数据。注意事项 恢复后的集群包含原集群的数据和账号信息,不包含原集群的参数设置。操作...
spark.jars.packages spark.jars.packages 可以用Package的形式来指定依赖包,Spark会动态下载这些Package到ClassPath里,多个Package以逗号(,)分隔。如下图示例,段落①指定delta包,段落②使用这个delta包。spark.files spark.files ...
识别任务用来扫描资产中的敏感数据,对数据进行分类分级。数据安全中心提供两种识别任务模式:系统默认任务和自定义识别任务。完成资产授权后,数据安全中心会为每一个数据库或Bucket自动创建敏感数据识别任务,即系统默认任务;您可以根据...
PolarDB PostgreSQL版(兼容Oracle)支持按时间点恢复数据和按备份集(快照)恢复数据两种恢复方式,将历史数据恢复到新集群中。本文介绍如何按时间点恢复数据。注意事项 恢复后的集群包含原集群的数据和账号信息,不包含原集群的参数设置...
PolarDB PostgreSQL版 支持按时间点恢复数据和按备份集(快照)恢复数据两种恢复方式,将历史数据恢复到新集群中。本文介绍如何按时间点恢复数据。注意事项 恢复后的集群包含原集群的数据和账号信息,不包含原集群的参数设置。操作步骤 ...
取值:1:未识别到敏感数据,无风险 2:1 级敏感数据风险 3:2 级敏感数据风险 4:3 级敏感数据风险 5:4 级敏感数据风险 6:5 级敏感数据风险 7:6 级敏感数据风险 8:7 级敏感数据风险 9:8 级敏感数据风险 10:9 级敏感数据风险 11:10 ...
本文介绍如何在 云原生数据仓库AnalyticDB MySQL版 控制台上创建集群。前提条件 已注册阿里云账号。具体操作请参见 注册阿里云账号。若您要创建按量付费的集群,请确保您的阿里云账号的余额大于等于100元。操作步骤 创建湖仓版(3.0)集群 ...
若您需要通过 AnalyticDB PostgreSQL版 访问外部异构数据源(HDFS、Hive和JDBC)时,可以使用异构数据源访问功能将外部数据转换为 AnalyticDB PostgreSQL版 数据库优化后的格式进行查询和分析。功能说明 外部数据源管理提供高性能的结构化...
本文介绍如何创建 PolarDB-X 1.0 数据订阅任务。前提条件 已创建 PolarDB-X 1.0,如未创建请参见 创建实例 和 创建数据库。说明 PolarDB-X 1.0 的存储类型支持为RDS MySQL(包括私有定制RDS和单独购买的RDS),暂不支持为PolarDB MySQL。若...
接口说明 在调用 DescribeTables 接口时,您可以设置搜索关键词、数据资产表的风险等级等参数来获取符合要求的数据资产的表信息。QPS 限制 本接口的单用户 QPS 限制为 10 次/秒,超过限制,API 调用会限流,这可能会影响您的业务,请合理...
DTS 数据传输服务(Data Transmission Service,简称DTS)支持关系型数据库(RDBMS)、非关系型数据库(NoSQL)、数据多维分析(OLAP)等数据源间的数据交互,集数据同步、迁移、订阅、集成、加工于一体,帮助您构建安全、可扩展、高可用的...
作为一个例子,本数据库的标准捐献包中包括了用于多种二维几何数据类型的 GiST 操作符类,它用来支持使用下列操作符的索引化查询:<< &< &>>>|&<|&>|>>@>~=内建 GiST 操作符类表中给出了标准发布中所包括的 GiST 操作符类。GiST 索引也有能力...
本文介绍如何创建数据管理DMS(Data Management)逻辑库的数据订阅任务。前提条件 已配置数据管理DMS逻辑库,具体操作请参见 逻辑库。说明 数据管理DMS逻辑库需基于多个PolarDB MySQL实例的分库建立。注意事项 类型 说明 源库限制 待订阅的...
DTS支持创建自建PosgreSQL、RDS PostgreSQL 数据订阅任务。本文以 RDS PostgreSQL 为例介绍配置流程。前提条件 已创建源 RDS PostgreSQL 实例,创建方式,请参见 创建RDS PostgreSQL实例。已设置源 RDS PostgreSQL 实例的参数wal_level=...
本文介绍如何创建 PolarDB分布式版 数据订阅任务。前提条件 已创建 PolarDB分布式版 实例和数据库,具体操作请参见 创建实例 和 创建数据库。说明 PolarDB分布式版 中的数据库须基于RDS MySQL创建,DTS暂不支持基于 PolarDB MySQL版 创建的...
本文为您介绍如何创建 PolarDB PostgreSQL版 数据订阅任务。前提条件 已创建源 PolarDB PostgreSQL版 数据库集群,创建方式请参见 创建PolarDB PostgreSQL版数据库集群。若源库为经典网络的实例,则不支持通过公网IP方式进行数据订阅。注意...
通过数据订阅功能,您可以实时订阅增量数据,轻松帮助业务实现轻量级缓存更新、业务异步解耦、含ETL逻辑的数据实时同步等场景。本文介绍如何创建 PolarDB MySQL版 数据订阅任务。前提条件 已创建 PolarDB MySQL版 集群,详情请参见 购买...
DTS支持创建自建PosgreSQL、RDS PostgreSQL 数据订阅任务。本文以 RDS PostgreSQL 为例介绍配置流程。前提条件 已创建源 RDS PostgreSQL 实例,创建方式,请参见 创建RDS PostgreSQL实例。说明 支持的版本,请参见 订阅方案概览。已设置源 ...