数据量
数据量 说明 数据库磁盘空间 由数据库的数据文件空间、数据库的日志文件空间、操作系统文件空间和空闲空间组成。说明 RDS中为：购买时选择的存储空间。ECS中为：购买时选择的系统盘和数据盘存储空间。数据文件空间 数据库的数据文件在...
存储格式与SerDe
DLA内置了处理各类数据文件的Serialize/Deserilize（简称SerDe，用于序列化和反序列化），您无需编写程序，直接选用一款或多款SerDe来匹配OSS上的数据文件格式。通过SerDe，DLA可以对OSS上的多种格式的文件进行查询分析，包括纯文本文件...
什么是备份数据量
概念 说明 数据库磁盘空间 数据库磁盘空间由数据库的数据文件空间、数据库的日志文件空间、操作系统文件空间和空闲空间组成。对于RDS来说，是购买时选择的存储空间；对于ECS来说，是购买时选择的系统盘和数据盘存储空间。数据文件空间 数据...
导入数据
本文提供的数据文件样例如下：导入非分区表的数据文件：banking.txt。导入分区表的数据文件：banking_nocreditcard.csv、banking_uncreditcard.csv 和 banking_yescreditcard.csv。步骤一：导入数据 基于Tunnel Upload 将本地数据文件内容...
上传数据
本文介绍在我的数据页面中针对三种不同类型数据，上传不同格式数据的方法。背景信息 在管理数据页面中，数据的类型分为 矢量、栅格、地理服务、三维模型、三维瓦片 和 业务数据 六种。不同类型对应可上传的数据包括：矢量：在矢量页签内，...
上传数据
本文介绍在我的数据页面中针对三种不同类型数据，上传不同格式数据的方法。背景信息 在管理数据页面中，数据的类型分为 矢量、栅格、地理服务、三维模型、三维瓦片 和 业务数据 六种。不同类型对应可上传的数据包括：矢量：在矢量页签内，...
添加静态数据
本文档介绍在DataV中添加静态数据文件的方法。前提条件 已准备好待添加的静态数据文件。操作步骤 登录 DataV控制台。在 工作台 页面中，将鼠标移动至需要编辑的数据看板上，单击 编辑。重要 如果您的 工作台 页面内还没有创建任何数据看板...
数据组织优化
Clustering服务需要和Meta Service进行交互，获取需要执行此操作的表或分区的列表，执行结束之后，会把新老数据文件的信息传入Meta Service，它负责Clustering操作的事务冲突检测，新老文件meta信息原子更新、老的数据文件回收等。...
概述
Federated表结构如下：当在本地 PolarDB MySQL版 集群的Federated表上执行SQL时，通常会从本地 PolarDB MySQL版 集群插入数据文件，更新或删除数据文件的操作被发送到远程 PolarDB MySQL版 集群或社区MySQL服务器执行，在远程集群或服务器...
导入导出表数据
MaxCompute Studio可以将CSV、TSV等格式的本地数据文件导入至MaxCompute表中，也可将MaxCompute表中的数据导出到本地文件。MaxCompute Studio通过Tunnel导入导出数据。前提条件 导入导出数据使用MaxCompute Tunnel，因此要求MaxCompute ...
上传数据
参数 配置说明 文件格式 您可以根据待上传的数据文件类型选择文件格式，当前支持 CSV 和 自定义文本文件 两种文件格式，其中自定义文本文件支持.txt、.csv 和.log 类型的文件。选择文件 单击 浏览，根据界面提示选择待上传的数据文件。选择...
使用OSS控制台上传数据文件
对象存储OSS控制台支持上传大小不超过5 GB的文件，如果您需要导入图数据库GDB实例的数据文件不超过5 GB，您可以将数据文件上传至对象存储OSS的Bucket中，然后从Bucket中将数据文件导入至图数据库GDB实例。本文介绍将数据文件上传至对象存储...
导出至OSS
INSERT OVERWRITE PARTITION SELECT 功能：和 INSERT INTO PARTITION SELECT 使用方法相同，功能上的不同在于会清除掉本次执行中涉及到的目标分区中之前已有的数据文件，对于没有新数据写入的分区，则不会清除其中的数据文件。语法：INSERT...
堆表结构
结构 说明 table files 表文件，由一个或多个数据文件组成，文件数量与文件大小有关，超过1 GB就会生成一个新的数据文件。file 数据文件，由多个数据块组成。page 数据块，由多个数据行组成。page header 数据块头，详细信息请参见 数据...
准备工作
将数据文件（点文件和边文件）导入至图数据库GDB实例前，您需要先准备好需要导入的数据文件、获取导入过程中使用到的实例信息等，使导入操作更加流畅。前提条件 已创建图数据库GDB实例，创建方法请参见 创建实例。已创建Bucket，创建方法请...
RDS SQL Server空间不足问题
select*from sys.dm_db_file_space_usage 查看当前数据库的数据文件的总空间大小以及实际已使用数据空间大小。说明 仅适用于SQL Server 2012及以上版本。如果发现实例的空间使用率过高，首先应该在 RDS管理控制台 的 监控与报警 页面中检查...
Tunnel操作
默认上传的数据文件为TXT格式。数据文件的归档路径有两种选择：您可以将文件直接归档至MaxCompute客户端的 bin 目录中，此时 path 需要设置为 文件名.后缀名；也可以将文件归档至其他路径下，例如D盘的test文件夹，path 需要设置为 D:\test...
表数据格式
BaseFile：DeltaFile经过 COMPACTION 合并操作后生成的数据文件类型，会消除中间历史状态，PK值相同的记录只会保留一行，按照列式压缩存储，用来支撑高效的全量数据查询需求。进行数据查询时：每次快照查询会先找到最新生成的BaseFile，...
使用curl命令导入数据文件
操作步骤 在客户端执行如下命令，将存储至对象存储OSS的Bucket中的数据文件导入至图数据库GDB实例。curl-i-u<username>:<password>-X POST \-H 'Content-Type:application/json' \ ...
创建OSS外部表
MaxCompute支持您在项目中创建OSS（Object Storage Service）外部表，与存储服务OSS上的目录建立映射关系，您可以通过OSS外部表访问OSS目录下的数据文件中的非结构化数据，或将MaxCompute项目中的数据写入OSS目录。本文为您介绍创建OSS外部...
数据管理
VACUUM命令可以通过两种方式指定删除多久前的数据文件：通过参数 delta.deletedFileRetentionDuration 配置表属性，默认值为1周。通过VACUUM命令指定，单位为小时。语法 VACUUM(path=STRING|table=tableIdentifier)(RETAIN number HOURS)?...
使用GdbLoader脚本导入数据文件
本文介绍使用GdbLoader脚本将数据文件从对象存储OSS的Bucket中导入至图数据库GDB实例、查看导入任务和取消导入任务的方法。前提条件 已创建目标图数据库GDB实例，创建方法请参见 创建主实例。说明 如果Bucket是在对象存储控制台创建，请...
通过外表导入至数仓版
本文介绍如何通过外表查询OSS数据文件，并将OSS中的数据文件导入 AnalyticDB MySQL 数仓版（3.0）。目前支持的OSS数据文件格式有Parquet、CSV和ORC。前提条件 已开通OSS服务并创建存储空间和项目。具体操作，请参见 开通OSS服务、控制台...
导入数据并查询
本文以数据文件存储在OSS中为例，介绍如何将OSS中的数据文件导入 AnalyticDB MySQL版 的 adb_demo 数据库中并进行查询。前提条件 通过以下步骤在OSS中创建存储 AnalyticDB MySQL版 数据的目录。开通OSS服务。详情请参见 开通OSS服务。创建...
云盘备份数据导入至AnalyticDB MySQL版
更多语法详情，请参见 不带分区的数据文件创建OSS外表。CREATE TABLE IF NOT EXISTS mytable(id string,name string)ENGINE='OSS' TABLE_PROPERTIES='{"endpoint":"oss-cn-hangzhou-internal.aliyuncs.com","url":"oss:/bucket/_export/...
敏感数据溯源
您可以将DataWorks中的数据文件导出或下载至本地，再上传至溯源任务中进行溯源，也可以将外部系统的数据保存至CSV文件，再上传至溯源任务中进行溯源。目标文件上传成功后，您还可以选择 替换 或 下载 该文件。单击 开始溯源，启动目标溯源...
归档为CSV或ORC格式
说明 如果OSS对象存储中存在与归档的数据文件名称冲突的数据文件，系统会报文件已经存在的错误。例如：Target file for archived table exists on oss.您可以在以上三个语法中通过添加 FORCE 关键字来覆盖OSS对象存储中已经存在的数据文件...
CSV数据文件格式
本文介绍需要导入至图数据库GDB实例的CSV数据文件格式。背景信息 CSV数据文件遵循RFC 4180 CSV规范。更多信息，请参见 CSV文件的一般格式和MIME类型。重要 所有文件必须采用UTF-8格式编码。注意事项 必须将点和边分别放到单独的文件。说明 ...
Tair持久化与备份恢复
如遇 Tair 宕机或重启，能够利用磁盘中的持久化文件恢复数据。为满足各类场景下对备份与恢复的需求，云原生内存数据库Tair 提供RDB持久化、AOF持久化和Tair-Binlog持久化策略。持久化策略 云原生内存数据库Tair 支持以下持久化策略：RDB...
Redis持久化与备份恢复
如遇 Redis 宕机或重启，能够利用磁盘中的持久化文件恢复数据。为满足各类场景下对备份与恢复的需求，云数据库 Redis 版 提供RDB持久化、AOF持久化和Tair-Binlog持久化策略。持久化策略 云数据库 Redis 版 支持以下持久化策略。RDB持久化 ...
COMPACTION
Compaction可以把所有的数据文件按照一定策略进行Merge操作，可提升查询效率。功能介绍 Transactional Table 2.0支持近实时增量写入和time travel查询特性，在数据频繁写入的场景中，必然会引入大量的小文件，需要设计合理高效的合并策略来...
企业版产品系列
集群中所有的数据文件都存放在共享存储（PolarStore）中，各个主节点通过分布式文件系统（PolarFileSystem）共享底层存储（PolarStore）中的数据文件。用户可以通过集群地址访问整个集群，数据库代理会自动转发SQL命令到正确的主节点。多主...
RDS空间组成说明
不过与MySQL不同，SQL Server的数据文件空间都是预分配的，所以您每建一个DATABASE都会占用近500M空间用以存储您的数据。系统文件空间：包括实例的访问日志，错误日志文件等。事务文件空间：与MySQL（每个实例一个LOG）不同，SQL Server的...
入门概述
通过NFSv3协议访问CPFS文件系统 协议服务 在服务器中卸载挂载的文件系统 卸载文件系统 删除文件系统 删除文件系统 与对象存储OSS之间实现数据流动 数据流动 监测文件的使用量 数据监控 备份文件系统中的数据 文件存储CPFS（NFS协议）备份 ...
数据加密
当云数据库MongoDB实例开启TDE功能后，新创建的数据库或集合中的数据在写入到任何设备（例如磁盘、SSD、PCIe卡）、服务（例如对象存储OSS）前都会进行加密，因此实例中对应的数据文件和备份文件都是以密文形式存在的。TDE的设置方法请参见 ...
Hudi数据源
查询性能分析 SelectDB使用Parquet Native Reader读取COW表的数据文件，使用Java SDK（通过JNI调用hudi-bundle）读取MOR表的数据文件。在Upsert场景下，MOR表中依然会有数据文件没有被更新，这部分文件可以通过Parquet Native Reader读取。...
使用mysqldump导入导出数据
从MySQL导出的数据文件包含每个表的建表语句。如果直接在 PolarDB-X 1.0 上执行这些建表语句，会在 PolarDB-X 1.0 上建立一个单表。如果要对某个表进行分库分表，那么需要手动对建表语句进行修改，PolarDB-X 1.0 建表语句的语法请参考 ...
ActionTrail日志清洗
以操作DLA的账号为例，该账号下每天会产生几千个数据文件，一个月的文件数将达到几十万个，大量的数据文件对大数据分析非常不便，分析数据耗时，且需要足够大的集群资源才能进行大数据分析。前提条件 使用ActionTrail日志清洗之前，您需要...
数据库画像
单击 上传，上传新采集到的数据文件，单击 创建。输入备注信息后，单击 创建。系统会根据全部数据文件自动生成新的画像版本。授权画像 被授权的用户，具有查看画像、查看画像关联项目、创建数据库评估项目和下载评估报告的权限。授权有效期...
数据缓存
概述 File Cache通过缓存最近访问的远端存储系统（HDFS或对象存储）的数据文件，可加速后续访问相同数据的查询。在频繁访问相同数据的查询场景中，File Cache可以避免重复访问远端数据的开销，提升热点数据的查询分析性能和稳定性。原理 ...
- 产品推荐
- 这些文档可能帮助您