数据导入方式介绍
为满足多样化的数据导入需求，云原生数据仓库AnalyticDB MySQL版 提供了多种数据导入方式，包括：通过外表导入数据、使用DataWorks导入数据和利用JDBC通过程序导入数据等。本文介绍各导入方式的特性及适用场景，帮助您选择正确的数据导入...
通过Kettle导入至数仓版
本文以Excel为例，介绍如何通过Kettle将本地Excel数据导入至 AnalyticDB MySQL版 数仓版（3.0）。背景信息 Kettle是一款非常受欢迎的开源ETL工具软件，主要用于数据整合、转换和迁移。Kettle不仅支持各类关系型数据库和NoSQL数据源（HBase...
使用kettle将本地数据导入AnalyticDB MySQL 2.0
准备工作 使用Kettle将本地Excel数据导入 云原生数据仓库AnalyticDB MySQL版 2.0集群之前，需要完成以下准备工作。在本地主机中安装kettle。在 云原生数据仓库AnalyticDB MySQL版 2.0集群中创建目标数据库、表组和表。关于如何创建 云原生...
导入MySQL数据
在 日志存储>日志库 页签中，单击目标Logstore左侧的>，然后将鼠标悬浮在 数据接入>数据导入 上，单击+。在 快速数据接入 对话框，搜索并单击 MySQL-数据导入。设置导入配置。在 数据源设置 中，配置如下参数。基础参数 参数 说明 任务名称...
Broker Load
HDFS文件系统数据导入 以上面创建好的Doris表为例，通过Broker Load从HDFS上导入数据的语句如下所示。LOAD LABEL demo.label_20220402(DATA INFILE("hdfs:/10.220.*.*:8020/tmp/test_hdfs.txt")INTO TABLE `ods_dish_detail_test` COLUMNS ...
07批量导入逻辑表
通过数据模型导入功能，一次批量导入多张数据模型。前提条件 已完成数据模型目录规划。按照数据模型导入Excel模板完成模型录入。操作目的 通过数据模型导入功能，一次批量导入多张数据模型。导入模型如下：workspace-tables 说明 该Excel中...
导入数据元
本文介绍如何通过Excel批量导入数据元数据。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。说明 若您已在 资产加工 页面，请跳过“单击 资产加工”的...
导入数据元
本文介绍如何通过Excel批量导入数据元数据。操作步骤 登录企业数据智能平台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。说明 若您已在 资产加工 页面，请跳过“单击 资产加工”的操作...
导入概述
保证Exactly-Once：外部系统需要保证数据导入的At-Least-Once，StarRocks的Label机制可以保证数据导入的At-Most-Once，即可整体上保证数据导入的Exactly-Once。基本概念 名词 描述 导入作业 读取用户提交的源数据并进行清洗转换后，将数据...
导入概述
保证Exactly-Once：外部系统需要保证数据导入的At-Least-Once，StarRocks的Label机制可以保证数据导入的At-Most-Once，即可整体上保证数据导入的Exactly-Once。基本概念 名词 描述 导入作业 读取用户提交的源数据并进行清洗转换后，将数据...
如何使用Excel导入模块
简介 魔笔平台提供Excel导入模块，支持导入Excel类型的文件，本文介绍如何使用Excel导入模块。适用场景 在搭建应用时，如需使用Excel导入功能，可以直接引用魔笔平台提供的Excel导入模块。Excel导入模块是通过指定实体类型，导入Excel文件...
安装Agent
数据库审计系统的Agent程序是部署在用户终端或目标数据库服务器上的功能插件，用来转发数据库访问流量到审计系统。您需要根据数据库服务器的类型，选择合适的方式来安装Agent，才能使数据库审计服务收集目标数据库的访问流量信息。本文介绍...
使用MongoDB工具将自建数据库迁移至分片集群实例
说明 您也可以直接在自建MongoDB数据库所属的服务器上执行Mongodump和Mongorestore命令，无需安装。目标分片集群实例的存储空间应大于自建MongoDB数据库已占用的存储空间。如存储空间不足，您可以升级存储空间，详情请参见 变更配置方案...
目标数据库连接性检查
如果目标数据库为SQL Server，那么检查SQL Server安装服务器上是否设置了防火墙，或者检查目标数据库中是否有endpoint或trigger限制了访问来源IP。如果目标数据库为Oracle，那么检查目标数据库的配置文件sqlnet.ora，确认配置项 TCP....
导入指标
通过Excel导入指标数据，可实现批量创建指标。本文介绍如何导入指标。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。说明 若您已在 资产加工 页面，请...
导入指标
通过Excel导入指标数据，可实现批量创建指标。本文介绍如何导入指标。操作步骤 登录企业数据智能平台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。说明 若您已在 资产加工 页面，请跳...
概述
创建Federated表时，表定义是相同的，但是数据的物理存储是在远程服务器上处理的。Federated表由两个元素组成：具有数据库表的远程 PolarDB MySQL版 集群或社区MySQL服务器，该数据库表由表定义（存储在MySQL数据字典中）和关联表组成。...
安装Agent
Agent程序是数据库审计系统提供的功能插件，您需要在用户终端、目标数据库服务器或连接数据库的应用服务器上安装Agent，用于将数据库访问流量转发到审计系统。本文介绍安装及卸载Agent的具体操作。安装位置 根据待审计的数据库类型，您需要...
基本概念
为了进一步提高效率，云数据库ClickHouse 将海量数据分散存储到多台服务器上，每台服务器只存储和处理海量数据的一部分，在这种架构下，每台服务器被称为一个分片（Shard）。副本（Replica）为了在异常情况下保证数据的安全性和服务的高...
Azure Cosmos DB API for MongoDB迁移至阿里云
在安装有MongoDB服务的Linux服务器上执行以下语句将数据库数据全部导入至阿里云MongoDB数据库。mongorestore-host<mongodb_host>:3717-authenticationDatabase admin-u<username>-p<password>dump 说明<mongodb_host>：MongoDB实例的...
LOAD
如果您需要将外部存储上的数据导入MaxCompute的表或表的分区中，可以通过LOAD命令实现该操作。本文为您介绍如何使用LOAD命令将外部存储上的CSV格式或其他开源格式数据导入MaxCompute。本文中的命令您可以在如下工具平台执行：MaxCompute...
LOAD
如果您需要将外部存储上的数据导入MaxCompute的表或表的分区中，可以通过LOAD命令实现该操作。本文为您介绍如何使用LOAD命令将外部存储上的CSV格式或其他开源格式数据导入MaxCompute。本文中的命令您可以在如下工具平台执行：MaxCompute...
准备数据
上传原始数据至RDS数据源，详情请参见 将Excel的数据导入数据库。新增数据源 说明 本次实验需要创建MySQL数据源。进入管理中心页面。登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 管理中心，在下拉框中选择对应工作空间后...
MongoDB 6.0
第三方云数据库迁移至阿里云数据库MongoDB：使用MongoDB工具将MongoDB Atlas数据库迁移至阿里云数据库MongoDB 使用DTS将MongoDB Atlas数据库迁移至阿里云数据库MongoDB 使用DTS将华为云文档数据库迁移至阿里云数据库MongoDB 使用MongoDB...
退款说明
轻量应用服务器上的数据会随退订操作一起释放且无法恢复。请您在退订资源前，仔细核对退订资源的信息，确认退订条款和退订金额，并确认该轻量应用服务器已完成数据备份或者迁移。退款规则 轻量应用服务器退订主要分为两种场景：退订使用中...
魔笔怎么批量导入数据到应用中
问题描述 魔笔怎么批量导入数据到应用中 解决方案 可以使用以下两种方式。如何使用Excel导入模块 通过excel表格问题 配置连接器 使用服务器返回json格式的数据，引入并保存到魔笔的实体。
Quick BI数据填报批量导入Excel报错“导入失败：Excel...
问题描述 数据填报批量导入Excel报错“导入失败：Excel 表单解析失败”。问题原因 排查上传成功的Excel与失败的Excel，发现失败的Excel中存在多余的字段，与成功模板不匹配。解决方案 删掉多余字段即可正常导入。适用于 Quick BI 说明：...
RDS MySQL修改字符集（平滑方案）
如需调整，可以由DBA或管理员在 安全规则>SQL变更>批量数据导入 中修改。CSV格式：文件中的分隔符必须为逗号。Excel格式：Excel文件中可以有表头（属性），也可以直接是数据。附件 单击 上传文件 上传附件。说明 支持SQL、CSV、TXT、XLSX和...
Broker Load
背景信息 Broker Load是一种异步的导入方式，通过读取远端存储（如HDFS、S3）上的数据，导入数据到 云数据库 SelectDB 版 的表中。您可通过MySQL协议创建 Broker Load 导入，并通过 SHOW LOAD 命令检查导入结果。单次导入数据量最多可支持...
导入数据
可以导入已有数据，预览查看数据信息，本文介绍如何导入数据。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 洞察。在顶部菜单栏，选择 数据集。说明 若已在 数据集 页面，请跳过该步骤。在数据集管理页面，单击右上角...
最佳实践概览
增量迁移源服务器 如果源服务器上的数据是不断更新的，建议您使用增量迁移。源服务器迁移至容器镜像 SMC支持将源服务器迁移到容器镜像服务，实现低成本容器化应用迁移。容器的优势在于提高了资源利用率，降低了计算成本，自动化管理调度及...
自定义区域下钻层（v3.x版本）
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
从CSV文件、TXT文件或SQL脚本导入数据到RDS
数据管理DMS提供数据导入功能，支持大批量数据快速导入至数据库，节省人力物力成本。您可以将CSV文件、TXT文件或SQL脚本的数据导入到RDS实例中。详情请参见 数据导入。
重置系统
背景信息 警告 重置或更换系统会清除轻量应用服务器上的磁盘数据，请您根据需要做好数据备份。重置系统后，可能会导致监控失效。如果监控出现问题，您可以手动安装云监控插件。远程连接服务器安装：具体操作，请参见 安装和卸载云监控插件...
通过上传本地数据新建数据集
上传本地文件的方式导入业务所需的数据集，以便在模型画布中编辑业务模型时使用导入的数据集。本文介绍如何通过上传本地数据新建数据集。前提条件 已创建云计算资源作为存储数据源，具体操作，请参见 新建计算资源。已准备好待上传的数据表...
导入方式建模
您可将本地表通过Excel的方式导入至DataWorks数据建模中，或将数据建模中的表导出至本地数据仓库中。本文将为您介绍导入与导出表的操作方法。通过导入方式建模 将本地表以Excel的方式导入至数据建模中，导入方法如下。在 维度建模 页面，...
Excel导入
简介 Excel导入组件用于向数据库批量上传相关业务数据。组件内置两个按钮下载导入模板和批量提交。下载导入模板会下载Excel导入组件数据源对应实体的Excel模板文件。批量提交按钮会触发文件上传，并按Excel导入组件数据源对应实体字段解析...
功能特性
Stream Load Broker Load Broker Load是一种异步的导入方式，通过读取远端存储（如HDFS、S3）上的数据，导入数据到云数据库 SelectDB 版的表中。您可通过MySQL协议创建Broker Load导入，并通过SHOW LOAD命令检查导入结果。单次导入数据量最...
使用OSS外表高速导入OSS数据
数据导入导出的性能和 AnalyticDB PostgreSQL 的资源（CPU、I/O、内存、网络等）有关，也和OSS相关。为了获取最优的导入导出性能，建议在创建表时，使用列式存储加压缩功能。例如，指定子句"WITH(APPENDONLY=true,ORIENTATION=column,...
分区格式化数据盘
背景信息 服务器上挂载的数据盘必须分区格式化才能正常使用。不同操作系统的数据盘分区格式化的操作不同，请您根据服务器实际的操作系统进行选择：分区格式化Linux服务器的数据盘的具体操作，请参见 分区格式化Linux服务器的数据盘。分区...
- 产品推荐
- 这些文档可能帮助您