输入输出数据的格式

数据库ClickHouse输入输出数据格式的详细信息,请参见 输入输出数据的格式。

Dataphin输出数据源为MySQL,为什么管道任务日志中...

概述 本文主要介绍输出数据源为MySQL,管道任务日志中写入条数远大于数据库中对表 count(1)数目的原因。详细信息 在执行管道任务时,检查运行日志发现写入条数和数据库中表的 count(1)条数对不上,管道任务日志写入条数远大于数据库中表的 ...

接入其他自建或其他云厂商数据库实例

本文介绍如何在数据库自治服务DAS上接入除阿里云外的其他自建数据库,包括用户本地机房数据库、其他云厂商的数据库和其他云厂商虚拟机上的自建数据库。前提条件 DAS目前支持接入的自建数据库引擎:MySQL MongoDB PostgreSQL Redis 说明 ...

接入阿里云ECS自建数据库实例

本文介绍如何在数据库自治服务DAS中接入阿里云ECS自建数据库。前提条件 DAS目前支持接入的ECS自建数据库引擎有:MySQL PostgreSQL MongoDB Redis 说明 目前DAS仅支持接入6.0及以下版本的自建Redis。部署数据库实例的ECS与DAS属于同一个阿里...

DB管理

本文为您介绍在交互式分析Hologres管理控制台的Database管理页面,如何创建并删除数据库,并为数据库选择对应的权限策略。授权数据库 您可以在DB管理页面,使用可视化方式创建数据库。登录 Hologres管理控制台,单击 前往HoloWeb,进入...

使用MongoDB工具将自建数据库迁移至单节点实例

推荐使用DTS迁移单节点架构的自建MongoDB数据库上云,可实现不停机迁移上云,操作步骤,请参见 云数据库MongoDB版(单节点架构)全量迁移至云数据库MongoDB版(所有架构)。更多数据迁移或同步场景的解决方案,请参见 数据迁移和同步方案...

使用MongoDB工具将自建数据库迁移至副本集实例

Mongodump和Mongorestore是MongoDB数据库自带的备份恢复工具。您可以在本地设备或ECS实例中安装MongoDB数据库,然后借助该工具将自建MongoDB数据库迁移至阿里云MongoDB副本集实例。推荐 使用DTS迁移副本集架构的自建MongoDB数据库上云,可...

通过Mongo Shell连接MongoDB单节点实例

Mongo Shell是MongoDB自带的数据库管理工具,您可以将Mongo Shell工具下载并安装至客户端(本地服务器或ECS服务器),用于连接云数据库MongoDB单节点实例。本文介绍通过Mongo Shell连接云数据库MongoDB单节点实例的方法。前提条件 已创建云...

管理用户账号和数据库

在 创建 页面后,输入数据库名,单击 确定。重要 数据分片过多会导致内存资源占用高,影响查询性能,建议合理规划数据库的数量,最好10个以内。删除数据库 登录 TSDB控制台。在页面左上角,选择目标地域。在 实例列表 页面,单击目标实例 ...

使用MongoDB工具将自建数据库迁移至分片集群实例

Mongodump和Mongorestore是MongoDB数据库自带的备份恢复工具。您可以在本地设备或ECS实例中安装MongoDB数据库,然后借助该工具将自建MongoDB数据库迁移至阿里云MongoDB分片集群实例。背景信息 建议通过DTS迁移分片集群架构的自建MongoDB...

示例代码

服务调用示例(Python)支持通过公网地址或VPC内网地址调用服务(简单的HTTP调用),服务请求的输入输出数据格式均由部署服务的Processor指定。通过公网地址或VPC内网地址调用,接口使用的鉴权方式不同。PAI-EAS提供了基于官方Processor...

SQL Console初体验

当您成功在DMS上登录数据库后,可在SQL Console中进行创建数据库、创建表、查询表数据、变更表数据等操作。本文以在RDS MySQL数据库中进行操作举例。创建数据库 在RDS控制台创建数据库 访问 RDS实例列表,在上方选择地域,然后单击目标实例...

DMS

DMS提供的图形界面使得数据库管理变得更加简单和直观,且具有安全的数据库访问和权限管理机制。使用DMS连接 云原生数据仓库AnalyticDB PostgreSQL版 数据库可以使得开发人员更专注于应用程序开发和业务需求,而无需过多关注底层数据库的...

社区兼容版账号管理

读取和设置权限:对授权的数据库和字典仅可进行读和设置的操作,不可写入数据。DDL权限 是否授予DDL权限。允许DDL。禁止DDL。密码 数据库账号密码,设置规则如下。由大写字母、小写字母、数字和特殊字符中的至少三种组成。()_+-=为特殊字符...

连接数据库集群

维护数据库 输入维护数据库,默认为 postgres。用户名 PolarDB 集群的账号,创建账号请参见 创建数据库账号。密码 PolarDB 集群账号所对应的密码。单击 保存。若连接信息无误,单击目标数据库后出现类似如下界面,则表示连接成功。右键单击...

连接数据库集群

维护数据库 输入维护数据库,默认为 postgres。用户名 PolarDB 集群的账号,创建账号请参见 创建数据库账号。密码 PolarDB 集群账号所对应的密码。单击 保存。若连接信息无误,单击目标数据库后出现类似如下界面,则表示连接成功。右键单击...

功能特性

数据库自治 功能集 功能 功能描述 参考文档 监控告警 7 x 24小时异常...空间碎片自动回收 弹性伸缩 根据您预设的策略,输出数据库实例性能、存储空间的扩容建议,并在数据库实例性能达到设置阈值时,对数据库实例进行扩容或回缩操作。弹性伸缩

通过Mongo Shell连接MongoDB副本集实例

Mongo Shell是MongoDB自带的数据库管理工具,您可以下载Mongo Shell工具并安装至客户端(本地服务器或ECS服务器),用于连接云数据库MongoDB副本集实例。前提条件 已创建云数据库MongoDB副本集实例,创建方法请参见 创建副本集实例。背景...

登录数据库

您需要登录数据库后才能对数据库内的数据进行管理,本教程以DMS为例介绍如何登录数据库。前提条件 已根据快速入门,完成了 创建初始账号。操作步骤 登录 云原生数据仓库AnalyticDB PostgreSQL版控制台。在控制台左上角,选择实例所在地域。...

使用Mongo Shell通过SSL加密连接数据库

在使用Mongo Shell连接数据库时,您可以启用SSL(Secure Sockets Layer)加密功能提高数据链路的安全性。通过SSL加密功能可以在传输层对网络连接进行加密,在提升通信数据安全性的同时,保障数据的完整性。前提条件 实例类型为副本集实例,...

连接数据库集群

除了通过PolarDB管理控制台登录数据库之外,您还可以通过pgAdmin 4客户端连接PolarDB集群。本章将介绍如何通过pgAdmin 4客户端连接PolarDB集群。更多连接方式 除了通过pgAdmin 4客户端连接PolarDB集群外,您还可以在 下载客户端和驱动 页,...

使用DataWorks同步数据

本文以MaxCompute为例介绍如何将数据通过DataWorks同步至 云数据库ClickHouse。背景信息 您可以通过DataWorks,将支持的各种数据源数据离线同步至 云数据库ClickHouse。离线同步支持的数据源类型,具体请参见 支持的数据源与读写插件。前提...

连接数据库

可以不输入-D 仅输入数据库名称。mysql 通过第三方客户端连接到数据库 PolarDB-X 支持通过如下第三方客户端进行连接,您可以去对应的官方网站下载客户端。MySQL Workbench(推荐)SQLyog Sequel Pro Navicat for MySQL 说明 第三方GUI客户...

异步任务处理机制

任务输入输出 输入数据参数一般以Source命名,包括如下参数:SourceURI:数据源地址,目前仅支持OSS URI。Sources:多个输入URI地址数组。Source:多个输入URI对象。输出数据参数一般以Target命名,包括如下参数:TargetURI:目标地址,该...

示例项目使用说明

基本概念 OSSURI:oss:/<accessKeyId>:<accessKeySecret>@<bucket>.<endpoint>/a/b/c.txt,用户在作业中指定输入输出数据源时使用,类似 hdfs:/。阿里云AccessKeyId和AccessKeySecret是您访问阿里云API的密钥。集群运行 开源项目运行示例...

应用模板

在应用的输入输出中,使用 实体表达式 来替代具体的数据,即可创建应用的运行模板。使用模板进行 批量投递 时,用户可以选择模板中根实体表格数据作为输入。平台后台挨个按照输入的实体数据,解析表达式,从而生成具体的运行任务。创建模板...

函数对象

函数即定义了一组 SQL 脚本的集合,可以在 SQL 语句中对函数进行调用以返回一个指定的结果。...创建函数需要输入以下信息:名称:指定存储过程的名称。返回类型:函数返回值的数据类型。参数:参数即调用存储过程时传入的...父主题:数据库对象

发布中心概述

同时,根据节点是否存在跨工作空间依赖,您可以基于业务需求配置发布环境的 依赖映射 参数,不同配置情况,节点发布后的上下游依赖及输入输出名称不同,详情请参见下文的 节点依赖关系及输入输出变更。发布MaxCompute引擎类任务,系统会...

前言

持久化存储 当前 App 支持对象存储 OSS 作为输入输出数据的持久化存储,后续会支持 NAS。用户的程序、自定义 Docker 镜像、作业的运行日志存储在 OSS 中。App的分类 公有 App:批量计算官方提供,按照 Region 部署,对 Region 内的所有用户...

功能简介

数据开发为用户提供一站式计算节点开发能力,通过对数据加工流程的开发和运行调试等环节的一体化管理,数据开发实现数据加工工作流编排、加工逻辑的复用,大幅提高数据开发效率。数据开发帮助用户优化智能系统的架构,提高系统的工程化水平...

功能简介

数据开发为用户提供一站式计算节点开发能力,通过对数据加工流程的开发和运行调试等环节的一体化管理,数据开发实现数据加工工作流编排、加工逻辑的复用,大幅提高数据开发效率。数据开发帮助用户优化智能系统的架构,提高系统的工程化水平...

数据开发

数据开发为用户提供一站式计算节点开发能力,通过对数据加工流程的开发、部署、调试等环节的一体化管理,数据开发实现数据加工工作流编排、加工逻辑的复用,大幅提高数据开发效率。数据开发帮助用户优化智能系统的架构,提高系统的工程化...

新建存储过程

概述 存储过程是一条或多条语句的集合,对数据库进行一系列复杂操作时,存储过程可以在数据库内将这类复杂操作封装成一个代码块,以便重复使用,从而减少数据库开发人员的工作量。存储过程旨在完成特定功能的 SQL 语句集,经编译创建并保存...

ListNodeInputOrOutput

调用ListNodeInputOrOutput接口,查询当前节点的输入输出信息。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 ...

设置调度依赖最佳实践

删除某表的输入输出 您在进行数据开发时,经常会用到静态表(数据通过本地文件上传到表中),这部分静态数据没有产出任务。配置依赖时,您需要删除静态表的输入:如果静态表不满足 t_的格式,不会被处理为临时表,此时您需要删除静态表的...

配置脚本模式组件

脚本模式组件用于配置系统组件不支持的配置项,以满足业务场景。操作步骤 请参见 离线...columnMapping:输入输出字段映射关系配置,不区分顺序。parameter:组件参数请参见对应组件的说明。单击 确认,完成 脚本模式输出组件 的属性配置。

SQL组件概述

组件使用流程 在DataWorks中创建的 组件 需与DataWorks的 SQL组件节点 配合使用,具体流程如下:定义SQL组件 组件开发者可通过数据开发(DataStudio)的 组件管理 界面,定义通用逻辑的过程体代码及输入输出参数,通过编写抽象的SQL加工...

配置脚本模式组件

columnMapping:输入输出字段映射关系配置,不区分顺序。parameter:组件参数请参见对应组件的说明。单击 确认,完成 脚本模式 输出组件的属性配置。后续步骤 完成输出组件的配置后,即可配置离线单条管道的容错、并发度及内存等参数。具体...

执行流程

背景信息 本示例演示在不定义 输入输出映射 情况下,执行的输入是如何传递给任务步骤,进而传递给函数计算Function的;以及函数计算Function的返回是如何传递给任务步骤,最后成为流程执行的输出。您也可以直接调用 StartExecution 接口...

准备数据

默认数据库数据库的名称。用户名 数据库对应的用户名。密码 数据库对应的密码。认证选项 选择 无认证。单击对应资源组后的测试连通性。测试连通性通过后,单击 完成。新建业务流程 单击当前页面左上角的 图标,选择 全部产品>数据开发与...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 Redis 版 云数据库 RDS 数据库备份 云数据库 MongoDB 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用