输入数据
本文为您介绍如何输入数据。使用限制 输入数据时需要拥有相应数据集或数据源的权限：若输入类型为数据集，必须有数据集使用权限。若输入类型为数据源表，必须有数据源使用权限。操作步骤 进入数据准备页面。在数据准备编辑页面，从左侧的...
数据输入输出
MaxFrame支持直连MaxCompute，允许对MaxCompute中的数据进行高效直接读写操作，运行时无需将数据拉取至本地计算，消除了不必要的本地数据传输，提高了执行效率。MaxCompute表 您可以使用MaxCompute表创建MaxFrame DataFrame对象，并将计算...
Quick BI交叉表配置的数据填报事件无法输入数据
问题描述 Quick BI交叉表配置的数据填报事件无法输入数据。问题原因 事件配置了字段关系映射。解决方案 取消字段关系映射配置。适用于 Quick BI 公共云
Quick BI数据准备的数据输入时数据集显示灰色无法选择
问题描述 Quick BI数据准备数据输入时数据集显示灰色无法选择是什么原因？问题原因 此数据集使用的数据源来自探索空间上传的本地文件数据，数据输入不支持此类数据集。解决方案 可以将本地文件上传至使用数据库创建的数据源中，然后基于...
Quick BI数据准备的数据输入为什么选择不了已存在的...
问题描述 Quick BI数据准备的数据输入为什么选择不了已存在的数据源。问题原因 数据准备目前版本仅支持这些公网数据源，MySQL、MaxCompute（ODPS）、SQL Server、Oracle、ClickHouse、Hologres、AnalyticDB for MySQL 3.0和PostgreSQL的...
Quick BI中数据准备功能添加数据输入组件，点击校验...
问题描述 Quick BI中数据准备功能添加数据输入组件，点击校验连通性一直在加载中。问题原因 用户数据源未将数据准备引擎的IP地址添加至白名单导致校验不通过导致。解决方案 点击未添加白名单提示的箭头，出现复制白名单按钮，点击复制添加...
Dataphin中汇总逻辑表补数据生成...数据输入的业务日期
概述 Dataphin中汇总逻辑表补数据时，生成的SQL中事实逻辑表筛选日期是最大分区（20230516），而不是补数据输入的业务日期（20230505）。详细信息 汇总逻辑表补数据生成的SQL中，具体分区是由事实逻辑表的“分区与生命周期”中设置的。该...
Quick Audience在授权数据银行时报错"输入的数据银行...
问题描述 在授权数据银行时报错"输入的数据银行信息不正确，请检查后重新输入!Invalid token。问题原因 该错误一般是因为令牌输入有误或者是令牌重复使用导致的错误。解决方案 1.检查输入的令牌信息是否准确。2.检查令牌是否重复使用。适用...
Quick BI数据准备功能输入的数据集刷新预览只需要1-2...
问题描述 Quick BI数据准备功能输入的数据集刷新预览只需要1-2秒但是在数据准备中执行2个小时后提示超时被中止任务，日志显示如下：2023-04-25 09:41:31[INFO]Init etl task context,etlId:[4c0abe9f-3933-4444-b573-d1bf26d51ad5],taskId:...
输入和输出数据的格式
云数据库ClickHouse输入和输出数据格式的详细信息，请参见 输入和输出数据的格式。
Dataphin“数据集成”输入和输出字段间无法建立映射...
产品名称 Dataphin 产品模块 数据集成 概述 提供数据集成中输入表字段和输出表字段映射不上问题的排查思路 问题描述 管道集成时，字段映射有问题，有些字段可以映射上、有些映射不上，不管是同名映射还是同行映射都会出现：问题原因 表字段...
Quick BI数据准备中输入过滤设置参数时提示：...
概述 Quick BI数据准备中输入过滤设置参数时提示：“Parameter validation failed”。详细信息 Quick BI数据准备中输入过滤设置参数时提示：“Parameter validation failed”。需要设置全局参数，之后再设置这个过滤的参数。相关文档 参考...
Quick BI自定义SQL创建数据集出现输入的SQL代码自动...
问题描述 Quick BI自定义SQL创建数据集出现输入的SQL代码自动转换为汉字是什么原因。问题原因 用户的浏览器开启了默认自动翻译为中文，导致SQL语句也被翻译。解决方案 关闭浏览器的自动翻译即可。适用于 Quick BI 说明：本文档描述的功能及...
Dataphin集成任务输入源表中有数据，任务同步成功，...
问题描述 Dataphin集成任务输入源表中有数据，任务同步成功，输出源表数据查询为空。2021-11-08 17:03:06.479[job-1239184]INFO DlinkTransBase-任务启动时刻:2021-11-08 17:03:04 任务结束时刻:2021-11-08 17:03:06 任务总计耗时:1s 任务...
QuickAudience绑定数据银行时报错输入银行信息不正确
问题描述 本文主要描述了绑定数据银行时，报错为输入银行信息不正确的解决方法。问题原因 令牌已经失效。每个令牌只能用一次而且令牌的有效期是24小时。解决方案 重新获取令牌。适用于 QuickAudience
Dataphin管道集成任务输入组件为OSS数据源报“object ...
问题描述 管道集成任务，输入组件为OSS数据源，报“Object 无效，Object名称在使用UTF-8编码后长度必须在1-1023之间”错。问题原因“object前缀”输入项中输入的数据文件名称中有中文存在。解决方案 在“object前缀”传入全部为英文的数据...
Dataphin管道任务输入组件为Hana数据源，选中表之后报...
问题描述 Hana数据源在管道任务中选择对应的表后提示没有足够权限获取元数据信息。报错信息如下：“从租户XXX的数据源XXX获取元数据失败JDBCDriverException SAP DBTech JDBC:[258]:insufficient privilege:Detailed info for this error ...
Quick BI数据准备选择MaxCompute表，分区输入不合法
概述 本文主要描述了Quick BI数据准备选择MaxCompute表，分区输入不合法的解决方法。详细信息 分区的正确格式为：pt='${mydata}' 适用于 Quick BI v.4.3
Dataphin如何使用脚本输入组件实现SQL查询语句作为...
概述 在集成任务中，Dataphin如何使用脚本输入组件实现SQL查询语句作为数据源？详细信息 集成任务中，配置脚本输入组件，填写配置文件如下格式，即可实现sql查询语句作为数据源。适用于 Dataphin-公共云
Dataphin管道任务输入源为Oracle时，无法选择到数据表
问题描述 Dataphin管道任务输入源为Oracle时，无法选择到数据表。问题原因 Oracle数据源配置的schema不是业务数据使用的schema，导致没有表数据。解决方案 修改数据源配置，将schema改为业务数据使用的schema即可。适用于 Dataphin
Quick BI数据源连接测试报错“AE0540010009对不起，...
问题描述 Quick BI数据源连接测试报错“AE0540010009对不起，vpc实例必须输入内网域名”。问题原因 用户使用的数据源配置没有改动，但是Hologres的VPC数据库地址发生了变化。解决方案 登录Hologres数据库控制台，查看确认当前的VPC数据库...
圈选任务数据说明
输入数据格式说明 人群圈选任务包含以下两类输入数据：待圈选人群数据，各字段定义如下表所示。字段名称 描述 user_id 待圈选的用户ID，String类型，不能为空。item_id 物品ID，String类型，不能为空。phone 待圈选的用户的手机号，String...
ScanSensitiveData
调用ScanSensitiveData识别输入数据中是否存在敏感数据。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action ...
数据准备快速入门
输入数据 支持从目标数据源中获取数据表或者使用有权限的数据集，作为输入数据。在数据准备编辑页面，从左侧的节点操作区，拖拽 数据输入 至画布区，进行数据流构建。配置节点 输入类型为数据源表 选择输入类型为数据源表。选择数据源。...
输入节点
当选择数据表时，需保证模型与下游节点的输入数据模型相同，适用于已创建数据模型的场景。当选择*（任意结构）时，代表数据结构为任意结构，适用于未创建数据模型的场景。说明 模型名称支持复制，将鼠标移动至已选择模型时，单击 图标，...
输入节点
当选择数据表时，需保证模型与下游节点的输入数据模型相同，适用于已创建数据模型的场景。当选择*（任意结构）时，代表数据结构为任意结构，适用于未创建数据模型的场景。说明 模型名称支持复制，将鼠标移动至已选择模型时，单击 图标，...
管理HBase输入组件
表 选择数据输入的表。输出方式 选择输出方式。包括 Normal模式 和 多版本模式。maxversion 输出方式选择 多版本模式（竖表）需填写 maxversion。maxversion 指所要读取的版本数，-1表示读取所有的版本。文件编码 选择文件编码。系统支持的...
“数据传输”导入
您可以通过 数据传输 对HybridDB for MySQL（原名PetaData）进行数据的全量和增量迁移。准备工作 迁移之前，需要事先创建好HybridDB for MySQL中待迁入数据的目标数据库和数据表。创建任务 打开 数据传输控制台：在数据迁移界面中，创建...
SELECT TRANSFORM
select transform 语法允许您启动一个指定的子进程，将输入数据按照一定的格式通过标准输入至子进程，并且通过解析子进程的标准输出获取输出数据。select transform 让您无需编写UDF，便可以实现MaxCompute SQL对其他脚本语言的支持。功能...
Quick BI数据填报数字输入框设置小数位数后无法修改
问题描述 Quick BI数据填报数字输入框设置小数位数后无法修改。问题原因 保存数据填报时，该字段的信息已经生产，存储在数据库表中，前端限制不支持修改。解决方案 可以重新创建一个数字输入框，将之前的数字输入框隐藏掉。适用于 Quick BI...
数据源中心
数据源名称 是 输入数据源的名称。描述 否 输入数据源的描述。IP主机名 是 输入连接HIVE/IMPALA的IP地址。端口 是 HIVE/IMPALA 数据源类型对应的端口为10000。用户名 是 设置连接HIVE/IMPALA的用户名。密码 否 设置连接HIVE/IMPALA的密码。...
配置FTP输入组件
FTP输入组件适用于从FTP中将数据读取至大数据平台对接的存储系统内，进行数据整合和再加工。本文为您介绍如何配置FTP输入组件。前提条件 已创建FTP数据源，详情请参见 创建FTP数据源。进行FTP输入组件属性配置的账号，需具备该数据源的同步...
配置FTP输入组件
FTP输入组件适用于从FTP中将数据读取至大数据平台对接的存储系统内，进行数据整合和再加工。本文为您介绍如何配置FTP输入组件。前提条件 已创建FTP数据源，详情请参见 创建FTP数据源。进行FTP输入组件属性配置的账号，需具备该数据源的同步...
创建数据流
Hologres 只支持数据输入任务节点。OSS 说明 OSS 只支持数据输出任务节点。操作步骤 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 集成与开发（DTS）>数据集成>离线集成。说明 若您使用的是极简模式的控制台，请单击控制台左上角的 图标，...
接入其他自建或其他云厂商数据库实例
接入方式说明 DAS支持以下三种接入其他自建数据库的方式：直连接入：无需部署DAS网关（DBGateway），DAS通过公网主动访问您的数据库，您仅需要输入数据库账号和密码即可快速接入数据库实例。该方式暂时只支持接入MySQL、MongoDB、Redis。...
接入阿里云ECS自建数据库实例
根据下表输入数据库登录信息。参数名称 说明 选择引擎 选择您的ECS自建数据库类型，目前支持以下引擎：MySQL、PostgreSQL、MongoDB、Redis。端口 ECS自建数据库的端口。数据库账号 ECS自建数据库的账号。密码 ECS自建数据库对应的密码。...
新建Spark Batch类型的公共节点
输入数据格式 输入表的数据格式，由数据模型定义，在下拉列表中选择输入数据的逻辑表名称，表示该计算资源中提供数据的数据表的结构。当选择数据表时，需保证输入的模型与上游节点的输出数据模型相同。当选择星号（*）时，代表数据结构为...
Stage级别诊断结果
Stage输入数据倾斜 问题 导致Stage输入数据倾斜的可能原因如下：建表时选择的分布字段不合理，导致Stage中的某个数据扫描算子在扫描数据时存在倾斜。上游Stage的数据通过网络传输到当前Stage时存在倾斜。建议 建表时选择合适的分布字段。更...
登录数据库
在 登录实例 对话框中，输入 数据库账号、数据库密码。说明 数据库账号指 数据库用户账号名称（非数据库名称）。单击 确认。成功登录后自动跳转至 SQL窗口 页面，您可以在此对数据库进行操作。从实例控制台跳转至DMS登录数据库 如下以登录...
- 产品推荐
- 这些文档可能帮助您