Hive作业异常排查及处理
此时EMR旧集群上的Hive表数据保存在HDFS上，可以先尝试将 HDFS数据转移到OSS上，并且创建新表。hadoop fs-cp hdfs:/emr-header-1.xxx/old/path oss:/bucket/new/path hive-e"create table new_tbl like old_tbl location 'oss:/bucket/new/...
基于Hadoop集群支持Delta Lake或Hudi存储机制
步骤三：基于MaxCompute实时分析Hadoop集群数据 基于已创建的MaxCompute项目以及Hadoop集群表数据，创建External Project，用于Hadoop集群，并映射至已创建的MaxCompute项目。后续可通过映射的MaxCompute项目对External Project进行数据...
功能更新动态（2023年）
新建普通维度逻辑表 创建业务限定 通用研发 离线物理表字段配置优化，可设置资产治理相关属性，如可为字段匹配词根、标准和字段的安全分类。编辑器升级优化：支持select字段列表中或where条件中使用@批量选择表字段。支持鼠标悬停表名称...
CREATE SCHEMA
Hologres支持跨Schema创建表。本文为您介绍如何在Hologres中创建Schema，以及跨Schema创建表。背景信息 Hologres兼容PostgreSQL，支持的Schema功能与PostgreSQL相同。Hologres新增Schema功能后，表的存储结构由 database.table 变为 ...
批量创建外部表
表名冲突 忽略，继续创建其他表：创建表时，如果数据库中已存在当前创建的表名称，则忽略当前创建的表，继续创建其他表。更新，修改同名表：创建表时，如果数据库中已存在当前创建的表名称，则更新已有表的数据。报错，不再重复创建：创建...
Gateway实例说明
创建Gateway集群 集群类型 文档链接 Hadoop 创建Gateway集群 DataLake、DataFlow和OLAP 使用EMR-CLI自定义部署Gateway环境 创建Gateway节点组 仅EMR-5.10.1及以上版本的DataLake和DataFlow集群，支持增加Gateway类型的节点组，详情请参见 ...
在文件存储 HDFS 版上使用Presto
本文主要介绍如何在 文件存储 HDFS 版 上搭建及使用Presto。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。...如果返回信息与创建表中的信息一致，则表示Presto可读取 文件存储 HDFS 版 上的数据并计算。
创建表
您可以通过DMS页面或者DDL语句创建表。通过DMS页面创建维度表 登录 分析型数据管理控制台。在控制台左上方选择数据库所属地域。单击目标数据库右侧的登录数据库，在DMS for AnalyticDB页面的顶部菜单栏单击创建>表。在新建：表页面，按照...
创建外部表
高级选项 表名冲突 创建表时，如果数据库中已存在当前创建的表名称，您可以根据需要选择如下处理方式：忽略，继续创建其他表：忽略当前创建的表，继续创建其他表。更新，修改同名表：更新已有表的数据。报错，不再重复创建：产生报错，不再...
IMPORT FOREIGN SCHEMA
高级选项 表名冲突 忽略，继续创建其他表：创建表时，如果数据库中已存在当前创建的表名称，则忽略当前创建的表，继续创建其他表。更新，修改同名表：创建表时，如果数据库中已存在当前创建的表名称，则更新已有表的数据。报错，不再重复...
可视化管理内部表、外部表或视图
在 创建表/视图 对话框，根据实际情况创建内部表、外部表或视图，并配置相应信息。创建内部表或外部表 您可以通过如下两种方式添加内部表或外部表：（推荐）方式一：通过SQL脚本创建表。需要配置的信息如下。参数名称 说明 SQL DDL SCRIPT ...
SQL Console初体验
当您成功在DMS上登录数据库后，可在SQL Console中进行创建数据库、创建表、查询表数据、变更表数据等操作。本文以在RDS MySQL数据库中进行操作举例。创建数据库 在RDS控制台创建数据库 访问 RDS实例列表，在上方选择地域，然后单击目标实例...
表管理
后续操作 主题定义完成后，您可执行如下操作：在创建表时，可选择将目标表挂载至相应主题下。创建表的操作如下。表类型 相关文档 MaxCompute 创建并使用MaxCompute表 AnalyticDB for PostgreSQL 创建AnalyticDB for PostgreSQL表 EMR 创建...
CREATE TABLE
本文介绍如何在 云数据库ClickHouse 中创建表。创建本地表 语法：CREATE TABLE[IF NOT EXISTS][db.]local_table_name ON CLUSTER cluster(name1[type1][DEFAULT|MATERIALIZED|ALIAS expr1],name2[type2][DEFAULT|MATERIALIZED|ALIAS expr2]...
代码模式建模
if not exists 当您的目标引擎中已存在同名表，如果不指定 if not exists 时，则创建表会报错，而指定了 if not exists 后，无论引擎中是否存在同名表，则创建表均会成功。说明 当您的引擎中已经存在同步表时，指定了 if not exists 后，...
基于PostgreSQL标准权限模型授权
alter default privileges 规则匹配只能在创建表时执行，在创建表之后修改表Owner（alter table tablename owner to）不会触发 alter default privileges。例如，用户User1属于Group1，如果要给Group1匹配规则，授予未来表全权限。情况如下...
DDL语句
目录 创建表 修改表属性-增加列 修改表属性-删除列 修改表属性-表重命名 修改表属性-手动合并碎表 删除表 删除表-彻底删除 清空表数据 创建单值分区表 创建单值分区 删除单值分区 清空单值分区 创建分桶表 创建索引 添加索引 删除索引 重建...
创建多元索引的映射关系
说明 关于创建表的映射关系的具体操作，请参见 创建表的映射关系。背景信息 由于执行CREATE TABLE创建表的映射关系时，数据表可能会包含多种不同的索引类型，当用户使用映射表查询数据时，SQL引擎会自动选择合适的数据表主键查询、二级索引...
账号权限列表
仅 DDL CREATE 创建表的权限。DROP 删除表和视图的权限。ALTER 重命名和修改表结构的权限。SHOW VIEW 查看视图或了解视图如何执行。CREATE VIEW 创建视图的权限。仅 DML SELECT 查询表中数据的权限。INSERT 可以在表中插入行数据。UPDATE ...
创建表的映射关系
说明 关于create table语句的更多信息，请参见 创建表的映射关系 和 创建多元索引的映射关系。前提条件 已初始化Client。具体操作，请参见 初始化OTSClient。已创建数据表。如果要使用多元索引映射关系，则需要已创建多元索引。注意事项 ...
表管理
表类型 相关文档 MaxCompute 创建并使用MaxCompute表 AnalyticDB for PostgreSQL 创建AnalyticDB for PostgreSQL表 EMR 创建EMR表 创建Hologres内部表 创建Hologres内部表 创建Hologres外部表 创建Hologres外部表 导入表数据，操作详情请...
数据表操作
} 创建表时配置全局二级索引 以下示例用于同时创建数据表和全局二级索引。该表包含pk1（String类型）和pk2（Integer类型）两列主键且包含defcol1（String类型）和defcol2（Integer类型）两个预定义列，属性列值只保留最新版本数据以及数据...
基于原生DDL语句创建元表
开发过程中所用到的输入表、输出表、维表可以通过创建元表方式来进行创建和管理，以支持您通过引用元表的方式来创建其他数据表。有效解决原生DDL开发方式的研发路径复杂，密码明文记录，安全性差，研发效率低等问题。更多信息，请参见 ...
基于原生DDL语句创建元表
开发过程中所用到的输入表、输出表、维表可以通过创建元表方式来进行创建和管理，以支持您通过引用元表的方式来创建其他数据表。有效解决原生DDL开发方式的研发路径复杂，密码明文记录，安全性差，研发效率低等问题。更多信息，请参见 ...
Dataphin中执行hadoop fs-ls命令方法
概述 Dataphin中执行hadoop fs-ls命令的方法。详细信息 创建HADOOP_MR任务，可以执行hadoop fs-ls/命令。适用于 Dataphin
Hadoop Streaming
hadoop jar/usr/lib/hadoop-current/share/hadoop/tools/lib/hadoop-streaming-X.X.X.jar-file/home/hadoop/mapper.py-mapper mapper.py-file/home/hadoop/reducer.py-reducer reducer.py-input/tmp/hosts-output/tmp/output 参数 描述 ...
时序模型
时序表操作 使用 表格存储 时序模型时，您需要使用 CreateTimeseriesTable 接口创建时序表用于时序数据存储。具体操作，请参见 创建时序表。创建时序表后，您可以管理时序表。具体操作说明请参见下表。功能 描述 列出时序表名称 当需要查看...
创建数据表
使用CreateTable接口创建数据表时，需要指定数据表的结构信息和配置信息，高性能实例中的数据表还可以根据需要设置预留读/写吞吐量。创建数据表的同时支持创建一个或者多个索引表。说明 创建数据表后需要几秒钟进行加载，在此期间对该数据...
创建数据表
使用CreateTable接口创建数据表时，需要指定数据表的结构信息和配置信息，高性能实例中的数据表还可以根据需要设置预留读/写吞吐量。创建数据表时支持创建一个或者多个索引表。注意事项 创建数据表后需要几秒钟进行加载，在此期间对该数据...
数据同步模版
Flink会自动在Hologres上创建表，但如果Hologres已经存在对应的表，Flink会根据您创建计划中选择的目标库和表信息来映射。Hologres不支持更改列的类型。如果当前字段的类型和Hologres下游表中对应的字段类型不同，则会写入失败，您需重修改...
计算源概述
Hadoop 计算设置为Hadoop的租户支持创建以下计算源：离线计算源 Hadoop计算源：绑定Hadoop计算源的项目，支持规范建模、即席查询、Hive SQL任务、通用脚本等功能。创建Hadoop计算源，请参见 创建Hadoop计算源。实时计算源 Flink 计算源：...
创建项目
这样会出现创建的表的Owner不是创建者本人且创建表的人没有权限查看自己创建的表的情况。开发角色成员生产任务测试 任务发布到生产环境后，建议开发角色成员在运维中心对生产环境任务执行一次测试，以确保生产任务可正常执行。若任务执行...
时序表操作
更多信息，请参见 创建表。以下示例用于创建名称为mytable的时序表，表中数据永不过期。create-m timeseries-t mytable-ttl-1 执行表操作前，您需要执行 use 命令选择要使用的表。更多信息，请参见 使用表。以下示例用于使用mytable时序表...
使用流程
创建时序表后，选择要进行操作的时序表，用于后续表操作或者数据操作。6 数据操作 根据需要进行数据操作，您可以写入时序数据、导入时序数据、查询时序数据、检索时间线、扫描时间线以及更新时间线。7 使用SQL查询数据 重要 只有支持SQL...
创建表的映射关系
创建表的映射关系时，allow_inaccurate_aggregation的默认取值为true，表示允许通过牺牲聚合操作的精度提升查询性能。您可以根据需要将此项配置为false。创建多元索引的映射关系时，allow_inaccurate_aggregation的取值固定为true。示例 ...
创建二级索引
二级索引相当于把数据表的主键查询能力扩展到了不同的列，当需要使用属性查询数据时，您可以通过创建二级索引加快数据查询的效率。设置预定义列后，在创建二级索引时将预定义列作为索引表的索引列或者属性列。您可以使用CreateIndex接口在...
创建逻辑模型：维度表
可用的维度及其属性有：订单维度（属性包括订单ID、订单创建时间、买家ID、卖家ID等）、用户维度（性别、出生日期等）、商品维度（包括商品ID、商品名称、商品上架时间）等，此时您就可以将这些维度和属性创建为订单维度表、用户维度表、...
创建索引表
调用createSchema创建表后，会生成如上图结构所示的ID主表和z3二级索引表 在已经存在的主表上建立二级索引 调用LindormDataStore.createIndex方法，在已创建且"geomesa.secondary.enabled"参数为true的主表上，创建二级索引 String index=...
自建Hadoop数据迁移到阿里云E-MapReduce
低成本 在阿里云创建Hadoop类型的EMR集群和自建Hadoop集群相比有一定成本优势，同时阿里云EMR可以使用OSS作为底层存储空间，进一步降低成本。架构图 方案详情 请参见 阿里云自建Hadoop数据迁移到阿里云E-MapReduce。icmsDocProps={'...
通过控制台使用分析存储
在 表格存储 控制台创建时序模型实例后，您可以在实例下创建分析存储并使用SQL查询时序数据。注意事项 时序分析存储功能将从2023年12月20日正式开始收费。目前支持使用时序分析存储功能的地域有华东1（杭州）、华东2（上海）、华北2（北京...
- 产品推荐
- 这些文档可能帮助您