创建Hudi数据源
参数 描述 数据源名称 命名规则如下：只能包含中文、字母、数字、下划线（_）或短划线（-）。长度不能超过64字符。数据源编码 配置数据源编码后，您可以在Flink_SQL任务中通过 数据源编码.表名称 或 数据源编码.schema.表名称 的格式引用...
创建Hudi数据源
参数 描述 数据源名称 命名规则如下：只能包含中文、字母、数字、下划线（_）或短划线（-）。长度不能超过64字符。数据源编码 配置数据源编码后，您可以在Flink_SQL任务中通过 数据源编码.表名称 或 数据源编码.schema.表名称 的格式引用...
创建Kudu数据源
参数 描述 数据源名称 命名规则如下：只能包含中文、字母、数字、下划线（_）或短划线（-）。长度不能超过64字符。数据源编码 配置数据源编码后，您可以在Flink_SQL任务中通过 数据源编码.表名称 或 数据源编码.schema.表名称 的格式引用...
创建数据板块
在使用规范建模前，您需要完成数据板块的创建。本文为您介绍如何新建数据板块。前提条件 仅支持 智能研发版。若需使用，当前租户还需开通智能研发模块。在开始执行操作前，请确认您已将数据板块架构师、业务负责人、数据负责人添加至...
创建数据板块
在使用规范建模前，您需要完成数据板块的创建。本文为您介绍如何新建数据板块。前提条件 仅支持 智能研发版。若需使用，请升级当前版本。升级版本，请参见 升级。在开始执行操作前，请确认您已将数据板块架构师、业务负责人、数据负责人...
存储基础知识
PV和PVC 并非所有的Kubernetes数据卷（Volume）具有持久化特性，为了实现持久化的存储，容器存储需依赖于一个远程存储服务。为此Kubernetes引入了PV和PVC两个资源对象，将存储实现的细节从其如何被使用中抽象出来，并解耦存储使用者和系统...
新建虚拟维度逻辑表
中文名称 命名规则如下：不能超过128个字符。支持任何字符。描述信息 填写对维度逻辑表的简单描述。单击 确定。步骤二：保存并提交虚拟维度逻辑表 按照下图操作指引，提交虚拟维度逻辑表。后续步骤 如果项目的模式为Dev-Prod，则您需要发布...
新建虚拟维度逻辑表
中文名称 命名规则如下：不能超过128个字符。支持任何字符。描述信息 填写对维度逻辑表的简单描述。单击 确定。步骤二：保存并提交虚拟维度逻辑表 按照下图操作指引，提交虚拟维度逻辑表。后续步骤 如果项目的模式为Dev-Prod，则您需要发布...
操作流程
新建逻辑表命名规则 通过新建逻辑表命名规则，让创建的逻辑表遵循统一的命名规范标准，形成条理清晰，方便检索并易于理解的数据模型。具体操作，请参见 新建逻辑表命名规则。新建数据字典并物理化 通过新建并维护数据模型中使用的数据字典...
操作流程
新建逻辑表命名规则 通过新建逻辑表命名规则，让创建的逻辑表遵循统一的命名规范标准，形成条理清晰，方便检索并易于理解的数据模型。具体操作，请参见 新建逻辑表命名规则。新建数据字典并物理化 通过新建并维护数据模型中使用的数据字典...
Serverless场景Fluid进阶配置
使用本地盘作为缓存数据存储介质的Fluid JindoRuntime自定义资源的YAML示例如下：apiVersion:data.fluid.io/v1alpha1 kind:JindoRuntime metadata:name:demo-dataset spec:replicas:2 podMetadata:annotations:k8s.aliyun....
功能特性
卸载DBFS 扩容DBFS 支持业务友好地在线扩充存储容量 在线扩容 格式化DBFS 格式化数据库文件存储操作会清空已写入的数据，建议操作前创建快照备份数据库文件存储的数据-重命名DBFS 修改数据库文件存储的名称-删除DBFS 删除数据库文件存储并...
11创建逻辑表命名规则
创建逻辑表命名规则，以保证后续数据建模过程逻辑表名称的可读性和规范性，本章以ODS层模型命名规则设计为例介绍。前提条件 已新建工作组“信息中心(xxzx)”，具体操作，请参见 新建工作组。已新建模型层级“ODS”，具体操作，请参见 新建...
应用场景
主备两份数据存储。主备日志复制同步模式下，影响主库性能。异步模式下，备库延迟存在数据丢失风险。部署及切换复杂，需保证切换工具的高可用。传统数据库搬站上云 传统数据库，例如：Oracle/RAC，SAP HANA等基于SAN之上构建。与SAN相比，...
其他命名规范
临时表命名规范 不同场景下临时表命名规范不同：测试、数据探查、临时取数等场景下产生的临时表命名规范为：{project_name}.tmp{工号/操作人名标识}{产出表表名}_{n}。脚本内临时表命名规范：{project_name}.tmp{产出表表名}{n}。下线表...
数据集成服务
数据导入的迁移方案包括同步MySQL数据到表格存储、同步Oracle数据到表格存储、同步Kafka数据到表格存储、同步HBase数据到表格存储、同步MaxCompute数据到表格存储、同步表格存储数据表中数据到另一个数据表和同步表格存储时序表中数据到另...
查看数据源校验记录
数据源校验记录用于记录质量规则校验数据源的结果。本文为您介绍如何查看数据源质量规则的校验记录。数据源校验记录 在Dataphin首页，单击顶部菜单栏的 资产。按照下图操作指引，进入 数据源 校验记录页面。参数 说明 筛选与搜索 您可以...
使用CNFS管理NAS存储卷
容器网络文件系统CNFS（Container Network File System）可以提升NAS存储卷的性能和QoS控制，便于您实现NAS共享存储卷共享、隔离存储卷管理、自动扩容等。功能与文档 说明 通过CNFS方式使用NAS文件系统 为了提升NAS文件系统的性能，容器...
功能特性
存储：可配合使用云盘、文件存储NAS、对象存储OSS实现容器数据的持久化存储。日志：支持采集日志到日志服务SLS。安全：可配合访问控制RAM实现ECI资源的访问权限控制。弹性伸缩：可配合使用弹性伸缩实现自动扩缩容ECI实例。更多信息，请参见...
ExecContainerCommand-在容器内部执行命令
eci-2zebxkiifulhl*ContainerName string 是 容器名称。nginx Command string 是 要在容器内执行的命令序列。最多 20 个命令，单个命令最长 256 个字符。执行多个命令时，字符串需按照 JSON 格式传入，例如：["/bin/sh","-c","ls-a"]。["/...
表、列和实例的命名规范
表和列名称 表和列的命名规范如下：只能由英文字母、数字和下划线（_）组成。大小写敏感。首字符不能为数字。名称长度为1~255个字符。实例名称 实例名称在一个地域内必须唯一，不同地域内的实例名称可以相同。实例的命名规范如下：只能由...
通过控制台使用宽表模型
预定义列名称命名规则为由大小写字母、数字或下划线（_）组成，且只能以字母或下划线（_）开头，长度在1个~255个字节。预定义列的数据类型可选为 字符串、整型、二进制、浮点数 或 布尔值。单击 添加二级索引，输入索引名称，选择索引主键...
挂载EmptyDir数据卷
EmptyDir数据卷是一个空的目录，用于临时存放数据，便于容器之间共享数据。本文介绍如何挂载EmptyDir数据卷。注意事项 EmptyDir为临时存储，当ECI实例删除或重启时，EmptyDir数据卷中保存的数据均会被清空。配置说明（OpenAPI）调用...
使用数据缓存创建实例
配置说明 使用数据缓存创建ECI实例时，您可以指定数据缓存Bucket，并通过HostPath的方式直接挂载数据存储路径。此时，系统会自动创建并挂载一块按量付费的云盘。该云盘的容量等于数据缓存大小，随实例一起创建和释放。OpenAPI 调用...
挂载NAS数据卷
名称 类型 示例值 描述 Container.N.VolumeMount.N.Name String test-volume 要挂载到容器的数据卷的名称，对应Volume.N.Name的值。Container.N.VolumeMount.N.MountPath String/usr/share 挂载目录。容器挂载目录下的内容会被数据卷的内容...
挂载OSS数据卷
OSS是阿里云提供的一个海量、安全、低成本、高可靠的存储空间，适合存储非结构化数据（如图片、音视频等）。本文介绍如何挂载OSS数据卷。注意事项 OSS按照使用量进行计费，支持按量付费、资源包和SCU付费方式。更多信息，请参见 OSS计费...
挂载ConfigFile数据卷
ConfigFile数据卷是一个配置文件，用于向ECI实例注入配置数据。本文介绍如何挂载ConfigFile数据卷。配置说明（OpenAPI）调用CreateContainerGroup接口创建ECI实例时，您可以通过Volume相关参数声明数据卷，然后通过Container.VolumeMount...
新建逻辑表命名规则
逻辑表命名规则旨在于让创建的逻辑表遵循统一的命名规范标准，可基于模型命名属性，对模型命名规则进行配置，形成条理清晰，方便检索并易于理解的数据模型，让数据模型应用更方便。本文介绍如何创建逻辑表命名规则。前提条件 已完成模型...
新建逻辑表命名规则
逻辑表命名规则旨在于让创建的逻辑表遵循统一的命名规范标准，可基于模型命名属性，对模型命名规则进行配置，形成条理清晰，方便检索并易于理解的数据模型，让数据模型应用更方便。本文介绍如何创建逻辑表命名规则。前提条件 已完成模型...
使用前须知
删除Object 重命名Object 数据丢失 为避免影响OSS-HDFS服务的正常使用或者引发数据丢失的风险，在开通了OSS-HDFS服务的Bucket中，禁止重命名OSS-HDFS的数据存储目录.dlsdata/下的任意Object。重命名Object 上传Object 数据丢失 为避免影响...
计费说明
（可选）命名空间配额 企业版的容器镜像命名空间增量配额包，可在当前实例规格下额外补充命名空间配额。每增加5个命名空间配额，额外需支付25元/月。（可选）仓库配额 企业版的容器镜像仓库增量配额包，可在当前实例规格下额外补充仓库配额...
诊断工具asmctl常用命令
例如可以使用 n*/p*/l=v*的过滤条件，该条件能够匹配所有在以n为开头的命名空间中，含有键名称为l的标签、而该标签对应的值以v开头，且自身名称以p开头的容器组。asmctl dashboard 访问与社区istio兼容的Web UI。目前asmctl仅对Envoy提供了...
风险识别管理（新版）
规则名称 规则类型 规则等级 规则配置 非工作时间查询大数据量敏感数据 数据访问风险 低 如下时间段查询数据量大于10000时命中该规则。周一至周五：22:00～24:00。周六至周日：00:00～24:00。相似SQL查询 数据访问风险 低 十分钟内查询相似...
数据模型架构规范
数据处理流程架构 数据划分及命名空间约定 请根据业务划分数据并约定命名，建议针对业务名称结合数据层次约定相关命名的英文缩写，这样可以给后续数据开发过程中，对项目空间、表、字段等命名做为重要参照。按业务划分：命名时按主要的业务...
通过控制台使用分析存储
在 表格存储 控制台创建时序模型实例后，您可以在实例下创建分析存储并使用SQL查询时序数据。注意事项 时序分析存储功能将从2023年12月20日正式开始收费。目前支持使用时序分析存储功能的地域有华东1（杭州）、华东2（上海）、华北2（北京...
挂载云盘数据卷
您可以选择以哪种数据类型将数据存储到云盘上，支持的类型包括ext4、ext3、xfs、vfat。默认为ext4。Volume.N.FlexVolume.Options String {"volumeSize":"50","tags":"test:eci"} FlexVolume对象选项列表。为KV形式，采用JSON传递。通过...
UpdateContainerGroup-更新一个容器组
2.0 Name string 否 容器名称。jenkins LifecyclePreStopHandlerHttpGetHost string 否 使用 HTTP 请求方式设置 preStop 回调函数时，接收 HTTP Get 请求的主机地址。10.0.XX.XX LifecyclePreStopHandlerTcpSocketHost string 否 使用 TCP ...
生命周期管理介绍
功能说明 您可以通过生命周期管理对数据湖中的数据库、数据表配置数据管理规则，可以基于数据最后访问时间、分区值、分区/表最后修改时间、分区/表创建时间四种规则类型，对数据定期进行存储类型转换，从而节省数据存储成本。同时，可以...
企业版实例计费说明
本文介绍容器镜像服务ACR企业版实例计费相关信息。计费项 目前，ACR企业版实例仅支持按照实例的包年包月计费方式。具体计费项参考如下。计费项 计费说明 价格 说明（必选）实例 企业版实例支持包年包月的计费方式，按照实例规格区分不同的...
指定本地盘规格创建实例
挂载本地盘RAID0 名称 类型 示例值 描述 Container.N.VolumeMount.N.Name String localdisk 要挂载到容器的数据卷的名称，对应Volume.N.Name的值。Container.N.VolumeMount.N.MountPath String/localdisk-test 挂载目录。容器挂载目录下的...
- 产品推荐
- 这些文档可能帮助您