数据服务系统配置

单击 保存,完成API缓存数据存储位置的配置。运维监控配置 在 运维监控配置 区域,点击 修改 按钮,配置参数。统计数据存储周期最近:默认是31天,支持最大数值不超过366的正整数。运维监控数据的过期时间=当天日期-配置的时长+1天(即不...

ActionTrail日志清洗

清洗后数据保存位置 DLA清洗OSS数据后,将结果数据回写入OSS即数据清洗后的存储位置。DLA会默认指定存储位置。您也可以自定义存储位置数据清洗时间 设置每天DLA清洗OSS数据的时间。系统默认的数据清洗时间是00:30,您可以根据业务规律,...

AUTO模式核心特性及典型场景

提前3个月创建分区 Locality——按需定制数据存储位置 在AUTO模式数据库中提供多个维度的Locality属性,可以手动定制数据的存储位置。可以通过设定Database的Locality属性,指定Database的存储位置,例如:CREATE DATABASE db1 MODE='AUTO'...

通过LOCALITY指定存储位置(DRDS模式)

PolarDB-X 支持通过LOCALITY关键字来指定数据库或单表的存储位置,以实现数据隔离或数据的均匀分布。本文介绍了DRDS模式数据库中使用LOCALITY的方法。本语法仅适用于DRDS模式数据库。前提条件 实例版本需为5.4.10或以上。关于如何查看实例...

快速入门

数据湖构建(Data Lake Formation,DLF)产品主要使用流程如下。...创建数据源 创建数据湖的入湖来源,当前支持阿里云RDS MySQL...创建数据湖的元数据 添加元数据库 创建元数据表,指定表中数据存储位置和存储格式 详细操作请参见 元数据管理。

开启智能存储分层

重要 存储保存时间配置存在相应限制,具体信息,请参见 数据存储生命周期管理。开启智能存储分层 登录 日志服务控制台。在Project列表区域,单击目标Project。在 日志存储>日志库 页签中,单击目标Logstore对应的 图标,然后单击 修改。在 ...

元数据管理

选择元数据表中数据存储位置。选择元数据表的存储格式。指定元数据表的分隔符。手动定义元数据表的列,指定列编号、列名称、是否是分区列等信息。删除元数据库 1.进入元数据管理-元数据库页面。2.找到想要删除的元数据库,点击右侧的删除...

数据存储目录结构说明

本章介绍文件引擎...目录 说明/${实例ID}-global/${实例ID}_xxx 宽表引擎数据存储目录/solr 搜索引擎数据存储目录/tsdb 时序引擎数据存储目录 说明${实例ID}:lindorm实例ID。xxx:实例所在的区域,如cn-shanghai则表示为上海的实例。

入湖基础操作

数据湖存储位置数据存储的OSS路径,入湖任务会自动创建此处填写的空文件夹来存储数据。分区信息:添加需要写入的分区信息。分区表达式:填写描述分区值的获取方式,比如 MySQL 中from_unixtime(gmt_create)。分区字段:填写分区字段名称...

基于DLF、RDS或Flink、OSS支持Delta Lake或Hudi存储...

Delta 数据湖存储位置 数据存储的OSS路径。格式为 oss:/名称>/目录名称>/。oss:/doc-test-01/dlf/配置任务信息 任务实例名称 设置入湖任务名称。OSS数据入湖格式转换Delta 最大资源并行度 DLF将启动Worker节点完成数据入湖,此配置项表示...

IO加速

说明 RDS PostgreSQL是通过表空间来设置数据库对象的存储位置,以实现数据的冷热分离,因此我们使用表空间 rds_temp_tablespace 来抽象其背后的高速缓存介质。您可以在开启IO加速的实例中看到该表空间。而使用该表空间还需要您正确设置数据...

概述

本文介绍如何选择和优化阿里云存储服务,帮助您在满足数据存储需求的同时节省成本。企业和组织一般将数据存储视为辅助服务,在数据上云后不会优化存储,也不会清理未使用的存储,从而使这些服务以巨额成本长期运行。根据 RightScale的博客...

数据存储生命周期管理

本文介绍存储保存时间迁移策略。生命周期管理策略 热存储数据至少需保存7天才能转换为低频存储,当数据的存储时间超过配置的 热存储层数据保存 时间后,数据自动由热存储转为低频存储。热存储数据至少需保存30天才能直接转换为归档存储,当...

物联网存储介绍

基于物联网场景中多源异构数据存储、高并发吞吐、海量数据高性价比存储、多维度数据处理与分析等需求,表格存储推出了一站式物联网存储IoTstore解决方案,为物联网设备元数据、消息数据、时序轨迹等海量数据提供存储、查询、检索、分析、...

管理EventStore

删除EventStore会永久删除事件数据,删除日志可以通过设置更短的保存时间。本文介绍如何在日志服务控制台上创建、修改和删除EventStore与事件数据等操作。基本概念 事件库(EventStore)是日志服务中事件数据的采集、存储和查询单元。每个...

数据分层存储计费规则

本文介绍开启冷数据分层存储后,在冷数据存储方面的计费规则。计费规则 当 开启冷数据分层存储 后,支持将集群的冷数据转存至低成本的OSS上进行存储,以降低数据存储成本。说明 更多关于冷数据分层存储的详细介绍,请参见 冷数据分层存储...

通过实时计算订阅数据

参数 说明 数据存储类型 DataHub数据存储。EndPoint 通过 DataHub访问域名 获取。Project DataHub的项目名称,可在 DataHub控制台 中获取。使用同样的方式注册RDS数据存储,参数说明如下。参数 说明 Instance RDS的实例ID,可在RDS实例的 ...

数据分层存储计费规则

本文介绍开启冷数据分层存储后,在冷数据存储方面的计费规则。计费规则 当 开启冷数据分层存储 后,PolarDB PostgreSQL版(兼容Oracle)支持将集群的冷数据转存至低成本的OSS上进行存储,以降低数据存储成本。说明 更多关于冷数据分层存储...

冷热数据分层存储

为了降低数据存储成本、提高查询性能和系统资源利用率。云数据库ClickHouse 提供了冷热数据分层存储的功能。您可以根据查询频率将数据存储在不同类型的磁盘中。本文介绍如何开启冷热数据分层存储功能和设置分层存储策略。前提条件 云数据库...

应用场景

表格存储 有互联网应用架构(包括数据库分层架构和分布式结构化数据存储架构)、数据湖架构和物联网架构三种典型应用架构。本文结合 表格存储 的典型应用架构介绍了不同应用架构下的应用场景。互联网应用 目前互联网已在日常生活中广泛应用...

东软案例

业务/技术亮点 移动端到云端业务全链路海量运维大数据存储。指标、日志等多源异构监控数据融合分析。99.99%数据可用性的高可靠低成本存储。客户感言 利用阿里云新一代 云原生多模数据库 Lindorm“灵动”引擎驱动的政府、企业数字信息系统...

数据存储冷热分离

AnalyticDB MySQL版 弹性模式集群版(新版)(3.1.3.3及以上版本)支持表或分区级别的数据存储冷热分离策略。前提条件 AnalyticDB MySQL版 集群需要同时满足以下条件:集群系列需为 弹性模式集群版(新版)。集群内核版本需为3.1.3.3或以上...

时序模型计量计费

使用时序模型时,时间线数据和时间线元数据会产生数据存储量。同时,对时间线数据和时间线元数据的读写操作会消耗读写吞吐量。本文介绍了时序模型的计费项以及计费示例。注意事项 时序模型中的分析存储功能将从2023年12月20日正式开始收费...

数据存储

时序数据存储 时序数据库对时序数据的写入、聚合以及检索都做了特定优化,AnalyticDB采集到的时序数据主要存在时序数据库中。目前每个AnalyticDB实例有一个独立的时序数据库进行服务,只保存当前AnalyticDB实例的时序数据。日志数据存储 ...

应用场景

数据存储:长期保存车辆轨迹信息以及车辆状态信息,需要单表规模极大以及高性价比存储。实时地理围栏:实时数据的地理围栏报警,需要支持对接实时计算进行实时数据统计分析。海量车辆管理:海量车辆的诸多状态信息的数据管理与查询分析,...

数据存储计费规则(可选)

本文介绍了开启冷数据归档功能后,在冷数据存储方面的计费规则。当 开启冷数据归档 后,PolarDB 企业版支持将集群的冷数据转存至低成本的OSS上进行存储,以降低数据存储成本。说明 更多关于冷数据归档的详细介绍,请参见 冷数据归档概述。...

数据治理

EMR集群类型 元数据存储类型 数据存储类型:OSS 数据存储类型:OSS-HDFS 数据存储类型:HDFS 新版数据湖集群(DataLake)数据湖构建(DLF)RDS实例 MySQL 自定义集群(Custom)数据湖构建(DLF)RDS实例 MySQL 其他集群-数据保护伞为什么有...

应用场景

可以将访问频度非常高的数据存储在云数据库 Memcache 版中,底层数据存储在 RDS 中。大型促销类业务 大型促销秒杀系统,系统整体访问压力非常大。一般的数据库根本无法承载这样的读取压力,可选用云数据库 Memcache 版存储。带有计数器的...

概述

文件存储CPFS 文件存储CPFS(Cloud Paralleled File System)是一款并行文件系统,其数据存储在集群中的多个数据节点,多个客户端可以同时访问,满足大型高性能计算机集群的高IOPS、高吞吐、低时延的数据存储需求。文件存储HDFS版 文件存储...

自媒体:易撰

PolarDB-X 专注解决海量数据存储、超高并发吞吐、大表瓶颈以及复杂计算效率等数据库瓶颈问题,历经各届天猫双十一及阿里云各行业客户业务的考验,助力企业加速完成业务数字化转型。本文介绍易撰如何通过 PolarDB-X 应对业务挑战。所属行业...

设置数据冷热存储策略

本文介绍通过开源HDFS客户端设置冷热数据存储策略的方法。前提条件 已开通冷存储功能。具体操作,请参见 开通冷存储。操作步骤 通过开源HDFS客户端访问文件引擎,具体操作,请参见 通过开源HDFS客户端连接并使用文件引擎。通过以下命令 ...

物联网设备数据上云存储

本文介绍如何使用阿里云物联网平台和 TSDB 进行数据打通,实现物联网设备系统的开发和管理、数据采集、数据上报、数据存储和分析的一体化方案,构建智能物联网平台。架构参考“物联网平台+TSDB”方案的实现架构如下:物联网设备通过 IoT ...

车联网数据存储处理方案

根据对车联网的业务特征的分析给出了为什么Lindorm作为一个数据存储为什么是车联网业务的合适选择。方案总览 Lindorm是一款适用于任何规模、多种模型的云原生数据库服务,支持海量数据的低成本存储处理和弹性按需付费,提供宽表、时序、...

时序分析存储概述

分析存储与时序表的数据存储相互独立,允许用户自定义数据的生命周期(TTL),对分析存储的查询操作不会对时序表的读写性能产生影响。分析存储能够自动同步时序表数据,在数据写入速率稳定的情况下,同步操作的延迟通常在10分钟内,如果...

应用场景

主备两份数据存储。主备日志复制同步模式下,影响主库性能。异步模式下,备库延迟存在数据丢失风险。部署及切换复杂,需保证切换工具的高可用。传统数据库搬站上云 传统数据库,例如:Oracle/RAC,SAP HANA等基于SAN之上构建。与SAN相比,...

管理Logstore

删除Logstore必须提前删除所有Logtail配置,删除日志是通过设置更短的保存时间,本文介绍Logstore选型、创建及升级Logstore、删除Logstore与日志等操作。基本概念 日志库(Logstore)是日志服务中日志数据的采集、存储和查询单元。每个...

应用场景

云数据库Redis版 适用于多种场景,尤其是请求并发量大场景中的数据存储。游戏行业应用 游戏行业通常将云数据库Redis版作为重要的部署架构组件,用于缓存或数据持久化。场景一:Redis作为缓存加速应用访问 Redis作为缓存层,加速应用访问。...

冷热分离介绍

冷热分离功能支持将冷热数据存储在不同的介质上,冷存储的存储类型为容量型存储,热存储的存储类型为标准型云存储、性能型云存储、本地SSD盘或本地HDD盘。冷存储的价格仅为标准型存储的20%,大大降低了存储成本。原理简介 在功能实现上,...

互联网服务:小打卡

PolarDB-X 专注解决海量数据存储、超高并发吞吐、大表瓶颈以及复杂计算效率等数据库瓶颈问题,历经各届天猫双十一及阿里云各行业客户业务的考验,助力企业加速完成业务数字化转型。本文介绍小打卡如何通过 PolarDB-X 应对业务挑战。所属...

使用前须知

警告 当您为某个Bucket开通OSS-HDFS服务后,通过该服务写入的数据将保留在OSS-HDFS的数据存储目录.dlsdata/下。为避免影响OSS-HDFS服务的正常使用或者引发数据丢失的风险,禁止以非OSS-HDFS提供的方式对目录.dlsdata/及目录下的Object执行...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 对象存储 云数据库 RDS 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用