基于Hadoop集群支持Delta Lake或Hudi存储机制
背景信息 MaxCompute基于开源的Hadoop集群和阿里云EMR（E-MapReduce）提供了支持Delta Lake或Hudi存储机制的湖仓一体架构，架构图如下。涉及模块 对应阿里云产品 说明 开源Hadoop 本地机房搭建Hadoop集群 云上虚拟机搭建Hadoop集群 阿里云E...
基于DLF、RDS或Flink、OSS支持Delta Lake或Hudi存储...
MaxCompute基于阿里云DLF、RDS或Flink、OSS产品提供了支持Delta或Hudi存储机制的湖仓一体架构。您可以通过MaxCompute查询到实时数据，即时洞察业务数据变化。背景信息 通常，企业构建和应用数据湖需要经历数据入湖、数据湖存储与管理、数据...
基于时序存储的Prometheus监控方案
本视频介绍基于日志服务时序存储功能的Prometheus监控方案。
基于JindoFS存储YARN MR或SPARK作业日志
对于按量计费的集群随时会被释放，而Hadoop默认会把日志存储在HDFS上，当集群释放以后，按量计费的用户就无法查询作业的日志了，因此这也给按量计费用户排查作业问题带来了困难。因此，您可以将MapReduce和Spark作业日志配置到JindoFS或OSS...
最佳实践
如何利用云存储网关作为Windows Docker存储访问OSS 在Linux Docker容器中挂载使用云存储网关 Windows应用 利用云存储网关搭建Windows文件共享服务器 利用云存储网关的SMB共享搭建windows FTP服务器访问对象存储OSS 如何基于云存储网关SMB...
产品优势
为数据库基于云端存储构建的最佳解决方案，性能高于其单纯基于云盘构建。一般基于ext4构建，不支持原子写、不支持数据库关键IO加速。内核态数据拷贝影响性能。需要安装第三方商业集群文件系统后才能使用，需要购买商业license。例如：...
引擎简介
云原生弹性 基于云原生存储计算分离架构设计，可快速弹性扩展副本，高效应对流量高峰。高可用 分布式高可用设计，集群无单点问题，同时能够智能识别异常流量，通过快速隔离与降级确保系统稳定。生态丰富 支持标准SQL语句访问。场景案例 ...
功能特性
调整数据库文件存储的使用场景-修改DBFS性能等级 在使用数据库文件存储的过程中根据业务负载的变化，调整数据库文件存储的性能级别，来平衡性能和成本-DBFS快照 DBFS手动快照 数据库文件存储快照基于云盘快照，它是一种便捷高效的数据容灾...
JindoData概述
JindoFSx存储加速系统 JindoFSx（JindoData服务）是原JindoFS Cache模式的全新升级版本，是面向大数据和AI生态的云原生数据湖存储加速系统，为大数据和AI应用访问各种云存储提供访问加速，支持数据缓存、元数据缓存和P2P加速等功能。...
迁移上云概述
基于大规模云存储底座，完全Serverless化；存储空间按需使用，无需考虑扩缩容；费用按量结算，同等副本数情况下，成本仅是自建1/3。计算弹性 基于集群水位规划机器；需要预留水位，且缩容复杂；受扩容速度限制，无法支持突发流量弹性。基于...
对象存储服务路径
Ganos支持基于阿里云对象存储服务（OSS）和MinIO的栅格数据的创建，导入与导出操作。OSS文件路径 基于OSS的文件路径格式如下：oss:/<access_id>:<secrect_key>@[]/path_to/file[:]说明 如果是具有SubSet的NetCDF，可以通过:方式指定。其中...
对象存储服务路径
Ganos支持基于阿里云对象存储服务（OSS）和MinIO的栅格数据的创建，导入与导出操作。OSS文件路径 基于OSS的文件路径格式如下：oss:/<access_id>:<secrect_key>@[]/path_to/file[:]说明 如果是具有SubSet的NetCDF，可以通过:方式指定。其中...
产品计费
本文主要介绍云存储网关计费相关内容，包括计费项、计费方式和欠费说明等，您可以通过本文了解云存储网关服务费用收取详情。计费项 云存储网关包括线上网关和线下网关，其计费项不相同。云存储网关资源的价格，请参见 云存储网关产品定价。...
对象存储服务路径
Ganos支持基于阿里云对象存储服务（OSS）、MinIO和HDFS的矢量数据。OSS文件路径 基于OSS的文件路径格式如下：oss:/<access_id>:<secrect_key>@[]/path_to/file 其中Endpoint可以被省略，系统会自动寻找相应的Endpoint。如果Endpoint被省略...
对象存储服务路径
Ganos支持基于阿里云对象存储服务（OSS）、MinIO和HDFS的矢量数据。OSS文件路径 基于OSS的文件路径格式如下：oss:/<access_id>:<secrect_key>@[]/path_to/file 其中Endpoint可以被省略，系统会自动寻找相应的Endpoint。如果Endpoint被省略...
如何下载并安装云存储网关镜像
本文介绍如何下载并安装云存储网关镜像。在阿里云上部署云存储网关时，无需下载镜像，通过云存储网关控制台创建网关后，会自动部署。在本地数据中心部署云存储网关时，需要在云存储网关控制台上创建网关并下载镜像。目前支持OVA格式、VHD...
对象存储服务路径
Ganos支持基于阿里云对象存储服务（OSS）、MinIO和HDFS的矢量数据。OSS文件路径 基于OSS的文件路径格式如下：oss:/<access_id>:<secrect_key>@[]/path_to/file 说明 各参数解释如下：access_id 和 secrect_key 分别为OSS访问的AccessKey...
常见问题
产品简介FAQ 云存储网关提供哪些服务？云存储网关支持哪些协议？产品原理FAQ 文件网关中的文件与OSS间的映射关系如何？文件网关缓存的淘汰机制是什么？文件网关的缓存有什么作用？云存储网关文件上传原理解析是什么？极速同步如何保证反向...
对象存储服务路径
Ganos支持对基于阿里云对象存储服务（OSS）、MinIO和HDFS的数据进行创建、导入与导出操作。OSS文件路径 基于OSS的文件路径格式如下：oss:/<access_id>:<secrect_key>@[]/<bucket>/path_to/file[:]Endpoint可以被省略，系统会自动寻找相应的...
对象存储服务路径
Ganos支持对基于阿里云对象存储服务（OSS）、MinIO和HDFS的数据进行创建、导入与导出操作。OSS文件路径 基于OSS的文件路径格式如下：oss:/<access_id>:<secrect_key>@[]/<bucket>/path_to/file[:]Endpoint可以被省略，系统会自动寻找相应的...
操作指南FAQ
本文介绍使用云存储网关过程中的常见问题。云上部署FAQ 创建网关时找不到可用交换机如何处理？云存储网关升级失败了该如何处理？本地部署FAQ 如何检测网关网络的联通性？如何在本地数据中心部署云存储网关？云存储网关升级失败了该如何处理...
混合云存储阵列如何实现数据的云端容灾备份？
混合云存储阵列支持用户在阵列本地存储空间中建立多版本快照，并将各时间的快照镜像上传到云端存储作为备份。混合云存储阵列也能支持本地存储和云端存储的文件数据同步，实现数据在云端的异地容灾存放。混合云存储阵列还能和传统备份软件...
新功能发布记录
本文介绍 混合云存储 每次发布涉及的功能变更及对应的文档，帮助您了解 混合云存储 的发布动态。2019年3月 功能名称 功能描述 发布时间 支持地域 相关文档 Apsara SA系列混合云存储阵列发布 Apsara SA混合云存储阵列融合IP SAN、FC SAN、...
最佳实践
存储服务数据容灾最佳实践 冗余存储 阿里云对象存储OSS提供本地冗余存储和同城冗余存储两种存储冗余类型，覆盖从单可用区到多可用区的数据冗余机制，以保证数据的持久性和可用性。其中本地冗余存储采用单可用区（AZ）内的数据冗余存储机制...
对象存储服务路径
Ganos支持基于阿里云对象存储服务（OSS）、MinIO和HDFS的栅格数据的创建，导入与导出操作。OSS文件路径 基于OSS的文件路径格式如下：oss:/<access_id>:<secrect_key>@[]/bucket_name/path_to/file[:]说明 各参数解释如下：如果是具有SubSet...
使用冷存储
背景信息 用户可以在购买云HBase实例时选择冷存储作为一个附加的存储空间，并通过建表语句指定将冷数据存放在冷存储介质上面，同时HBase增强版还基于冷存储实现了在同一张表内的冷热分离功能，能够自动将表中热数据放到读写速度快的热存储...
云存储网关提供哪些服务
本文简要介绍云存储网关服务。云存储网关是一款可以将本地应用程序、基础设施、数据存储与阿里云无缝集成的存储服务。通过可在本地数据中心和阿里云部署的兼容行业标准存储协议的虚拟设备，将现有的存储应用程序和工作负载连接阿里云存储...
为什么云存储网关与OSS上的文件不一致
基于消息通知的极速同步 针对常规反向同步的痛点问题，基于消息通知的极速同步采用 全量同步+增量更新 的结合的方案进行OSS与云存储网关元数据的同步，以 秒级快速同步OSS的变化。当配置好极速同步组后，您在详情页中可以看到当前全量同步...
冷存储介绍
云原生多模数据库 Lindorm 将容量型云存储作为冷存储介质，用于存储数据库中访问频率较低的历史数据（冷数据），从而降低存储成本。本文介绍容量型云存储的功能特性及性能测试结果。功能特性 存储成本低。存储成本仅为标准型云存储成本的20...
备份服务
背景信息 云存储网关从1.0.39版本开始支持备份功能。云存储网关服务集成了混合云备份服务，对文件网关共享目录中的数据进行备份。说明 目前只支持备份阿里云上的标准型和增强型的文件网关。操作步骤 登录 云存储网关控制台。在 网关列表 ...
混合云存储阵列与传统的数据中心存储阵列相比有哪些...
混合云存储阵列除了提供所有传统存储阵列的功能外，还集成了阿里云的云存储服务，客户在不改变现有IT架构的情况下，就能受益于公共云存储快速部署，海量扩展，按需付费的灵活性。
如何扩容云存储文件网关缓存
关于扩容云存储文件网关缓存的具体操作，请参见 云存储文件网关缓存扩容。
安装OVA镜像时，如何配置网关IP地址？
操作步骤 通过阿里云云存储网关控制台下载OVA镜像后，可在本地VMware虚拟机上通过 部署ovf模板 来部署网关，详情请参见 如何在本地数据中心部署云存储网关。在部署过程中，您可以在 自定义模板 页签中，为云存储网关配置IP地址以及DNS。...
客户部署混合云存储阵列时，现有IT架构或应用是否需要...
客户无需改变现有IT架构或应用，就可以像使用本地存储一样，使用混合云存储阵列，同时利用本地存储空间和云端存储空间，无需关注本地设备存储协议和云存储协议之间的兼容转换，配置简单，易于使用。
开通冷存储
Lindorm将容量型云存储作为冷存储介质，用于存储数据库中访问频率较低的历史数据（冷数据），从而降低存储成本。本文介绍如何开通容量型云存储。注意事项 实例存储类型为本地HDD盘时，不支持开通容量型云存储相关操作。购买实例时开通容量...
加速PV存储卷数据访问
JindoRuntime是基于阿里云EMR团队JindoFS系统开发的Fluid运行时引擎。JindoFS基于C++实现，能够为Fluid提供Dataset数据管理和缓存功能。JindoRuntime支持在Kubernetes环境下对PV存储卷中的数据进行缓存，以提升后续数据访问过程的效率。...
SA混合云存储阵列
阿里云混合云存储阵列作为软硬一体的存储设备，集成了阿里云存储服务，融合了公共云存储和传统存储阵列的优点：简单 客户无需更改原有的IT架构，就可以像使用本地存储设备一样使用阿里云混合云存储阵列，同时使用本地存储空间和云端存储...
混合云存储阵列的市场定位是什么？
很多企业客户希望利用公共云的易于扩展以及低成本的优势，快速上云，同时对存储有很高的性能和稳定性要求，希望敏感数据本地物理存放，满足公司政策或监管的需求，阿里云混合云存储阵列就是专门为这些客户设计的。阿里云混合云存储阵列将...
日志管理
阿里云云存储网关控制台支持一键上传日志信息，用于问题诊断和修复。操作步骤 登录 云存储网关控制台。在 网关列表 页面，找到目标块网关，单击 更多>上传支持信息。
日志管理
阿里云云存储网关控制台支持一键上传日志信息，用于问题诊断和修复。操作步骤 登录 云存储网关控制台。在 网关列表 页面，找到目标文件网关，单击 更多>上传支持信息。
- 产品推荐
- 这些文档可能帮助您