Paimon概述
目前阿里云开源大数据平台E-MapReduce常见的计算引擎（例如Flink、Spark、Hive或Trino）都与Paimon有着较为完善的集成度。您可以借助Apache Paimon快速地在HDFS或者云端OSS上构建自己的数据湖存储服务，并接入上述计算引擎实现数据湖的分析...
访问Web UI
访问开源组件的Web UI。单击上方的 访问链接与端口 页签。在 访问链接与端口 页面，单击服务所在行的链接，即可正常的访问Web UI页面。常见问题 问题描述：ACK集群未安装Ingress组件，该如何处理？解决方法：访问Web UI，需要ACK集群具备...
应用场景
阿里云开源大数据平台E-MapReduce（简称EMR）具有广泛的应用场景。本文为您介绍EMR的主要应用场景。数据湖场景 DataLake集群类型提供了数据湖分析场景所需的服务和相关湖格式，包括Hadoop、OSS-HDFS、Hive、Spark、Presto等。通过选择OSS-...
什么是云平台配置检查
云产品配置错误或操作不当可能会导致云产品被攻击，为此，您可以使用云安全中心提供的云平台配置检查功能，从多维度检测云产品的配置问题和安全风险，降低因配置错误导致的风险，提升云产品安全性。本文介绍云平台配置检查功能及其计费方式...
通过阿里云Milvus与PAI搭建高效的检索增强生成（RAG）...
阿里云Milvus现已无缝集成于阿里云PAI平台，一站式赋能用户构建高性能的检索增强生成（RAG）系统。您可以利用Milvus作为向量数据的实时存储与检索核心，高效结合PAI和LangChain技术栈，实现从理论到实践的快速转化，搭建起功能强大的RAG...
使用云平台配置检查
云平台配置错误可能会导致安全漏洞、性能瓶颈、数据泄露、黑客攻击等风险，严重影响云平台的可靠性。建议您定期扫描云平台的安全配置，并及时修复配置中的风险项，以提升云平台的安全性、性能和可靠性，确保业务的正常运行和数据的安全性。...
云平台配置检查常见问题
本文介绍使用云平台配置检查功能时的常见问题及解决方案。如何理解云平台配置管理的重要性？云安全配置管理CSPM作为重要的云安全管理工具，通常使用自动化方式来解决云配置和合规性问题。大多数云服务受到攻击是因为对云配置疏于管理、云...
政务云等保现状及安全资质
阿里云电子政务云平台已完成等保三级认证，其上的云产品均在满足等保三级要求之外，以更高的安全要求设计、完善产品功能，旨在为政务类用户提供更安全、更合规、更稳定的云服务。国密加密安全保障 阿里电子政务云采用国密加密机服务，满足...
为什么选择阿里云电子政务云
安全合规 阿里云电子政务云平台严格按照《中华人民共和国网络安全法》（以下简称网安法），建设云平台及相关云产品：阿里云电子政务云平台按照网安法要求，具备独立的物理设备、网络环境、数据存储，云平台已满足国家三级等保合规要求和...
产品公测
说明 当前阿里云Cloudera企业云平台产品在公测试用期，试用期间您可以选购Cloudera企业云平台产品进行功能的验证及测试。注意，测试商品及产品试用期间不能完全保证线上环境的SLA，也不建议您将测试集群用于生产环境。一、账号准备 准备...
产品概述
阿里云智联车管理云平台是什么 智联车管理云平台（IoV Command Center，简称IoV CC）是阿里云为智能网联车领域提供的完整解决方案。提供了以下几部分内容：无线升级（OTA）提供智联车车机系统升级能力、系统内应用的升级能力，以及车辆ECU...
技术支持的范围和方式
阿里云E-MapReduce（简称EMR）是云原生开源大数据平台，能够为用户提供简单易集成的开源大数据解决方案。EMR on ECS集群主要构建于ECS之上，集群资源归属于用户，EMR提供基于该资源的半托管云服务能力，用户对集群拥有完全的管理操作权限，...
Hadoop集群迁移至DataLake集群
背景信息 E-MapReduce（简称EMR）新版控制台是EMR发布的下一代云原生开源大数据平台，为用户提供全新平台体验、全新开发平台、全新资源形态和全新分析场景。新版控制台的功能特点，详情请参见 EMR新版控制台上线公告。EMR on ECS作为EMR...
E-MapReduce支持倚天云服务器
阿里云E-MapReduce（简称EMR）支持使用倚天云服务器构建开源大数据集群。与现有X86架构实例体验完全相同的情况下，具有更高的性价比，帮助您降低成本并提高效率。本文为您介绍倚天云服务器的特性、优势，以及在E-Mapreduce上倚天云服务器的...
AI开源项目
阿里云开源的AI及大数据相关开源项目，如用于全自动分布式深度学习系统TePDist、NLP 开发和应用工具包EasyNLP等，您可以根据需要选择AI及大数据开源项目。PAI相关的开源项目信息请前往 阿里云大数据&AI开源项目。
开源软件迁移
sudo yum install redis-y TensorFlow TensorFlow是一个端到端的机器学习开源平台。它拥有一个由工具、库和社区资源组成的全面、灵活的生态系统，被广泛应用于机器学习和深度神经网络研究。在倚天云服务器上，建议您使用以下两种方式使用...
JindoData概述
JindoData是阿里云开源大数据团队自研的数据湖存储加速套件，面向大数据和AI生态，为阿里云和业界主要数据湖存储系统提供全方位访问加速解决方案。JindoData套件基于统一架构和内核实现，主要包括JindoFS存储系统（原JindoFS Block模式）、...
OSS/OSS-HDFS概述
JindoData是阿里云开源大数据团队自研的数据湖存储加速套件，面向大数据和AI生态，为阿里云和业界主要数据湖存储系统提供全方位访问加速解决方案。JindoData套件基于统一架构和内核实现，主要包括 JindoFS 存储系统（原JindoFS Block模式）...
云监控事件编码
在云监控的事件监控模块中，您可以订阅E-MapReduce数据开发相关的系统事件，监控集群的核心组件服务状态。云监控系统事件编码及其含义如下。事件编码 事件描述 事件类型 EMR-110401002 工作流已成功。FLOW EMR-110401003 工作流已提交。...
阿里云产品服务协议
阿里云产品的服务协议，请参见 阿里云产品服务协议。
阿里云账号角色授权
说明 系统将自动授予您的阿里云账号AliyunServiceRoleForMilvus角色，以及与其关联的AliyunServiceRolePolicyForMilvus策略。相关文档 如果您需要通过RAM用户操作EMR Serverless Milvus，需要对RAM用户进行授权，详情请参见 RAM用户授权。
阿里云账号角色授权
阿里云E-MapReduce服务（例如Hadoop和Spark），在运行时需要有访问其他阿里云资源和执行操作的权限。每个E-MapReduce集群必须有服务角色以及ECS应用角色。本文为您介绍EMR角色授权的流程及其关联的角色。背景信息 阿里云E-MapReduce为确定...
Spark访问云HBase或Lindorm
本文介绍Spark如何访问云HBase。Spark SQL访问云HBase 访问命令示例如下。spark-sql-jars alihbase-connector-2.1.0.jar,alihbase-client-2.1.0.jar,hbase-spark-1.0.1-SNAPSHOT.jar,/hbase_home/hbase-shaded-client-2.1.0.jar,/hbase_...
计费概述
本文介绍阿里云E-MapReduce的计费项、计费方式、转换计费方式、续费说明、欠费说明、查看消费明细、退费说明、查看账单和计费常见问题。相关项 描述 相关文档 计费项 为您介绍E-MapReduce的计费项，以及相关计算公式，以便您对支付的费用...
退款说明
本文介绍阿里云E-MapReduce的退款规则和退款方式。退款规则与方式 计费方式 退款规则 退款方式 包年包月 包年包月的集群在购买时已经根据购买时长预先支付了费用。在释放ECS实例时，系统将同时退还您EMR未使用部分的款项。说明 释放ECS实例...
查询OSS数据
本文为您介绍如何使用StarRocks的数据湖分析能力查询阿里云OSS。前提条件 已创建StarRocks集群，详情请参见 创建StarRocks集群。说明 此文档仅适用于EMR-5.12.0之前版本或EMR-3.46.0之前版本的StarRocks集群。已开通OSS服务，详情请参见 ...
使用资源组
资源组会对您拥有的云资源从用途、权限和归属等维度上进行分组，实现企业内部多用户、多项目的资源分级管理。一个云资源只能属于一个资源组，云资源之间的关联关系不会因加入资源组而发生变化。E-MapReduce目前支持资源组的云资源为集群和...
配置自建RDS
本文介绍如何配置自建的阿里云RDS，作为E-MapReduce（简称EMR）上DataLake集群、Custom集群或Hadoop集群的元数据。前提条件 已购买RDS MySQL实例（EMR所有版本均支持MySQL 5.7，仅EMR-3.35.0以上版本、EMR-5.0.0以上版本同时支持MySQL 5.7...
阿里云电子政务云产品全家福
阿里云电子政务云平台价格是华北2公共云同等配置的2倍 云数据库 Redis版 阿里云数据库 Redis 版（ApsaraDB for Redis）是兼容开源 Redis 协议的 Key-Value 类型在线存储服务。它支持字符串（String）、链表（List）、集合（Set）、有序集合...
使用日志服务收集Presto作业日志
本文为您介绍如何通过阿里云日志服务SLS收集Presto作业的日志。背景信息 由于EMR on ACK使用虚拟容器运行作业，作业运行完成后，相关的容器会被销毁以释放集群资源。对于弹性伸缩或分时调度，相关的容器资源也会被销毁。因此，当EMR on ACK...
使用自定义ECS应用角色访问同账号云资源
使用云账号登录 RAM控制台。在RAM访问控制页面，选择 权限管理>权限策略。在 权限策略 页面，单击 创建权限策略。在 创建权限策略 页面，单击 脚本编辑 页签。输入权限策略内容，然后单击 继续编辑基本信息。添加如下策略。{"Version":"1",...
使用CLB实现负载均衡
本文为您介绍如何基于阿里云负载均衡SLB（Server Load Balancer）实现StarRocks负载均衡以及高可用。使用限制 CLB负载均衡器和StarRocks集群须在同一个VPC和安全组下。操作步骤 创建StarRocks高可用集群，详情请参见 创建StarRocks集群。...
Hive访问云HBase数据
阿里云HBase需要借助外部Hive对多表进行关联分析，本文介绍如何使用E-MapReduce（简称EMR）上的Hive关联阿里云HBase的表。前提条件 已创建DataLake集群。详细步骤，请参见 创建集群。已创建与EMR在同一地域下且共用VPC的HBase实例。说明 ...
使用日志服务收集Flink作业日志
本文为您介绍如何通过阿里云日志服务收集结束运行的Flink作业的日志。前提条件 已在E-MapReduce on ACK控制台创建Flink集群，详情请参见 快速入门。已开通阿里云日志服务SLS，详情请参见 快速入门。操作步骤 启用日志服务组件Logtail，详情...
从HDFS迁移数据到OSS/OSS-HDFS
本文为您介绍如何使用阿里云JindoDistCp从HDFS迁移数据到OSS/OSS-HDFS。前提条件 已根据 JindoDistCp使用说明 进行环境适配和工具包下载。注意事项 JindoSDK 4.4.0及以上版本默认使用域名分离的方式，数据读写域名默认使用内网标准OSS域名...
三方开源大语言模型
本文主要介绍阿里云百炼平台引入上架的三方开源大语言模型基本信息，计费情况等调用必备基础信息。基本信息 重要 三方开源大模型API调用需申请后开通体验，请点击“立即申请”，申请通过后才能调用。模型服务 模型名称 模型描述 特征 Llama...
hybridnet
hybridnet致力于为混合云场景提供稳定、灵活、高性能的容器网络，目前支持了多个阿里体系内专有云输出底座以及平台。目前 hybridnet 已经开源，可以点击 Github 进行查看。运维能力 部署配置 添加 Underlay 网络配置 设置默认网络类型 选择...
创建第一个企业（团队）
则会邀请您先创建一个企业（团队）完成团队的创建后，您将会看到云开发平台的服务协议，在您正式使用云开发平台提供的服务之前，需要阅读并同意签署云开发平台的服务协议，以确保您对自己的权利和义务都已知晓 在您阅读云开发服务协议并...
- 产品推荐
- 这些文档可能帮助您