OpenLDAP

Hive:使用LDAP认证 Spark:管理LDAP认证 Impala:管理LDAP认证 Trino:管理LDAP认证 Presto:管理LDAP认证 Kafka:使用LDAP用户鉴权 如果某个服务没有提供一键开启LDAP认证的功能,则需要参考开源软件的社区文档来配置开启LDAP认证。...

开源软件迁移

当前大部分应用系统都基于开源软件构建,并且大部分的开源软件在倚天ARM平台上已经提供较好的应用生态,您可以直接使用操作系统提供的开源生态软件来安装部署。本文介绍Nginx、MySQL、Redis、TensorFlow、PyTorch等开源软件如何在倚天...

产品架构

从上图可以看出EMR由四部分组成:社区开源产品 集成Apache社区开源大数据组件,例如Hadoop、Hive和HBase,随着EMR版本更新,开源软件也会相应的升级,详情请参见 版本概述 下各版本的版本说明。注意 已经创建好的EMR集群不支持组件升级。...

通过OSS SDK接入开源生态

开源生态 说明 使用Hadoop或者Hive访问OSS 此系列文档由开源软件Apache社区提供。使用Flink访问OSS 将HBase快照保存在OSS 将Kafka数据导入OSS 此系列文档由面向开源项目的托管平台GitHub提供。使用Logstash将日志导入OSS 使用Fluentd访问...

迁移概述

本文介绍如何将基于x86平台的应用迁移到基于阿里云倚天实例的服务器上使用。迁移背景 倚天云服务介绍 云服务...开源软件:指开发者从开源社区下载未做源码修改的软件或者所使用操作系统生态中默认携带的软件。更多信息,请参见 开源软件迁移。

管理LDAP认证

EMR-5.11.0及之前版本,EMR-3.45.0及之前版本 重要 如果您的EMR版本较低,没有相应的LDAP认证配置按钮,则需要参考开源软件的社区文档进行手动配置,以启用LDAP认证功能。在 组件列表 区域,选择 SparkThriftServer 操作列的>enableLDAP。...

E-MapReduce支持倚天云服务器

丰富的生态:倚天云服务器支持主流开源软件以及多款阿里云主流PaaS产品。最新网络架构:基于2*50 GB网络架构提供大带宽以及超强转发能力,对比上一代CIPU架构,网络带宽提升1倍。安全增强:支持vTPM特性,依托TPM/TCM芯片,实现从服务器到...

管理LDAP认证

EMR-5.11.0及之前版本,EMR-3.45.0及之前版本 重要 如果您的EMR版本较低,没有相应的LDAP认证配置按钮,则需要参考开源软件的社区文档进行手动配置,以启用LDAP认证功能。在 组件列表 区域,选择 TrinoMaster 操作列的>enableLDAP。在弹出...

Spark对接Kafka

背景信息 E-MapReduce上的Hadoop集群和Kafka集群都是基于纯开源软件,相关编程使用方法可参见官方相应文档。Spark官方文档:streaming-kafka-integration 和 structured-streaming-kafka-integration。E-MapReduce-demo:github地址。访问...

Lindorm for Cassandra应用实践

可调一致性(无需repair数据)服务模式 自建 集群托管或者Serverless可选 可靠性 无SLA保障,开源软件BUG需要自行修复。SLA保障,并具备主备双活、备份、异地容灾等能力。冷热分离 不支持 透明冷热分离降低成本 全文检索 不支持 兼容CQL...

Sqoop概述

Sqoop是一款Apache社区的开源软件,支持在Hadoop生态软件和结构化数据集(例如数据库)之间进行高效的批量数据传输。背景信息 常见数据传输场景如下:将MySQL数据导入HDFS 将HDFS数据导入MySQL 将Hive数据导入MySQL 将MySQL数据导入Hive 将...

迁移场景

开源软件开源软件指开发者从开源社区下载未做源码修改的软件或者所使用操作系统生态中默认携带的软件。当前大部分开源软件在倚天ARM平台上已经提供较好的应用生态,您可以直接使用操作系统提供的开源生态软件来安装部署。更多信息,请...

手动执行脚本

集群创建完成后,您可以通过...集群脚本也可以通过YUM安装额外的系统软件包。例如安装 ld-linux.so.2。bin/bash yum install-y ld-linux.so.2 集群默认使用root用户来执行您指定的脚本。您也可以在脚本中使用 su hadoop 切换到hadoop账户。

产品优势

阿里云 可观测监控 Prometheus 版 全面对接开源Prometheus生态,支持类型丰富的组件监控,覆盖绝大部分开源基础设施软件指标采集能力。提供多种开箱即用的预置监控大盘,并集成丰富的Kubernetes基础监控以及常用服务预设看板,且提供全面...

创建EMR Studio集群

高级设置 软件自定义配置:可指定JSON文件对集群中的基础软件(例如Hadoop、Spark和Hive等)进行配置,详细使用方法请参见 软件配置。默认不开启。硬件配置。区域 配置项 描述 付费类型 付费类型 默认包年包月。当前支持的付费类型如下:...

配置集群管理密码

说明 这些命令和软件包的具体使用方式可能因系统版本和配置而有所不同,建议您根据实际情况使用。单击 保存。在弹出的对话框中,输入 执行原因,单击 保存。重启Presto服务。单击上方的 服务详情 页签。在 组件列表 区域,单击 ...

创建集群模板

集群模板中包含了您自主选择的用于创建集群的配置信息(密码除外),还可以存储任意配置信息,包括软件版本、实例类型和密钥对等,能够满足不同场景的个性化需求。通过集群模板功能,您可以快速一键创建EMR集群。使用限制 同一地域下最多可...

什么是EMR Serverless Milvus

开源兼容性 100%兼容开源Milvus全托管服务,提供与原生软件交互性一致的产品使用体验,并默认提供开源可视化工具Attu。高安全性 基于阿里云专有网络(VPC)部署,提供专有网络访问,同时提供更细力度访问控制及更高安全等级保护。实例可...

阿里云RPA软件用户协议

4.开源软件,指软件本身、或其他被集成的、该软件衍生的、与该软件共同发布的软件满足以下条件:(a)以源码形式披露或发布;(b)为生成衍生作品和/或发布衍生作品需要由使用者向第三方授权;或(c)再发布免费,才能使用、修改和/或发布。5....

EMR Kafka配置说明

本文为您介绍E-MapReduce(简称EMR)中Kafka集群操作系统环境变量和配置项。操作系统环境变量 EMR Kafka集群的ECS实例操作系统用户为kafka,用户组为group,您可以登录ECS实例执行各类操作。EMR Kafka预置了以下Shell终端环境变量。变量名 ...

Impala概述

注意事项 如果使用Impala组件,请勿直接通过系统文件删除hive表分区目录,请使用Impala或者Hive命令删除,否则会导致该表不可用。优点 为了避免延迟,Impala没有使用MapReduce,而是使用分布式查询引擎直接访问数据,该引擎与RDBMS中的查询...

创建集群

说明 在阿里云EMR for ACK的使用场景中,针对Shuffle Service类型的集群,系统内置了一个名为“rss-pvc-clean”的自动化清理任务。这是一个预设的、用于定期或在特定条件下清理不再使用的PVC资源的Job任务,旨在优化存储资源管理,避免无效...

存储说明

本地盘不能选择磁盘数量,只能使用默认配置好的数量,数据也没有后端的备份机制,需要上层的软件来保证数据可靠性。部分缓存或临时测试场景,或者基于3副本存储TB级数据时会使用本地盘,但是该方案会因为磁盘寿命增加额外的运维成本,因此...

Kafka常见问题

是否可以停止Kafka-Manager服务 Kafka-Manager只是Kafka集群的管理软件,Kafka对外提供读写服务不依赖Kafka-Manager服务。如果您没有集成其他Kafka管理平台,建议您保留Kafka-Manager服务。如果您确认不需要Kafka-Manager服务,您可以直接...

Demo App《软件许可协议》

开源软件:指软件本身、或其他被集成的、该软件衍生的、与该软件共同发布的软件满足以下条件:1)以源码形式披露或发布;2)为生成衍生作品和/或发布衍生作品需要由使用者向第三方授权;或3)再发布免费,才能使用、修改和/或发布。保密...

软件使用许可协议

开源软件:指软件本身、或其他被集成的、该软件衍生的、与该软件共同发布的软件满足以下条件:1)以源码形式披露或发布;2)为生成衍生作品和/或发布衍生作品需要由使用者向第三方授权;或3)再发布免费,才能使用、修改和/或发布。保密...

生命周期策略

背景信息 产品的更新换代是基础技术软件领域的常态。在开源大数据社区蓬勃发展的今天,新版本带来了更丰富、强大和易用的产品特性。随着引擎重构、计费计量、云原生部署等多种形态的不断涌现,已经投入使用的产品版本和形态会逐渐老化,...

生命周期策略

背景信息 产品的更新换代是基础技术软件领域的常态。在开源大数据社区蓬勃发展的今天,新版本带来了更丰富、强大和易用的产品特性。随着引擎重构、计费计量、云原生部署等多种形态的不断涌现,已经投入使用的产品版本和形态会逐渐老化,...

通用软件漏洞收集及奖励计划第三期

A Apereo-CAS 开源软件 A 绿盟网络入侵检测系统NIDS 绿盟科技集团股份有限公司 A 奇安信天眼威胁监测与分析系统 奇安信科技集团股份有限公司 A 绿盟网络入侵防护系统NIPS 绿盟科技集团股份有限公司 A 绿盟数据泄露防护系统(NSFOCUS DLP)...

快速入门

MySQL快速入门 SQL Server快速入门 PostgreSQL快速入门 MariaDB快速入门 数据库引擎 以下是对四种数据库引擎的介绍:云数据库RDS MySQL MySQL是全球受欢迎的开源数据库之一,作为开源软件组合LAMP(Linux+Apache+MySQL+Perl/PHP/Python)中...

简介

Node.js SDK 源码,请参见 边缘计算SDK开源Node.js库。Python SDK 源码,请参见 边缘计算SDK开源Python库。引用SDK库。引用Node.js SDK库。const leSdk=require('linkedge-core-sdk');引用Python SDK库。import lecoresdk

什么是EMR on ECS

无额外软件License费用。需提前预估资源,且资源相对固定,资源使用率低。采用Hadoop发行版,需额外支付License费用。性能 较开源版本性能大幅提升。采用开源社区版本,性能需自行优化。易用性 分钟级别启动Hadoop集群,敏捷响应业务需求。...

合作伙伴及开源生态

(数据统计截止时间为 2021 月 7 月 22 日)SOFAStack 目前涵盖的开源项目有:主要项目:基于 Spring Boot 的研发框架 SOFABoot、生产级 Java RPC 框架 SOFARPC、分布式链路跟踪系统 SOFATracer、高可用服务注册中心 SOFARegistry。...

运行短视频Demo源码

短视频SDK Demo是客户端开源工程,开源工程包含了短视频编辑、裁剪、录制等功能,您可以使用该工程源码,快速地构建一个示例应用。开发环境 Xcode 12.0及以上版本,推荐使用最新正式版本。CocoaPods 1.9.3 及以上版本。准备iOS 10.0 及以上...

Trino概述

Trino(即原PrestoSQL)是一个开源的分布式SQL查询引擎,适用于交互式分析查询。EMR-3.44.0和EMR-5.10.0版本开始改用社区正式名称Trino,之前各版本控制台显示为Presto,内核其实是Trino,使用时请注意区分。基本特性 Trino使用Java语言...

EMR Studio概述

便捷集成 EMR Studio采用半托管的部署形态,您可以直接登录集群灵活操作和部署软件,可以将EMR Studio集成至已有系统。EMR Studio作为一款云上产品,支持与数据湖构建(DLF)和对象存储(OSS)等云上产品对接,构建云原生大数据产品架构。...

Presto概述

与EMR软件栈完美结合,支持DLF和OSS或OSS-HDFS。无需运维,EMR提供一站式服务。基本概念 数据模型 数据模型即数据的组织形式。Presto使用Catalog、Schema和Table三层结构来管理数据。Catalog:一个Catalog可以包含多个Schema,物理上指向...

EMR-3.28.x版本说明

更新内容 服务 变更点 Flink 已将开源Flink升级为企业版Ververica Platform,基于开源Flink 1.10深度定制,提供自研存储引擎Gemini等增值功能。Bigboot 升级至2.7.0版本。Delta 升级至0.6.0版本。解耦Delta与Spark代码。Spark 升级至2.4.5...

Kafka Manager

说明 当选择了Kafka服务,系统将默认安装Kafka Manager软件服务,并开启Kafka Manager的认证功能。注意事项 使用Kafka Manager进行partition reassign功能时,当前版本的Kafka Manager是没有提供限流功能的。如果需要限流,您可以通过 ...

通过客户端方式连接StarRocks实例

tar-zxvf mysql-5.6.40-linux-glibc2.12-i686.tar.gz 执行以下命令,复制解压后的mysql目录到系统的本地软件目录。cp mysql-5.6.17-linux-glibc2.5-i686/usr/local/mysql-r 重要/usr/local/mysql 目录结尾不可以带/(斜杠)。执行以下命令...
共有189条 < 1 2 3 4 ... 189 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 微服务引擎 检索分析服务 Elasticsearch版 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用