AI开源项目
阿里云开源的AI及大数据相关开源项目，如用于全自动分布式深度学习系统TePDist、NLP 开发和应用工具包EasyNLP等，您可以根据需要选择AI及大数据开源项目。PAI相关的开源项目信息请前往 阿里云大数据&AI开源项目。
项目管理
进入目标项目的项目管理页面。在 项目列表 页面，单击目标项目的项目ID。单击上方的 项目管理 页签。查看项目基本信息。在 基本信息 页面，可以查看该项目的项目名称、创建时间、Created User和项目描述信息。通用配置 通用配置中的安全...
合作伙伴及开源生态
（数据统计截止时间为 2021 月 7 月 22 日）SOFAStack 目前涵盖的开源项目有：主要项目：基于 Spring Boot 的研发框架 SOFABoot、生产级 Java RPC 框架 SOFARPC、分布式链路跟踪系统 SOFATracer、高可用服务注册中心 SOFARegistry。...
资源分组和授权
单账号资源打标签方案 无法满足项目独立管理：给资源打标签可以模拟项目分组，但无法解决项目管理员独立管理项目成员及其访问权限的问题。可以满足按项目分账：按照项目组给资源打上对应标签，根据标签实现分账。单账号资源组方案 可以满足...
应用市场
针对Kubernetes编排下微服务管理问题，阿里云容器服务引入Helm开源项目并进行集成，帮助简化部署和管理Kubernetes应用。Helm是Kubernetes服务编排领域的开源子项目，是Kubernetes应用的一个包管理工具，Helm通过软件打包的形式，支持发布的...
通过OSS使用智能媒体管理
注意事项 智能媒体管理的项目和OSS Bucket必须处于同一地域。创建智能媒体管理项目及使用智能媒体管理功能会产生一定的费用。使用前请了解智能媒体管理的计费信息。更多信息，请参见 旧版产品计费。快速使用 配置智能媒体管理。创建项目。...
Kafka常见问题
是否可以停止Kafka-Manager服务 Kafka-Manager只是Kafka集群的管理软件，Kafka对外提供读写服务不依赖Kafka-Manager服务。如果您没有集成其他Kafka管理平台，建议您保留Kafka-Manager服务。如果您确认不需要Kafka-Manager服务，您可以直接...
管理LDAP认证
EMR-5.11.0及之前版本，EMR-3.45.0及之前版本 重要 如果您的EMR版本较低，没有相应的LDAP认证配置按钮，则需要参考开源软件的社区文档进行手动配置，以启用LDAP认证功能。在 组件列表 区域，选择 SparkThriftServer 操作列的>enableLDAP。...
管理LDAP认证
EMR-5.11.0及之前版本，EMR-3.45.0及之前版本 重要 如果您的EMR版本较低，没有相应的LDAP认证配置按钮，则需要参考开源软件的社区文档进行手动配置，以启用LDAP认证功能。在 组件列表 区域，选择 TrinoMaster 操作列的>enableLDAP。在弹出...
TSDB开源生态概述
时间序列数据库TSDB以其强大的功能和兼容性，对于当前的一些开源解决方案实现了较好的适配。以下是TSDB与一些开源组件或开源项目对接的方法。Grafana如何对接TSDB Quick BI如何接入TSDB
参数说明
参数定义 在 项目管理 下的 项目设置>项目参数 页面，单击 创建项目级别参数，填写对应的参数名称和参数值。参数使用 在任务定义中，通过${.} 的方式使用项目级别的参数。参数传递 EMR Workflow允许在任务间进行参数传递，目前传递方向仅...
迁移场景
开源软件：开源软件指开发者从开源社区下载未做源码修改的软件或者所使用操作系统生态中默认携带的软件。当前大部分开源软件在倚天ARM平台上已经提供较好的应用生态，您可以直接使用操作系统提供的开源生态软件来安装部署。更多信息，请...
创建项目
操作步骤 进入项目管理页面。使用阿里云账号（主账号）或RAM用户登录 E-MapReduce控制台。在左侧导航栏，选择 EMR Workbench>Workflow。在Workflow页面，单击目标工作空间操作列的 控制台。在 项目管理 页面，单击 创建项目。在弹出的...
创新、资质和荣誉
技术奖项 2019 年，荣获 OSCAR 尖峰开源技术创新奖（自主研发）2019 年，开源中国 GVP：SOFATracer 2019 年，码云 2019 年度 GVP 2019 年，中国开源云联盟中国优秀开源项目：二等奖 2019 年，SegmentFault 思否 2019 中国技术品牌影响力...
迁移概述
其中，软件迁移支持迁移自研软件和开源软件：自研软件：指开发者开发的或者基于开源软件增强开发的软件。具体操作，请参见 源码迁移。开源软件：指开发者从开源社区下载未做源码修改的软件或者所使用操作系统生态中默认携带的软件。更多...
OpenLDAP
OpenLDAP是LDAP协议（Lightweight Directory Access Protocol）的开源实现，在EMR集群中主要提供用户管理和身份认证的功能。服务集成OpenLDAP 在EMR集群中，Knox服务默认与OpenLDAP服务对接。当您通过EMR控制台的 访问链接与端口 功能访问...
功能特性
管理调度资源组 项目管理 在项目中您可以进行任务的编辑和工作流的调度。创建项目 工作流定义管理 工作流定义是通过拖拽任务节点并建立任务节点之间的关联来创建可视化的DAG（有向无环图）。管理工作流定义 工作流实例管理 工作流实例是...
Attu工具管理
Attu是一款专为Milvus向量数据库打造的开源数据库管理工具，提供了便捷的图形化界面，极大地简化了对Milvus数据库的操作与管理流程。阿里云Milvus集成了Attu，以便更加高效地管理数据库、集合（Collection）、索引（Index）和实体（Entity...
自助建站方式汇总
部署Web环境 宝塔面板是一款使用方便、功能强大且终身免费的服务器管理软件，支持Linux与Windows系统。一键配置LAMP、LNMP、网站、数据库、FTP、SSL，通过Web端轻松管理服务器。环境类型 部署方式 说明 部署Web环境 部署Web环境在ECS实例上...
创建项目空间
数据管理DMS数仓开发通过项目空间、业务场景和任务流三级目录讲行项目管理，同时支持数仓分层管理，有利于清晰地管理某一情景下的数据仓库管理需求，充分满足各类复杂的数仓开发和管理需求。项目空间是数仓开发、管理和运维的基本单位，...
使用资源组
资源组会对您拥有的云资源从用途、权限和归属等维度上进行分组，实现企业内部多用户、多项目的资源分级管理。一个云资源只能属于一个资源组，云资源之间的关联关系不会因加入资源组而发生变化。E-MapReduce目前支持资源组的云资源为集群和...
通过OSS SDK接入开源生态
使用Flink访问OSS 将HBase快照保存在OSS 将Kafka数据导入OSS 此系列文档由面向开源项目的托管平台GitHub提供。使用Logstash将日志导入OSS 使用Fluentd访问OSS 使用Thanos访问OSS 此文档由开源Thanos社区提供。将Elasticsearch的快照备份至...
开源项目
本文介绍阿里云容器服务Kubernetes版主要使用的开源项目。项目分类 项目名称 项目简介 项目地址 参考文档 核心组件 Kubernetes Cloud Controller Manager for Alibaba Cloud 为Kubernetes应用创建负载均衡，管理节点路由条目。Cloud-...
产品架构
从上图可以看出EMR由四部分组成：社区开源产品 集成Apache社区开源大数据组件，例如Hadoop、Hive和HBase，随着EMR版本更新，开源软件也会相应的升级，详情请参见 版本概述 下各版本的版本说明。注意 已经创建好的EMR集群不支持组件升级。...
概述
不支持在使用 按量计费开发者版 资源的项目中执行Spark作业。按量计费开发者版仅支持MaxCompute SQL（支持使用UDF）、PyODPS作业。不支持Checkpoint功能。关键特性 支持原生多版本Spark作业。MaxCompute支持社区原生Spark、完全兼容Spark的...
管理工作空间
您所有的配置、任务、工作流均在具体的项目空间下进行。工作空间管理员可以加入成员至工作空间，并赋予工作角色，以实现多角色协同工作。EMR Workflow默认为您提供了一个名为 Default 的工作空间。前提条件 已完成系统角色授权，详情请参见...
为RAM用户授权
AliyunEMRFlowAdmin E-MapReduce数据开发的管理员权限 创建项目、开发和管理作业权限（不包含添加项目成员和管理集群权限）。AliyunEMRDlsFullAccess E-MapReduce DLS管理员权限 EMR DLS的所有数据管理权限。E-MapReduce使用的角色如下。...
管理工作流实例
在 项目管理 页面，单击已有项目的项目名称。在左侧导航栏，选择 实例运维>工作流实例。在 工作流实例 页面，可以查看所有工作流实例。查看任务日志 在 工作流实例 页面，单击工作流实例名称。在DAG页面，双击任务节点。在 当前节点设置 ...
功能特性
部分支持 支持Istio资源的历史版本管理 支持多集群模式下使用数据面K8s集群通过KubeAPI访问Istio资源 数据面组件管理 功能 开源社区 标准版 企业版 旗舰版 多维度（全局、命名空间、Workload级）的Sidecar代理的配置管理 部分支持 基于UI...
管理工作空间
后续操作 创建完工作空间后，您可以在弹出的对话框中单击 管理项目成员，或者进入工作空间单击 设置，为该工作空间配置成员，方便RAM用户可以快速使用该工作空间，详情请参见 管理用户。创建笔记本前，您需要先绑定集群或添加数据库，详情...
数据上云工具
Fluentd（DataHub通道系列）Fluentd是一个开源的软件，用来收集各种源头日志（包括Application Log、Sys Log及Access Log），允许您选择插件对日志数据进行过滤，并存储到不同的数据处理端（包括MySQL、Oracle、MongoDB、Hadoop、Treasure ...
运维中心
背景信息 本文为您介绍运维中心的相关操作，具体如下：查看项目任务概览 管理工作流记录 查看审计日志 前提条件 已创建项目，具体请参见 项目管理。查看项目任务概览 进入数据开发的项目列表页面。通过阿里云账号登录 阿里云E-MapReduce...
工作流快速入门
步骤三：创建工作流 在 项目管理 页面，单击新建项目的名称。在左侧导航栏，选择 数据开发>工作流定义。在 工作流定义 页面，单击 创建工作流。在 创建工作流 页面，拖拽 SHELL 节点块到画布中。本文以 SHELL 任务类型为例。任务类型的详细...
手动任务快速入门
步骤三：创建手动任务 在 项目管理 页面，单击新建项目的项目名称。在左侧导航栏，选择 数据开发>手动任务定义。在 手动任务定义 页面，单击 创建手动任务。在弹出的对话框中，配置相关的参数，单击 确定。本文以SHELL任务类型，使用自定义...
Flink DataStream参考
DataFlow集群的Flink DataStream API完全兼容开源的Flink版本，关于Flink DataStream API的详细信息，请参见 Flink DataStream API Programming Guide。上下游存储（Connector）开源Flink的上下游存储，请参见 DataStream Connectors。...
Cloud Toolkit是否开源？
目前Alibaba Cloud Toolkit还未开源，未来将根据项目的进度和公司策略考虑是否开源。
示例项目
如果您想直接导入IDE就可以运行的项目工程，您可以下载下面的示例项目工程代码，导入您的IDE环境即可运行。注意 您需要将项目里面的AccessKey信息和安全组信息，修改为您自己账户的AccessKey信息和安全组信息，具体说明请参见项目代码前的...
添加开源Elastic Search数据源
前提条件 已准备好待添加的开源Elastic Search数据源。添加开源Elastic Search数据源 登录 DataV控制台。在 我的数据 页签中选择 数据源管理，单击 添加数据。从 类型 列表中，选择 开源Elastic Search。填写开源Elastic Search数据服务...
开源软件迁移
当前大部分应用系统都基于开源软件构建，并且大部分的开源软件在倚天ARM平台上已经提供较好的应用生态，您可以直接使用操作系统提供的开源生态软件来安装部署。本文介绍Nginx、MySQL、Redis、TensorFlow、PyTorch等开源软件如何在倚天...
示例项目使用说明
本文介绍的项目都是完整的可编译可运行的项目，包括MapReduce、Pig、Hive和Spark。示例项目 示例名称如下所示，详情代码示例请参见 集群运行。MapReduce WordCount：单词统计 Hive sample.hive：表的简单查询 Pig sample.pig：Pig处理OSS...
- 产品推荐
- 这些文档可能帮助您