训练加速（Pai-Megatron-Patch）概述
背景信息 Pai-Megatron-Patch工具是阿里云机器学习平台PAI算法团队研发，基于阿里云智算服务PAI-灵骏平台的大模型最佳实践解决方案配套工具，旨在帮助大模型开发者快速上手灵骏产品，完成大语言模型（LLM）的高效分布式训练，有监督指令...
大数据和AI体验教程
阿里云机器学习PAI-DSW 实操演示课程 如何创建实验 进阶课程 实操演示课程 Antman任务优化技术分享 实操演示课程 深度学习分布式训练框架 实操演示课程 使用PAI-EasyTransfer构建业务场景 实操演示课程 GNN框架Graph-Learn技术分享 ...
机器学习系统权限策略参考
本策略定义了管理机器学习平台（PAI）模型在线服务（EAS）的权限。查看策略详情 AliyunPAIEASReadOnlyAccess 您可以将 AliyunPAIEASReadOnlyAccess 策略授权给RAM身份。本策略定义了只读访问机器学习平台（PAI）模型在线服务（EAS）的权限...
API概览
本产品（机器学习PAI-工作流/2021-02-02）的OpenAPI采用 ROA 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用...
人工智能平台 PAI系统权限策略参考
本策略定义了 只读访问机器学习平台（PAI）自动机器学习（AutoML）的权限。查看策略详情 授权操作参考 RAM 身份默认没有任何权限，需要由阿里云账号管理员为其授权后才能访问阿里云账号下的资源。为保证资源的数据安全，建议您遵循最小授权...
API概览
本产品（机器学习PAI-分布式训练（DLC）/2020-12-03）的OpenAPI采用 ROA 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不...
API概览
本产品（机器学习PAI-交互式建模/2022-01-01）的OpenAPI采用 ROA 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足...
API概览
本产品（机器学习PAI-数据集加速器/2022-08-01）的OpenAPI采用 ROA 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足...
API概览
本产品（机器学习PAI-用户增长/2022-01-12）的OpenAPI采用 ROA 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用...
API概览
本产品（机器学习PAI-AI工作空间/2021-02-04）的OpenAPI采用 ROA 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足...
用户交流
阿里云机器学习平台以社区化的方式进行用户运营，会经常举行用户活动，同时为企业级用户提供高效支持。如果您在产品使用过程中遇到问题，请通过工单系统和机器学习平台内部的问答机器人解决。用户交流群主要用来进行机器学习算法心得交流及...
授权信息
本文为您介绍 机器学习（PAI）（AIWorkSpace）为RAM权限策略定义的操作（Action）、资源（Resource）和条件（Condition）。机器学习（PAI）（AIWorkSpace）的RAM代码（RamCode）为 paiplugin,eas,pai,datasetacc，支持的授权粒度为 ...
应用场景
超大规模GPU算力系统，全对等网络架构，全资源池化，可以搭配PAI（机器学习平台）使用，支持多种训练框架（Pytorch、TensorFlow、Caffe、Keras、Xgboost、Mxnet等），可以满足多种规模的AI训练和推理业务。AI基础设施。平滑扩容。满足不同...
PAI灵骏智算服务概述
全对等网络架构，全资源池化，可以搭配PAI（机器学习平台）使用，支持多种训练框架（Pytorch、TensorFlow、Caffe、Keras、XGBoost、Mxnet等），可以满足多种规模的AI训练和推理业务。AI基础设施。平滑扩容。满足不同规模GPU算力需求，平滑...
功能特性
PAI支持丰富的机器学习算法、一站式的机器学习体验、主流的机器学习框架以及可视化的建模方式。本文为您介绍PAI的功能特性。丰富的机器学习算法 PAI的算法都经过阿里巴巴集团大规模业务的沉淀，不仅支持基础的聚类和回归类算法，同时也支持...
自动机器学习（AutoML）
自动机器学习（后简称AutoML）是阿里云人工智能平台 PAI提供的服务，它能按照策略帮助您完成最优超参组合搜索，从而大幅提升模型调优效率。本文为AutoML功能的导读，帮您快速找到您需要的内容信息。什么是AutoML AutoML是PAI产品的机器学习...
什么是人工智能平台PAI
随着PAI的不断发展，2018年PAI平台正式商业化，目前已经积累了数万的企业客户和个人开发者，是中国云端机器学习平台之一。PAI底层支持多种计算框架：流式计算框架Flink。基于开源版本深度优化的深度学习框架TensorFlow、PyTorch、Megatron...
新建实验
AutoML是PAI提供的机器学习增强型服务，集成了多种算法和分布式计算资源，无需编写代码，通过创建实验即可实现模型超参数调优，提高机器学习效率和性能。本文为您介绍如何新建实验。背景信息 AutoML的工作机制：实验会根据算法配置自动生成...
上传与下载数据文件
相关文档 数据上传完成后，您可以使用交互式模型（DSW），DSW是PAI产品的云端机器学习开发IDE，为您提供交互式编程环境，详情请参见 DSW概述。DSW支持接入多种数据源，包括OSS、NAS和MaxCompute，详情请参见 读写数据与文件传输。
PAI发布自动机器学习（AutoML）平台
适用客户 个人/企业开发者 新增功能/规格 PAI提供自动机器学习（AutoML）平台，AutoML是PAI产品的机器学习增强型服务，集成了多种PAI平台支持的算法和分布式计算资源，支持多种方式访问。在模型超参调优领域，它可以帮助您自动寻找最优化超...
管理实验
具体操作步骤如下：进入自动机器学习（AutoML）页面。登录 PAI控制台。在左侧导航栏单击 工作空间列表，在工作空间列表页面中单击待操作的工作空间名称，进入对应工作空间内。在左侧导航栏，选择 模型开发与训练>自动机器学习（AutoML）。...
开发流程
自定义镜像 ④ 云原生一站式的深度学习训练平台，提供灵活、稳定、易用和高性能的机器学习训练环境。支持多种算法框架，超大规模分布式深度学习任务的运行以及自定义算法框架。DLC概述 ⑤ 为了方便您在提交任务时指定所需的数据集和代码仓...
云产品依赖与授权：Designer
PAI为您提供多个功能模块，并联合MaxCompute、DataWorks、Flink、通用训练资源、OSS等阿里云产品为您提供一站式的机器学习解决方案。使用Designer进行建模时，您需要授予操作账号使用Designer功能所需的操作权限，同时需要授予PAI访问相关...
Designer概述
Designer（Studio 2.0）是PAI产品基于云原生架构Pipeline Service-PAIFlow的可视化建模工具，提供端到端的机器学习全链路开发环境，帮助您实现端到端的机器学习开发流程。同时，Designer中内置了丰富且成熟的机器学习算法，覆盖商品推荐、...
PAI官方镜像
官方镜像能力 阿里云PAI为您提供了基于不同机器学习框架的官方镜像，您可以在PAI控制台的 镜像AI资产页面 中查看所有官方镜像列表，以下为您介绍基于TensorFlow、PyTorch等主流框架的官方镜像信息。TensorFlow 框架版本 CUDA版本（仅GPU...
计费概述
后付费（按量计费）预付费（包年包月）场景化解决方案计费说明 数据集加速器 数据集加速器依托于阿里云构建的PaaS服务，用于解决云上机器学习中数据集加速的问题。数据集加速实例容量费用。预付费（包年包月）数据集加速器计费说明 相关...
高级功能：Alink组件成组执行
背景信息 Alink是阿里云 PAI 团队基于实时计算Flink研发的新一代机器学习算法框架及组件库。在 Designer 中会上线Alink流式和批式算法组件，从而支持开发者基于Flink引擎进行数据预处理、特征工程、模型训练、模型预测的机器学习全流程。在...
PAI-TF概述
PAI-TF是人工智能平台PAI为了追求更极致的深度学习训练效率，优化原生Tensorflow的内核并开发周边工具，推出的一款产品。PAI-TF拥有服务化、分布式调度、全局计算调度、GPU卡映射及模型在线预测等特点。警告 公共云GPU服务器即将过保下线，...
深度学习框架及开通说明
阿里云机器学习平台支持深度学习框架，同时提供了功能强大的GPU计算集群。您可以使用这些框架及硬件资源来使用深度学习算法。前提条件 已关联MaxCompute资源，具体操作，请参见 管理工作空间。背景信息 深度学习支持的框架包括TensorFlow...
管理工作空间
相关文档 Designer（Studio 2.0）是PAI产品基于云原生架构Pipeline Service-PAIFlow的可视化建模工具，提供端到端的机器学习全链路开发环境，帮助您实现端到端的机器学习开发流程。关于Designer的使用详情请参见 Designer概述。您可以在...
计费常见问题
产品明细 计费项 实例ID 费用来源 机器学习（PAI）使用量 text_analysis data_analysis data_manipulation deep_learning default Designer/Studio实验训练产生的费用。EAS专属机器预付费：EAS 预付费专属资源组产生的费用。为什么停止计费...
FeatureStore使用案例汇总
本文是FeatureStore产品使用案例入口链接汇总。案例名称 描述 在推荐系统中应用FeatureStore管理特征 以FeatureStore的特征表为...通过AutoFE生成的pipeline模型，对训练集和测试集执行特征转换操作，从而提升机器学习或深度学习模型的效果。
产品架构
按照机器学习全流程，PAI分别提供了数据准备、模型开发与训练以及模型部署阶段的产品：数据准备：PAI提供了标注服务，支持在多种场景下进行数据标注和数据集管理。模型开发与训练：PAI提供了可视化建模（Designer）、交互式建模（DSW）、...
EAS发布异步推理服务自动扩缩容
新增功能/规格 EAS异步推理服务可以通过监控队列中积压的数据数量来实现推理服务的自动扩缩容，有效的控制推理服务实例的数量，从而最大化资源的利用效率实现真正的降本增效。产品文档 ...
创建工作空间
后续步骤 进入工作空间后，在左侧导航栏可以看到PAI的全部子产品模块，您需要根据实际开发场景进行机器学习全生命周期的开发及管理。例如，在云原生开发场景下，您可以按照如下开发流程引导，使用子产品模块。相关文档 创建完成后，您可以...
安装和配置
PAI Python SDK 是PAI提供的Python SDK，提供了更易用的HighLevel API，支持机器学习工程师简单地使用Python在PAI完成模型训练和部署，串联机器学习的流程。前提条件 已获取阿里云账号的鉴权AccessKey ID和AccessKey Secret，详情请参见：...
EasyCKPT高性能CKPT发布
新增功能/规格 PAI-EasyCKPT是为PyTorch大模型训练场景而开发的高性能Checkpoint框架，通过异步化层次化保存、重叠模型拷贝和计算、网络感知异步存储的策略，实现近0开销的模型保存机制和大模型训练全过程精度无损的模型保存与恢复的能力。...
FeatureStore公测版发布
中心化的特征管理和共享平台，用于组织、存储和管理AI训练中使用的特征 适用客户 对离在线一致性要求高，管理多个数据源的在线推荐，金融风控等场景的客户 新增功能/规格 特征平台可以方便的向多人、多团队共享特征，保证离线在线的一致性...
2023年
2023-6-30 全部地域 创建自定义组件 2023-5 功能名称 功能描述 发布时间 发布地域 相关文档 新增支持PAI Python SDK功能 PAI Python SDK是PAI推出的Python SDK，旨在为机器学习工程师提供更易用的HighLevel API，使其能够轻松地在PAI上完成...
什么是AutoML
AutoML是PAI的提供的自动寻找超参组合的机器学习增强型服务。您在训练模型时，如果超参组合复杂度过高，需大量训练资源和手工调试工作，可以使用AutoML来节省模型调参时间，提升模型调优效率和模型质量。基础概念 超参数：是训练机器学习...
- 产品推荐
- 这些文档可能帮助您