什么是人工智能平台PAI

人工智能平台PAI(Platform For AI),是阿里云专为开发者打造的一站式机器学习平台,为您提供数据标注、模型开发、模型训练、模型部署的AI全链路研发服务。本文为您介绍什么是人工智能平台PAI。

前置概念

阅读本文前,可以按需了解基础概念:什么是人工智能(AI)?

什么是人工智能平台PAI

人工智能平台PAI是阿里云专为开发者打造的一站式机器学习平台,其主要由可视化建模(Designer)、交互式建模(DSW)、分布式训练(DLC)、模型在线服务(EAS)等核心功能模块组成,为您提供数据标注、模型开发、模型训练、模型部署的AI全链路研发服务,具有支持多种开源框架、多项AI优化能力、灵活易用的优势。

功能详解

AI开发阶段

对应功能模块

功能描述

数据准备

PAI-iTAG

在数据准备阶段,PAI-iTAG提供智能化数据标注服务,支持图像、文本、视频、音频等不同类型数据标注,支持多模态数据标注;提供丰富的标注内容组件和题目组件,可以直接使用平台预置标注模板,或自定义标注模板。同时提供全托管的数据标注外包服务。

模型开发

PAI-Designer

可视化建模PAI-Designer提供低代码开发环境,内置140+成熟的算法组件,通过拖拽完成建模,帮助用户实现低代码开发人工智能相关服务。

PAI-DSW

交互式建模PAI-DSW提供交互式编程环境,内置Notebook、VSCodeTerminal的云端IDE,提供底层Sudo权限,开放灵活。

模型训练

PAI-DLC

按照使用场景和算力类别,可分为通用计算资源和灵骏智算资源。

  • 通用计算资源DLC:基于阿里云通用计算(e.g. ECS、EGS、ECI)的训练平台,支持TensorFlow、PyTorch、MPI等多种训练框架,具备灵活、稳定、易用等特点。

  • 灵骏智算资源DLC:基于软硬件一体优化技术,支持超大规模分布式深度学习任务运行,具备高性能、高效率、高利用率等核心优势。支持公共云Serverless版、单租版等形态,提供AI工程化全流程平台及软硬一体的异构融合算力。

模型部署

PAI-EAS

模型在线服务PAI-EAS可将模型一键部署为在线推理服务或AI-Web应用。适用于实时推理、异步推理、离线推理等多种场景。

PAI-Blade

推理加速器PAI-Blade的所有优化技术均面向通用性设计,可以应用于不同的业务场景,通过模型系统联合优化,使模型达到最优推理性能。

查看更多功能特性

产品优势

支持AI研发全链路

  • 支持数据标注、模型开发、模型训练、模型优化、模型部署以及AI运维管控,是一站式AI平台。

  • 拥有140+种优化的内置算法组件。

  • 提供多种模式、大数据引擎深度结合、多框架兼容、自定义镜像等核心能力。

  • 提供云原生架构的AI开发、训练、部署的产品。

支持多种开源框架

  • 流式计算框架Flink。

  • 基于开源版本深度优化的深度学习框架TensorFlow、PyTorch、MegatronDeepSpeed。

  • 千亿级特征样本的大规模并行计算框架Parameter Server。

  • Spark、PySpark、MapReduce等业内主流开源框架。

业内领先的AI优化

  • 高性能的训练框架,稀疏训练场景,支持数十亿到数百亿的稀疏特征规模,数百亿到数千亿的样本规模,上千worker的分布式增量训练。

  • 主流框架模型加速,使用PAI Blade提升RestNet50、Transformer+LM等十数个主流模型加速比。

多样的产品输出方式

  • 公共云支持全托管、半托管。

  • 支持AI 高性能计算集群和轻量化输出产品形态。

  • 支持DataWorks周期性调度,且调度任务区分生产环境和开发环境,从而实现数据安全隔离。

常见场景

AI绘画

场景描述:

  • 艺术创作:通过AI生成高质量的数字艺术作品,适用于插画、概念艺术等领域。

  • 广告设计:快速生成创意广告图像,提高设计效率。

  • 游戏开发:为游戏提供丰富的视觉素材,提升游戏画面的多样性。

  • 教育培训:用于教学和培训中的视觉辅助工具,增强学习体验。

相关模型:Stable Diffusion

涉及PAI功能模块:DSW/EAS

参考章节:

大语言模型应用

场景描述:

  • 内容生成:自动生成高质量的文章、报告和营销文案,提升内容创作效率。

  • 数据分析:智能解析和解读复杂数据,生成易懂的分析报告。

  • 客服聊天:提供智能化的客户服务对话,提高响应速度和客户满意度。

  • 教育辅导:辅助在线教育平台,生成教学内容和解答学生问题。

相关模型:通义千问/Llama/百川系列等多种模型

涉及PAI功能模块:DSW/EAS

参考章节:

基于RAG的大模型对话系统

场景描述:

  • 客服系统:提升客服对话的智能化与响应速度,提高客户满意度。

  • 智能助手:为用户提供精准的问答服务,增强用户体验。

  • 教育辅导:辅助在线教育平台,为学生提供即时的学习问答支持。

  • 医疗咨询:为患者提供初步的医疗咨询服务,减轻医生工作负担。

相关模型:通义千问/Llama/百川系列等多种模型

涉及PAI功能模块:EAS

参考章节:

基于ComfyUIAI视频生成

场景描述:

  • 营销视频:自动生成创意营销视频,提升品牌宣传效果。

  • 教育视频:快速生成教学视频,提高教育资源的生产效率。

  • 娱乐内容:生成短视频、动画等娱乐内容,丰富社交媒体平台。

  • 企业培训:制作企业内部培训视频,降低制作成本,提升培训效果。

相关模型:Stable Video Diffusion

涉及PAI功能模块:EAS

参考章节:

AI视频生成-ComfyUI部署

大语言模型数据处理

场景描述:

  • 数据清洗:通过MD5去重、文章相似度去重和N-Gram重复比率过滤,确保数据唯一性。

  • 内容规范:文本标准化、特殊字符占比过滤和长度过滤,提高数据一致性。

  • 敏感信息处理:敏感词过滤、敏感信息打码和Copyright信息移除,保护隐私和版权。

  • 语种处理:语种识别和过滤,确保数据符合特定语言要求。

  • LaTeX处理:扩展宏定义,删除参考文献、注释行和文档头,简化LaTeX文档。

相关算法:LLM数据处理算法

涉及PAI功能模块:Designer

参考章节:

图像-文本对过滤

场景描述:

  • 内容审核:图像合规过滤和水印过滤,确保上传图片符合平台规范。

  • 图像优化:通过美学过滤、长宽比过滤和分辨率过滤,提高图片质量。

  • 自动描述:利用图像文本描述生成,自动为图片生成描述,便于理解和搜索。

  • 内容推荐:图像文本匹配度和相似度过滤,优化推荐系统,提升用户体验。

  • 广告筛选:图像人脸占比过滤和大小过滤,筛选适合广告投放的图片。

相关算法:LVM图像预处理算法

涉及PAI功能模块:Designer

参考章节:

智能标注

场景描述:

  • 文本分类:自动分类海量文本数据,适用于新闻分类、垃圾邮件检测等。

  • 情感分析:识别用户评论和社交媒体内容中的情感倾向,帮助企业了解用户反馈。

  • 命名实体识别:提取文本中的人名、地名、组织名等实体信息,用于信息抽取和知识图谱构建。

  • 图像标注:为图像数据添加标签,适用于图像分类、目标检测、图像搜索等。

  • 语音识别:对音频内容进行标注、分隔、识别,适用于语音助手和客服系统。

  • 视频分析:对视频内容进行标注,适用于内容分享和审核。

涉及PAI功能模块:iTAG

参考章节:

智能标注(iTAG)

大规模分布式训练

场景描述:

  • 图像识别和处理:在计算机视觉领域,训练深度卷积神经网络(CNNs)需要处理大量的高分辨率图像数据。分布式训练可以加速模型的训练过程,缩短训练时间。

  • 自然语言处理(NLP):NLP任务如语言翻译、文本生成和情感分析,通常需要处理大规模的文本数据和复杂的模型结构。分布式训练可以有效处理这些任务,提高模型的训练速度和精度。

  • 推荐系统:推荐系统需要处理大量用户行为数据和多样化的商品信息,通过分布式训练可以加速模型的迭代和优化,提高推荐的准确性和实时性。

涉及PAI功能模块:DLC

参考章节:

查看更多使用场景示例

计费说明

计费方式

说明

涉及的主要功能模块

按量计费

先使用后付费,按照各功能模块的实际用量计费。

适用于短期或不确定的工作负载。这种模式下,您可以按实际使用的资源量进行付费,适合测试环境、开发环境、突发性需求或者初期阶段的项目。

Designer、DSW、DLC、EAS

包年包月

预付费方式,包年包月购买。

适用于长期、稳定的工作负载。您可以预付一定时间(如一月、一年等)的费用,可以享受比按量付费更低的价格。

DSW、DLC、EAS

资源包

预付费方式,购买特定资源的配额包。

适用于需要大批量使用某些特定资源的场景。您可以购买特定资源的配额包,以获得更优惠的价格。

DSW

节省计划

预付费方式,购买特定的折扣权益计划。

您需要承诺在一定时间内消费一定的金额,来换取较低的按量付费折扣。

DSW、EAS

按推理时长计费

先使用后付费,根据实际推理时长进行计费,并根据服务请求量自动弹性伸缩。

适用于需要不定量的推理任务,可以有效应对高并发请求和动态负载。

EAS

查看更多计费详情

典型案例

查看更多实践案例

产品体验

使用PAI-EAS一键部署ChatGLMLangChain应用

使用模型在线服务(EAS)部署ChatGLMAI-Web应用以及启动WebUI进行模型推理,并通过LangChain集成自己的业务数据。

开始体验

PAI-EAS快速部署AI绘画Stable Diffusion WebUI

使用模型在线服务(EAS)的预置镜像,快速部署AIGC Stable Diffusion SDWebUI绘画的AI-Web应用,以及启动WebUI进行模型推理。

开始体验

AIGC Stable Diffusion文生图Lora模型微调实现虚拟上装

在交互式建模(PAI-DSW)中,基于Diffusers开源库进行AIGC Stable Diffusion模型的微调训练及推理。

开始体验

基于PAI-EAS挂载OSS部署AIGC服务

使用模型在线服务(EAS)部署AIGC(如Diffusion文生图模型),并利用OSS挂载功能解决AI服务持久化存储与扩容需求,从而避免因PAI服务停止或删除导致数据丢失的问题。

开始体验

PAI ArtLab一键实现欧洲杯粉丝专属贴纸制作

使用ComyfUI工作流完成个性化AI写真头像贴纸生成。

开始体验

推荐系统入门之使用协同过滤实现商品推荐

PAI平台搭建一个基于协同过滤算法的商品推荐系统。

开始体验

推荐系统入门之使用ALS算法实现打分预测

使用ALS算法预测用户对音乐的评分。

开始体验

PAI-DSW快速启动AI绘画Stable Diffusion WebUI

使用交互式建模(DSW)中启动Stable Diffusion WebUI并进行推理。

开始体验

查看更多案例

联系我们

更多产品咨询问题或使用支持,欢迎通过钉钉扫描下方二维码,加入PAI用户交流群联系我们。

image