人工神经网络
本文为您介绍人工神经网络组件。功能说明 人工神经网络组件支持使用人工神经网络算法对分类或回归问题进行建模。人工神经网络（Artificial Neural Network，缩写ANN），简称神经网络或类神经网络，是一种模仿生物神经网络（动物的中枢神经...
MLP二分类/MLP多分类/MLP回归
多层感知机是一种前馈神经网络，通过多个神经元的组合对输入特征进行非线性变换和特征提取，最终输出一个连续的预测结果。在训练过程中，利用反向传播算法（Backpropagation）和梯度下降算法（Gradient Descent）来优化模型参数，以最小化...
PAI-TF概述
背景 TensorFlow是Google最新的开源深度学习计算框架，支持CNN、RNN及LSTM等多种神经网络模型，对语音、图像及文本等领域的模型训练效率极佳。TensorFlow的功能丰富且强大，并拥有高度灵活的API，受到业界的高度关注。PAI-TF是人工智能平台...
灵骏常见问题
您使用神经网络进行的许多计算都可以很容易地分解成更小的计算，各个小计算不会相互依赖。智能计算灵骏与普通GPU托管服务有什么不同？智能计算灵骏集群采用专为大规模AI计算场景所设计的系统架构和多层性能优化技术，能充分利用整体的计算...
基于二部图GraphSAGE算法实现推荐召回
背景信息 图神经网络是深度学习的热点发展方向，PAI开源Graph-Learn框架，提供大量图学习算法。二部图GraphSAGE是经典的图神经网络算法，而GraphSAGE为二部图场景扩展，被用于淘宝的推荐召回场景。在二部图场景下，可以将User和Item作为图...
Word2Vec
Word2Vec算法组件利用神经网络，通过训练，将词映射为K维度空间向量，且支持对表示词的向量进行操作并和语义相对应。输入为单词列或词汇表，输出为词向量表和词汇表。使用说明 Word2Vec组件的上游需要接入 词频统计 组件。说明 词频统计的...
视频分类训练
算法简介 视频分类模块提供主流的3D卷积神经网络和Transformer模型用于视频分类任务的训练，目前已经支持的模型包括X3D系列的X3D-XS、X3D-M及X3D-L和Transformer模型的swin-t、swin-s、swin-b、swin-t-bert，其中swin-t-bert支持视频加文本...
安全管家服务
分析安全风险 人工检查 网络安全评估 l 评估网络安全分组划分的合理性 l 检查网络访问控制策略合理性 l 扫描并探测对公网开放的高危端口 l 网络层安全攻击和威胁分析 人工检查和工具扫描 主机安全评估 l 通过扫描器全面探测主机操作系统和...
启动ACCL容器
本文为您介绍启动ACCL容器的命令示例。...ipc=host ACCL利用共享内存进行控制信息交互、worker间栅栏同步等。PyTorch多进程处理、多线程Dataloader等会大量使用共享内存通信，故而建议为容器分配足够的共享内存空间。其他可行选项包括：shm-...
EasyCKPT高性能CKPT发布
新增功能/规格 PAI-EasyCKPT是为PyTorch大模型训练场景而开发的高性能Checkpoint框架，通过异步化层次化保存、重叠模型拷贝和计算、网络感知异步存储的策略，实现近0开销的模型保存机制和大模型训练全过程精度无损的模型保存与恢复的能力。...
创建及管理灵骏弹性网卡
交换机vSwitch 当前LENI所属于专有网络VPC中的某一个交换机vSwitch。只能在与灵骏节点位于同一个可用区的vSwitch上创建LENI。可用区 LENI所属灵骏节点的可用区。网卡类型 系统类型：灵骏节点拥有一张系统类型的默认网卡，您无法独立创建或...
查询网络通信距离（NCD）
NCD仅反映了从物理交换机网络转发的时延参考，而不考虑NVLINK等因素。因此，当GPU节点通过多个网卡实现多轨连接（连接到不同的Leaf交换机）时，则同一GPU节点上不同网卡间的NCD值为2。控制台的NCD树图仅展示用于参数面通信的网卡，即除第一...
什么是架构感知
AHAS的架构感知模块能够自动识别并分析在阿里云上部署的应用程序和服务的架构，通过收集和处理数据，构建系统架构图。您可以更加直观的了解架构的组成以及架构组件间的依赖关系。架构和架构组件 为了更好地理解AHAS提供的架构感知模块，您...
概览
网络智能服务 NIS（Network Intelligence Service）平台的概览页面，帮助您整体查看NIS已支持的能力，快速感知已创建实例、已保存路径的健康状态和异常风险，全面知悉您的阿里云网络产品的资源持有情况和资源列表信息。全局视图 NIS 概览...
网络洞察仪
您可以将网络洞察仪作为业务单元的网络监测件，通过配置业务相关资源，网络洞察仪将为您分析业务单元流量的实时运行状况，帮助您及时感知业务网络异常，并提供网络质量评估和事件影响面分析。基本概念 术语 说明 网络洞察仪 由用户自定义的...
什么是网络智能服务
网络智能服务 NIS（Network Intelligence Service）是一个对网络进行健康分析、性能监控、诊断修复、流量分析和测量仿真的云服务，通过集成机器学习、知识图谱等AIOps方法减少网络使用复杂性，提供自助运维能力，方便网络架构师和运维...
虚拟交换机剩余IP状态感知调度
原生Kubernetes集群调度器对节点所属虚拟交换机是否有剩余IP不感知。在多个集群同时使用同一个虚拟交换机或多个节点同时使用同一个虚拟交换机时，可能出现Pod调度到节点上后由于虚拟交换机可用IP不足启动失败的情况。这种情况下，Pod控制器...
CreateEndpoint-创建数据集加速端点
vpc-j6co2fcdsl1q0gnuc*VswitchId string 否 挂载点使用的交换机 vSwitch Id。该 vSwitch 需要属于传入的 VPC。vsw-j6cmr00qjyrft6jo2*返回参数 名称 类型 描述 示例值 object 返回结果。RequestId string 请求 ID。A731A84D-55C9-44F7-99...
CreateSlot-创建数据集加速槽
vpc-j6co2fcdsl1q0gnuc3ym3 VswitchId string 否 挂载点使用的交换机 vSwitch ID。该 vSwitch 需要属于传入的 VPC。vsw-j6cmr00qjyrft6jo2mg7g EndpointIds string 否 创建数据集加速槽时，同时挂载的数据集加速槽挂载点 ID 的列表，多个...
消息通知
堡垒机提供消息通知功能，支持多种通知类型，您可以通过设置相关配置项，通过短信、邮箱、站内信向管理员或运维员发送消息通知，及时了解业务情况。本文介绍如何使用消息通知功能。登录 堡垒机控制台，在顶部菜单栏，选择堡垒机所在的地域...
CreateVcc-创建灵骏连接
用户可创建灵骏连接，用于连通灵骏网络环境和阿里云网络环境。接口说明 调用该接口创建灵骏连接时，请注意：填写参数 vccId 时，系统将为您配置已购买的灵骏连接；当缺省参数 vccId 时，系统将自动为您下单并配置灵骏连接。请确保您已经...
PAI灵骏智算服务概述
阿里云通过通信库ACCL实现了GPU和网卡的智能匹配、节点内外物理拓扑自动识别及拓扑感知的无拥塞通信算法，彻底消除网络拥塞，提升网络通信效率，提高分布式训练系统的扩展性。在万卡规模下，可达80%以上的线性集群能力。在百卡规模下，有效...
功能特性
同时，通过大规模RDMA网络部署实践，阿里云自主研发了基于端网协同的RDMA高性能网络协议和HPCC拥塞控制算法，并通过智能网卡实现了协议硬件卸载，降低了端到端网络延时，提升了网络IO吞吐能力，并有效规避和弱化了网络故障、网络黑洞等传统...
安装ACCL库
ACCL（Alibaba Collective Communication Library）是一款高性能通信库，提供了AllReduce、AllToAllV、Broadcast等常用集合操作接口以及点到点Send/Recv接口，为多机多卡训练提供高效的通信支持。本文为您介绍如何安装ACCL库。背景信息 ...
CPU拓扑感知调度
ACK基于新版的Scheduling framework实现CPU拓扑感知调度，针对CPU敏感型的工作负载提供更好的性能。本文介绍如何使用CPU拓扑感知调度。原理介绍 Kubernetes的节点会运行多个Pod，其中部分Pod属于CPU密集型工作负载。在这种情况下，Pod之间...
公网连接及白名单配置
检查是否已创建专有网络，否则创建一个专有网络，详情请参见 步骤一：创建专有网络和交换机。在 弹性公网IP 页面，创建弹性公网IP，详情请参见 申请EIP。在 公网NAT网关 页面，创建NAT网关，并绑定弹性公网IP，详情请参见 使用公网NAT网关...
什么是城市视觉智能引擎
城市视觉智能引擎（City Visual Intelligence Engine）依托于阿里云分布式计算和存储平台，利用先进的视频图像、图形学处理技术和深度学习算法，建立城市级人工智能模型，通过对相应场景的分析、索引和挖掘，赋能交通、市政综治、商业、...
阿里云云投屏广告机安装方法V2.3
1.2无线网络连接 1.2.1开机 给遥控器装上电池，按遥控器电源按键开机：开机首先启动开机动画如下：1.2.2无线网络配置引导 屏幕进入配置引导页 单击右键，进入网络选择页，选择无线网络，如果是隐藏网络，需单击添加网络输入网络名称后找到...
基于ACCL优化套件进行多机训练
步骤三：多机训练 使用 BERT示例代码 中的 run_pretraining.sh 脚本启动多机多卡训练任务。以2台灵骏节点16张GPU为例，假设其中某个灵骏节点的管理网络接口IP地址为 10.35.110.11，在该灵骏节点运行：#docker run-name=bert_accl_test-0-rm...
音视频审核
智能媒体服务提供了音/视频审核功能，包括智能审核和人工审核，可以对音频、视频等媒体文件内容进行多维度审核，帮助您检测媒体文件中的风险或违规内容，确保媒资的合规性。通过阅读本文，您可以了解音视频审核功能的使用方法。前提条件 ...
PAI轻量化控制台部署指南
fluid-system 调度 是否开启 调度组件（批量任务调度、GPU共享、GPU拓扑感知、NPU调度）功能。单击 高级配置，可自定义参数配置。ack-ai-installer，调度组件。kube-system 是否开启 Kube Queue任务队列 功能。更多信息，请参见 使用任务...
媒体审核概述
视频点播提供了支持视频、音频、图片、文本等全方位的媒体审核服务，可帮助用户发现媒体资源中的暴恐、涉政、涉黄、广告、辱骂、不良场景等风险内容或元素，降低人工审核成本，提升内容质量，改善平台秩序和用户体验。本文为您介绍视频点播...
开通并配置其他云产品
开通灵骏后，新购的计算节点在网络上与阿里云公共云环境隔离，您还需联合其他阿里云产品一起使用以实现网络连通与状态监控，包括专有网络VPC、云企业网CEN、应用实时监控服务ARMS。本文为您介绍使用灵骏前，您还需购买并配置的其他云产品。...
新建资源组并购买通用计算资源
安全组 交换机 公网访问网关 选择专有网络后，如果您有访问公网的需求，您可以选择以下两种配置方法：公有网关：绑定的专有网络访问公网时，使用共享的公网带宽，在用户高并发时下载速度会比较慢。专有网关：独享带宽，您可以根据需求选择...
创建集群
集群网段、互联网段、监控网络的专有网络VPC互相之间不能冲突，且监控网络的专有网络VPC不能和灵骏待连通的其他网络环境（如用户其他VPC网络、线下IDC网段）冲突。单击 专有网络（VPC）下拉列表和 交换机（vSwitch）下拉列表后的，选择相应...
DSW通过专有公网网关访问公网
前提条件 已创建专有网络和交换机，为了避免与PAI的集群网段冲突，强烈建议您的专有网络使用 192.168.0.0/16 网段。具体操作，请参见 创建和管理专有网络。已为专有网络创建安全组。具体操作，请参见 创建安全组。背景信息 在 DSW 实例中...
创建集群
集群网段、监控网络的专有网络VPC互相之间不能冲突，且监控网络的专有网络VPC不能和灵骏待连通的其他网络环境（如用户其他VPC网络、线下IDC网段）冲突。单击 专有网络（VPC）下拉列表和 交换机（vSwitch）下拉列表后的，选择相应的专有网络...
创建带有ACK灵骏托管版的集群
集群网段、监控网络的专有网络VPC互相之间不能冲突，且监控网络的专有网络VPC不能和灵骏待连通的其他网络环境（如用户其他VPC网络、线下IDC网段）冲突。单击 专有网络（VPC）下拉列表和 交换机（vSwitch）下拉列表后的，选择相应的专有网络...
接入人工审核服务
内容安全提供7*24小时的人工审核服务（人机审核和纯人工审核）。人机审核服务可返回机器识别结果，并根据机器识别的结果选择性进行人工审核。纯人工审核服务对全量的内容数据进行人工审核，仅返回人工审核的结果，不返回机器识别结果。前提...
复核人工审核结果
背景信息 人工审核模块展示所有人工审核的数据，从审核模式来分，包括人机审核和纯人工审核。从审核结果来分，包括 正常（pass）、疑似（review）和 违规（block）的数据。前提条件 已开通人工审核服务。人工审核服务目前需要通过售后人员...
- 产品推荐
- 这些文档可能帮助您