组件参考：所有组件汇总
推荐方法 FM算法 FM（Factorization Machine）算法兼顾特征之间的相互作用，是一种非线性模型，适用于电商、广告及直播的推荐场景。ALS矩阵分解 交替最小二乘ALS（Alternating Least Squares）算法的原理是对稀疏矩阵进行模型分解，评估...
什么是AI分布式训练通信优化库AIACC-ACSpeed
AIACC_CPU_BINDING_ENABLE=1 如果程序本身存在问题，例如负载不均衡导致性能波动，开启CPU-Affinity功能后可能会出现性能损失，所以该特性作为优化选项进行使用。Bucket-Tuning：ACSpeed默认开启Bucket-Tuning，可以对梯度的融合进行自适应...
文档上传格式要求
处理后会出现的问题 第三条会被分到一个chunk，但是由于水印部分被识别成文字，导致“（五）十一等耕地12万元/亩”后会多出“政府公报”几个字，并且由于“政府公报”的水印位置比较靠前，会导致（一）（二）（三）（四）（五）的顺序被...
快速开始
创建RAG应用 大模型在面对事实性问题时可能会出现幻觉现象，您可以创建RAG应用来集成您的知识库文件，提高回答的准确性并减少错误信息的产生。上传知识库文件 单击左侧边栏的 应用中心-应用工具-企业知识库，单击 上传企业知识，在 类型 处...
机器学习
分类/回归问题：提供一系列算法如K最近邻、MLP多层感知神经网络、SVM支持向量机、决策树等算法来解决二元分类/回归问题，集成最小二乘法、GLM广义线性回归、逻辑回归、多项式回归等模型来解决回归问题；聚类问题：提供K-Means算法实现聚类...
什么是图数据库自动机器学习？
功能概述 GDB Automl支持被广泛使用的经典统计和机器学习算法，包括梯度提升模型，广义线性模型、深度学习模型等，为使用者提供了从数据处理，模型训练，模型管理到预测推理的全生命周期管理服务，可以自动运行集成算法并调整其超参数，以...
机器学习（MADlib）
分类、回归问题：提供一系列算法，如K最近邻、MLP多层感知神经网络、SVM支持向量机、决策树等算法来解决二元分类、回归问题，集成最小二乘法、GLM广义线性回归、逻辑回归、多项式回归等模型来解决回归问题。聚类问题：提供K-Means算法实现...
评分卡训练
评分卡是信用风险评估领域常用的建模工具，其原理是通过分箱输入将原始变量离散化后再使用线性模型（逻辑回归或线性回归等）进行模型训练，其中包含特征选择及分数转换等功能。同时也支持在训练过程中为变量添加约束条件。说明 如果未指定...
线性模型特征重要性
线性模型特征重要性组件用于计算线性模型的特征重要性，包括线性回归和二分类逻辑回归，支持稀疏和稠密数据格式。本文为您介绍该组件的配置方法。使用限制 支持的计算引擎为MaxCompute。组件配置 您可以使用以下任意一种方式，配置线性模型...
产品功能
当前版本支持的机器学习模型包括：聚合器（Aggregator）、Cox风险比例回归模型（CoxPH）、深度学习（DeepLearning）、分布式随机森林（DRF）、梯度提升模型（GBM）、广义线性模型（GLM）、广义低阶模型（GLRM）、孤立森林（IF）、K均值聚类...
概述
这就导致了不同系统之间会进行数据迁移，同一份数据可能在不同源之间冗余，进而出现数据不一致的问题，以及特征难管理、模型难升级等困境。除此之外，数据工程师、算法工程师和开发工程师的人力成本也是当前数据驱动的智能决策应用难以大...
简单权限模型的使用
此时，您必须将原对象迁移至简单权限模型，否则会出现表权限缺失的情况，从而影响业务运行。在该DB中执行如下语句迁移专家权限模型。call spm_migrate();将DB中已有的对象change owner到developer，使用SPM管理。如果您是新创建的DB，DB内...
方差膨胀系数VIF
VIF为1表示自变量不存在多重共线性，VIF的值越大，表示自变量之间的共线性越强，可能会导致模型不稳定或预测效果变差。一般来说，VIF小于5表示自变量之间不存在显著的共线性问题，大于10则表示自变量之间存在严重的共线性问题，需要对数据...
如何定义Manifest
什么是Manifest Manifest的概念来源于gpt plugin，gpt plugin中Manifest是一个文件，文件存储对于一个插件的所有描述，包括插件相关的API出入参、插件作用等关键信息，大模型会根据Manifest的信息知晓当前的插件可以完成什么（What），什么...
常见问题
这种是大模型的幻觉问题，当你输入的问题大模型没有知识回答的时候就可能出现。如果在base model上训练后更严重，就是没有训练好，训练效果与训练数据质量、多样性、数据等都有关系。5.我们现在是训练垂直领域的模型，知识都是安全领域的...
快速开始
功能介绍 轻量化声音克隆能力，通过真人语音数据训练生成独特的定制语音合成模型，为您的品牌或角色合成清晰自然的声音。定制的语音模型，可应用于数字人音频合成、音视频制作配音、个性化有声书朗读等场景。单击 ModelScope开源社区，查看...
快速开始
功能介绍 轻量化声音克隆能力，通过真人语音数据训练生成独特的定制语音合成模型，为您的品牌或角色合成清晰自然的声音。定制的语音模型，可应用于数字人音频合成、音视频制作配音、个性化有声书朗读等场景。单击 ModelScope开源社区，查看...
逻辑回归
尽管名字是逻辑回归，但它是一种用于分类而不是回归的线性模型。Logistic 回归在文献中也称为 logit 回归、最大熵分类(MaxEnt)或对数线性分类器。在该模型中，描述单个试验可能结果的概率使用逻辑函数建模。计算逻辑原理 逻辑回归的思路是...
机器学习开发示例
例如下面的代码采用第一个模型（modelA），并根据特征（features）向您显示标签（原始销售价格）和预测（预测销售价格）%pyspark#运行线性回归模型，并展示数据 predictionsA=modelA.transform(ml_data)predictionsA.show(10)数据打印 步骤...
部署Stable Diffusion应用FAQ
本文介绍使用函数计算部署Stable Diffusion应用过程中可能遇到的问题以及解决方案。应用启动失败怎么办？生成图片时进程卡住怎么办？为什么无法在线安装插件？如何访问Stable Diffusion的API？使用Stable Diffusion应用如何计费？除了默认...
搭建类似妙鸭相机的应用
虽然目前开源版本的facechain下载后即可配置使用，但存在以下问题：训练和推理的过程中会直接从模型Hub下载模型，整个应用涉及多个模型，大小约25 GB，导致整体耗时长，并且直接通过公网下载模型对带宽和网络稳定性要求很高，一旦无法下载...
FM算法
FM（Factorization Machine）算法兼顾特征之间的相互作用，是一种非线性模型，适用于电商、广告及直播的推荐场景。组件配置 Designer 提供的FM算法模板包括FM训练和FM预测组件，您可以在原PAI-Studio控制台首页的 FM算法实现推荐模型 区域...
逆向建模：物理表反向建模
建模成功的模型会被存放至维度建模中，您可以进入维度建模页面查看并进行后续的管理操作，详情请参见 模型管理。操作步骤 进入 逆向建模。登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据建模，在下拉框中选择对应工作空间后...
语音识别问题排查
本文为您介绍语音识别中出现问题的排查步骤及解决方案。排查步骤 使用cooledit或者Adobe Audition软件查看语音格式，播放试听并查看分轨情况、波形、能量和频谱图。ASR识别标准格式：8KHz或16KHz采样率、16bit采样位数、单声道的语音数据...
逻辑回归二分类
一、组件说明 逻辑回归通过将线性回归模型的输出通过Sigmoid函数进行映射，将连续的预测值转换为概率值。Sigmoid函数具有“S”形状，可以将任意实数值映射为0和1之间的概率值，表示样本属于正例的概率。逻辑回归的训练过程是利用最大似然...
逻辑节点使用说明
本文档介绍 逻辑节点 使用说明。...节点说明 判断节点用于判断条件、区分分支使用。分为条件以及else默认两种...else链路必须配置，否则可能会出现不可预知的结果。配置说明 判断条件支持or、and等关系，可以直接用表达式关联流程中的所有变量。
高级配置：模型服务预热
为了解决模型初次请求耗时较长的问题，EAS 提供了模型预热功能，使模型服务在上线之前得到预热，从而实现模型服务上线后即可进入正常服务状态。本文介绍如何使用模型预热功能。背景信息 通常向模型发送初次请求时，不同的Runtime会进行不同...
离线模型（OfflineModel）相关组件
离线模型（OfflineModel）是存储在MaxCompute中的一种数据结构，基于PAICommand框架的传统机器学习算法生成的模型会以离线模型格式存储在对应的MaxComute项目中，您可以使用离线模型相关组件获取离线模型做离线预测。本文为您介绍离线模型...
计量计费规则
不同的模型会根据模型的特性采用不同的计量单元，比如大语言类模型大多采用输入输出的token数进行计量，语音识别类模型采用输入语音文件时长进行计量，具体的计量方式可以参阅对应模型的具体文档。对于不同的模型，计费也是各自独立的，同...
LightGBM算法
gblinear：使用线性模型进行计算。rf：使用随机森林模型进行计算。dart：使用dropout技术删除部分树，防止过拟合。goss：使用单边梯度抽象算法进行计算。速度快，但是可能欠拟合。说明 设置该参数值时，需要使用单引号将参数值包裹起来。...
业产技融合分层协作方案
第二个问题如果回答的不好，就会出现产品技术团队每天在不断的接需求、做需求，功能在不断增加和堆叠，但是产品的竞争力却没有提高，时间长了对产品的演进危害很大。如果您的公司已经发展出独立的业务、产品、技术的独立部门，技术部门一般...
基本概念
大模型会基于 prompt 所提供的信息，生成对应的文本或者图片。Prompt模板 您可以通过设计不同Prompt模板来满足垂直场景需求，而无需每次拼接完整Prompt。Prompt优化 对Prompt语料进行内容质量和结构上的优化，便于获得更符合期望的大模型...
人气模型
人气模型会计算量化出每个商品的静态质量及受欢迎的程度的值，这个值称之为商品人气分。虽然人气模型来自淘宝搜索业务，但其实这个模型对于其他的搜索场景也有普适性，在非商品搜索场景中通过人气模型也可以计算出被索引的文档的受欢迎程度...
概念解释
模型调优 预置模型 预置模型为未经过任何训练的原始模型，您可以通过选择基础模型进行训练从而得到自创模型，不同的基础模型的参数和能力不同，我们将持续推出不同能力方向的模型。自定义模型 自订阅模型是基于您训练过的模型进行再次训练...
使用模型服务网格进行多模型推理服务
当您需要同时运行多个机器学习模型并进行推理时，可以使用模型服务网格部署和管理多模型推理服务。模型服务网格基于KServe ModelMesh实现，针对大容量、高密度和频繁变化的模型用例进行了优化，可以智能地将模型加载到内存中或从内存中卸载...
API插件管理
由于大模型会根据出参的定义，再结合用户的问题，对api返回的结果进行筛选、重新组合，作为最终的答案返回给用户，所以出参与入参一样，也需要尽可能精简和描述准确，嵌套的层级也尽可能少，详见 如何定义好插件的出参。测试API插件 平台为...
提交并发布模型
在 生成DDL 区域，物理模型会被转换为实际下发至计算引擎中运行的DDL语句。选中 我确认上述DDL语句正确无误，继续提交并将DDL下发至开发环境引擎，单击 提交。DDL语句开始运行并提交至MaxCompute开发环境项目。如果本步骤过于消耗时间，您...
建模优化
选择属于线性规划、非线性规划或约束类问题。添加模型序列。即创建索引，在索引创建中，选择 索引类型 为 普通索引，并赋予 索引名称，该名称将用于模型构建中的引用。您可以通过 手动输入 或者 关联表 的方式获取 索引值。定义变量。变量...
模型训练最佳实践
创建新模型训练任务需要选择模型类型，平台支持两种模型类型，如果第一次训练模型，一般选择预置模型，如果希望基于已训练的模型进行再次训练，则可选择自定义模型，定义如下：预置模型 预置模型为未经过任何训练的原始模型，您可以通过...
横向逻辑回归二分类
一、组件说明 横向逻辑回归通过将线性回归模型的输出通过Sigmoid函数进行映射，将连续的预测值转换为概率值。Sigmoid函数具有“S”形状，可以将任意实数值映射为0和1之间的概率值，表示样本属于正例的概率。横向逻辑回归的训练过程是利用...
- 产品推荐
- 这些文档可能帮助您