查看数据分类预置模型
Dataphin系统内置了数据分类的模型，以便用于识别规则的快速创建。本文为您介绍如何查看数据分类的预置模型。预置模型入口 在Dataphin首页，单击顶部菜单栏的 资产。按照下图操作指引，进入 预置模型 页面。查看数据分类预置模型 系统内置...
查看数据分类预置模型
Dataphin系统内置了数据分类的模型，以便用于识别规则的快速创建。本文为您介绍如何查看数据分类的预置模型。预置模型入口 在Dataphin首页，单击顶部菜单栏的 资产。按照下图操作指引，进入 预置模型 页面。查看数据分类预置模型 系统内置...
模型训练
对于模型架构，fasttext长文本分类融合模型。遍历次数一般与训练时间成正比，也就是说 10 次的时间会是 5 次的两倍。为了节省用户时间，同时防止用户设置过大的遍历次数，我们内部内置了 earlystop 功能。具体的，模型在连续三次遍历的过程...
文本内容风控解决方案
构建文本分类模型 在可视化建模平台 Designer 中，基于海量大数据语料预训练获得的NLP迁移学习模型，构建文本内容风控场景的文本分类模型。部署及调用模型服务 通过模型在线服务 EAS，您可以将训练好的文本风控模型部署为在线服务，并在...
使用文本审核增强版识别文本违规风险
文本审核增强版服务通过升级内容安全核心引擎，采用动态策略和模型强化变异对抗性，提供多种业务场景的审核服务，识别出多种违规风险。本文介绍如何使用文本审核增强版。功能特性 与文本检测1.0服务相比较，文本审核增强版服务支持更多的...
简介
数据工作站可以结合大语言模型给业务开发、数据开发、分析师和数据运营同学赋能，提升数据交付效率和数据自助分析的效率。当您需要将查询的数据、测试的数据、以及数据变化趋势等信息，以文档的形式进行交付，并在交付后，希望有可以替您...
功能发布记录
2020年8月 项目类型 功能名称 功能描述 发布时间 相关文档 实体抽取 预测服务框架升级 实体抽取的模型预测服务框架升级，模型预测效率提升2倍以上（仅对新训练的模型生效）2020-08-18/文本分类/实体抽取 智能标注模块上线 目前支持文本分类...
数据模型概述
DDM目前支持逻辑模型和物理模型建模，其中物理模型又分为关系型数据模型和非关系型数据模型，支持的大数据引擎为MaxCompute、Hive。说明 Hadoop的MR调优参数属于底层，DDM是数据建模工具，支持设置表、字段等物理属性。
管理数据模型
查看数据模型详情 在数据模型列表中，您还可以单击任一数据模型名称，进入该模型的详情页，查看详细信息，主要包括以下信息：基本信息：展示了数据模型名称、创建人、创建时间与描述。绑定的 API：列出了绑定了该数据模型的所有 API 及其...
BERT模型离线推理
BERT模型离线推理组件主要用于BERT模型的离线推理，利用已经训练完的BERT分类模型，对输入表中的文本进行分类。使用限制 仅支持DLC计算引擎。算法简介 BERT是一种基于Transformer的自然语言处理预训练模型。它通过在大量文本数据上预训练，...
基于文本分析算法实现新闻分类
本文为您介绍如何通过PAI提供的文本类组件，快速构建文本分类模型。背景信息 新闻分类是文本挖掘领域较为常见的场景。很多媒体或内容生产商对于新闻文本的分类通常采用手工标注的方式，消耗了大量的人力资源。PAI提供的智能文本挖掘算法...
产品简介
1000个字符 新闻文本分类 支持对单个或多个新闻文本的分类。直播ASR乱码识别 适用于直播场景，通过ASR语音转文字，识别由于多人同时说话导致的文字可读性不佳的问题。600个字符 裁判文书抽取 支持10个案由的文书，解析得到38个字段。关键词...
检索增强应用
History[x].Bot string 是 对话历史大的模型消息。是的 TopP float 否 生成时，核采样方法的概率阈值。例如，取值为0.8时，仅保留累计概率之和大于等于0.8的概率分布中的token，作为随机采样的候选集。取值范围为（0,1.0)，取值越大，生成...
插件和流程编排应用
History[x].Bot string 是 对话历史大的模型消息。是的 TopP float 否 生成时，核采样方法的概率阈值。例如，取值为0.8时，仅保留累计概率之和大于等于0.8的概率分布中的token，作为随机采样的候选集。取值范围为（0,1.0)，取值越大，生成...
三方模型应用
History[x].Bot string 是 对话历史大的模型消息。是的 TopP float 否 生成时，核采样方法的概率阈值。例如，取值为0.8时，仅保留累计概率之和大于等于0.8的概率分布中的token，作为随机采样的候选集。取值范围为（0,1.0)，取值越大，生成...
模型应用
功能描述 本文主要介绍如何使用API调用阿里云百炼模型应用，包括从模型广场中创建的官方大模型应用（如通义千问-Plus、通义千问等）、自训练模型应用和官方预置应用（如营销标题生成、营销文案生成、摘要抽取、文案续写和商品评论等）。...
姜子牙通用大模型
Ziya-LLaMA通用大模型是由IDEA研究院出品的大规模语言模型，它在大模型服务平台上的模型名称为"ziya-llama-13b-v1。Ziya-LLaMA大模型V1是基于LLaMa的130亿参数的大规模预训练模型，具备翻译，编程，文本分类，信息抽取，摘要，文案生成，...
模型说明
关系抽取Bert 基于BERT从大量无标注语料进行预训练的模型，加入融合实体对信息的模块进行关系分类模型训练。适用于标注数据比较干净，对效果要求较高，对训练时间/预测时间要求不是很高的主要内容是中文的场景。关系抽取BertNoise 基于BERT...
提交并发布模型
您可以将已创建的数据模型提交至开发环境，并发布至生产环境进行调度运行。本文为您介绍如何提交并发布已创建的数据模型。前提条件 如果您使用的是阿里云主账号，请下载建模工具。如果您使用的是RAM用户，请完成授权并下载建模工具。详情请...
如何开启模型训练
SFT不同训练任务的数据实验参考 文本分类任务-情感分析：训练数据量 100 200 500 1000 准确率 0.9559 0.9719 0.9719 0.978 文本生成-阅读理解 训练数据量 100 200 500 1000 2000 准确率 0.5808 0.5992 0.6202 0.611 0.6235 序列标注-命名...
如何快速调用官方预置应用-RAG检索增强应用模板
视频介绍 定义 阿里云百炼提供的RAG检索增强应用模板可以帮助大家实现让大模型瞬间“开挂”的技能。结合上传的知识数据，大模型识别解析学习文档内容，最终给出生成式回复。我们在通义千问-Turbo/Max大模型基础上，将文件上传、读取、切片...
产品简介
智能文本分类 将用户输入的一段文本自动映射到具体的类目上，以帮助用户快速完成文本的分类，并针对文本中的关键标签进行识别和提取。支持平层类目体系或者以树状形式组织的层次类目体系，当前系统内置两种默认分类体系可直接使用：新闻...
大语言模型使用案例
对于大语言模型，目前提供了免费的在线推理服务，用户可以直接在 PolarDB 集群中部署模型和创建调用大语言模型的函数，并通过创建的函数进行在线推理或交互式问答。本文中的案例以内置的qwen（通义千问）模型函数为例，来说明如何使用Row-...
姜子牙通用大模型
Ziya-LLaMA大模型V1是基于LLaMa的130亿参数的大规模预训练模型，具备翻译，编程，文本分类，信息抽取，摘要，文案生成，常识问答和数学计算等能力。目前Ziya-LLaMA通用大模型已完成大规模预训练、多任务有监督微调和人类反馈学习三阶段的...
查看逻辑表的引用场景
通过查看逻辑表引用场景能够快速对比逻辑模型和场景中计算节点引用的数据模型的一致性，以便及时更新公共节点被引用模型，保证逻辑模型和被引用模型的一致性。本文介绍如何查看逻辑表的引用场景信息。前提条件 逻辑表已经被场景中的公共...
查看逻辑表的引用场景
通过查看逻辑表引用场景能够快速对比逻辑模型和场景中计算节点引用的数据模型的一致性，以便及时更新公共节点被引用模型，保证逻辑模型和被引用模型的一致性。本文介绍如何查看逻辑表的引用场景信息。前提条件 逻辑表已经被场景中的公共...
组件参考：所有组件汇总
文本分类训练（MaxCompute）（即将下线）该算法组件集成了基于BERT的文本分类模型、传统深度文本分类（例如TextCNN）模型及PAI自研的DGCNN模型。文本匹配训练（MaxCompute）（即将下线）该组件的输入为两个句子，输出它们是否匹配。序列...
基于外卖评论实现舆情风控
PAI平台提供了一套基于文本向量化及分类的算法，可以基于历史标记的正负留言内容生成分类模型，从而自动预测新增留言的导向。该服务的整体框架已预置在 Designer 中，基于真实标记的11987条外卖平台评论数据，实现了自动化的正反向舆论风控...
产品简介
数据源 提供数据的源点，会根据这些数据来构建私域知识库，用于后续的检索、知识问答 大模型 大规模预训练语言模型是指使用海量文本数据进行预训练的语言模型。它通过学习大量的语言知识和语境信息，能够生成高质量的文本或提供语义理解。...
输入节点
当选择数据表时，需保证模型与下游节点的输入数据模型相同，适用于已创建数据模型的场景。当选择*（任意结构）时，代表数据结构为任意结构，适用于未创建数据模型的场景。说明 模型名称支持复制，将鼠标移动至已选择模型时，单击 图标，...
输入节点
当选择数据表时，需保证模型与下游节点的输入数据模型相同，适用于已创建数据模型的场景。当选择*（任意结构）时，代表数据结构为任意结构，适用于未创建数据模型的场景。说明 模型名称支持复制，将鼠标移动至已选择模型时，单击 图标，...
快速开始概述
自然语言处理模型 类型包括：文本分类、序列标注、文本生成、零样本分类、文本向量。语音模型 类型包括：语音识别、说话人确认、语音分离。快速开始支持的功能：支持一键部署模型、微调训练模型、增量训练模型、在线调试模型。对于进阶用户...
数据建模
数据建模支持ER模型和维度模型两种数据建模方法，帮助用户完成数据模型、逻辑表的设计和管理。用户可对数据模型的层次结构进行管理，并对逻辑表字段进行设计。字段设计需要在数据标准的约束下，通过模型设计过程中引用标准数据元定义，设置...
功能简介
数据建模支持ER（Entity-Relationship）模型和维度模型两种数据建模方法，帮助用户完成数据模型、逻辑表的设计和管理。用户可对数据模型的层次结构进行管理，并对逻辑表字段进行设计。字段设计需要在数据标准的约束下，通过模型设计过程中...
功能简介
数据建模支持ER（Entity-Relationship）模型和维度模型两种数据建模方法，帮助用户完成数据模型、逻辑表的设计和管理。用户可对数据模型的层次结构进行管理，并对逻辑表字段进行设计。字段设计需要在数据标准的约束下，通过模型设计过程中...
商业化升级自动创建实例通知
本文说明3月15日阿里云百炼大模型服务平台商业化升级自动创建实例事项。背景 阿里云百炼大模型服务平台于2024年3月15日进行商业化升级，升级中自动帮助老用户创建新商业化大模型实例，并通过系统触发创建实例的短信通知。短信通知内容如下...
建模空间
当您所需要管理多个DataWorks工作空间且需要复用一套数仓规划时，面对跨多个工作空间的复杂数据体系，可以通过设计空间来共享一套数据建模工具，针对整个数据体系进行统一的数仓规划、维度建模及指标定义等工作。本文为您介绍DataWorks建模...
设备使用物模型通信
物模型数据存储 设备上报的物模型数据默认会自动写入时序数据存储空间，您可以根据业务需要，执行以下操作：关闭物模型数据存储：手动关闭指定产品部分或全部物模型的时序数据存储服务。设置存储时效：2022年12月01日后创建的企业版实例，...
导出逻辑表
通过导出逻辑表功能，一次批量导出多张数据模型，搭配导入功能，可以快速实现工作组间的数据模型迁移。本文介绍如何导出逻辑表。前提条件 已新建逻辑表，具体操作，请参见 通过Excel导入逻辑表、通过云计算资源导入逻辑表 或 手动新建逻辑...
导出逻辑表
通过导出逻辑表功能，一次批量导出多张数据模型，搭配导入功能，可以快速实现工作组间的数据模型迁移。本文介绍如何导出逻辑表。前提条件 已新建逻辑表，具体操作，请参见 通过Excel导入逻辑表、通过云计算资源导入逻辑表 或 手动新建逻辑...
- 产品推荐
- 这些文档可能帮助您