入门实践
基于DataWorks的数据建模流程如下：空间管理员角色创建数据标准 模型设计师角色创建数据模型 模型设计师角色修改数据模型 模型设计师角色保存模型至模型库 开发角色提交模型至开发环境计算引擎 运维、部署或空间管理员角色发布模型至生产...
示例：模型设计
那么地址表中 用户ID 的字段类型需要选择为 Reference（引用），并且引用对象需要选择为用户数据模型中的 userId，具体如下图所示：数据模型中目前支持的字段类型如下：表 1.数据模型参数 参数 说明 字段名称 自定义字段的名称。编码 英文...
新建数据字典
数据字典管理支持创建并维护数据模型中使用的数据字典，制定并管理平台遵循的统一数据标准，为数据元、指标、维度的值域设置中引用数据字典提供数据基础，帮助平台管理者和数据管理者管控治理后数据的一致性和数据质量。本文为您介绍如何...
新建数据字典
数据字典管理支持创建并维护数据模型中使用的数据字典，制定并管理平台遵循的统一数据标准，为数据元、指标、维度的值域设置中引用数据字典提供数据基础，帮助平台管理者和数据管理者管控治理后数据的一致性和数据质量。本文为您介绍如何...
08批量物理化逻辑模型
本文介绍批量物理化数据模型中的多张逻辑表到指定的云计算资源下。完成从逻辑态模型的物化。前提条件 已配置MaxCompute云计算资源“data_odps_dev”。已配置RDS云计算资源“dataq_dws_rds_dev”。完成13个逻辑模型创建（保证每个模型已经...
羲和分析计算引擎
极致性能是 AnalyticDB MySQL版 的核心竞争力之一。自2019年4月开始至今，AnalyticDB MySQL版 在世界权威机构测评的TPC-DS榜单中位居第一名，性价比是第二名的4倍，并且...利用数据模型中的范式依赖，数据数值类型等进行查询执行算法优化。
概述
利用数据库中的表数据进行大语言模型推理的场景。导入模型目前仅支持TensorFlow模型（输入为一维数组或句子），支持的输出类型为INTEGER、REAL或STRING。使用限制 仅支持在 PolarDB MySQL版 8.0.2版本的 企业版 集群中使用该功能。费用 仅...
什么是DataWorks
世界500强亿滋中国：通过DataWorks智能数据建模进行全链路的数据模型治理，极大提升数据中台的自服务能⼒，让企业数据决策实现下放，释放新零售的数字化力量。上市公司创梦天地：基于开源的EMR引擎，用DataWorks替换自研调度系统，企业内部...
操作流程
新建数据字典并物理化 通过新建并维护数据模型中使用的数据字典，制定并管理平台遵循的统一数据标准，为数据元、指标、维度引用数据字典提供数据基础，帮助平台管理者和数据管理者管控治理后数据的一致性和数据质量。具体操作，请参见 新建...
操作流程
新建数据字典并物理化 通过新建并维护数据模型中使用的数据字典，制定并管理平台遵循的统一数据标准，为数据元、指标、维度引用数据字典提供数据基础，帮助平台管理者和数据管理者管控治理后数据的一致性和数据质量。具体操作，请参见 新建...
我是系统集成商
IT数据源定义需要通过工业数据应用平台进行数据集成服务的三方应用IT数据源，比如企业中的ERP、MES、WMS等业务系统，IT数据源将列出所有平台中已经创建的数据源，可以单击 新建数据源：数据源类型支持数据库和FTP，下面分别介绍每种类型的...
Schema约束
在Lindorm时序引擎中的Schema约束指的是以下行为：校验数据写入的目标表是否存在 校验数据写入的标签（Tag）或量测值（Field）是否已预先定义 校验数据写入的数据类型与预先定义的数据类型是否一致 保障数据查询时字段返回类型的一致性 ...
简介
数据工作站可以结合大语言模型给业务开发、数据开发、分析师和数据运营同学赋能，提升数据交付效率和数据自助分析的效率。当您需要将查询的数据、测试的数据、以及数据变化趋势等信息，以文档的形式进行交付，并在交付后，希望有可以替您...
配置数据
搭建场景后，您可为场景中模型添加组件，配置组件数据源关联孪生节点的物模型数据，展示孪生体模型的实时数据、状态及告警信息。前提条件 已完成以下操作，请参见：添加孪生节点。配置功能属性。搭建场景。重要 孪生节点的物模型数据来源于...
模型应用
功能描述 本文主要介绍如何使用SDK调用阿里云百炼的模型应用，包括从模型广场中创建的官方大模型应用（如通义千问-Plus、通义千问等）、自训练模型应用和官方预置应用（如营销标题生成、营销文案生成、摘要抽取、文案续写和商品评论等）。...
免费体验PolarDB for AI
您可以前往 PolarDB for AI：在数据库中通过SQL实现AI能力 免费体验PolarDB for AI的能力，如：体验在在PolarDB数据库中使用通义千问大模型的功能 体验在PolarDB数据库中无缝使用AI能力（如模型创建、模型训练、模型评估、模型推理等）体验...
PolarDB for AI NL2SQL正式商业化，欢迎免费体验！
免费体验PolarDB for AI更多能力：在PolarDB数据库中通过SQL实现AI能力 体验在PolarDB数据库中使用通义千问大模型的功能 体验在PolarDB数据库中无缝使用AI能力（如模型创建、模型训练、模型评估、模型推理等）体验在PolarDB数据库中通过...
模型创建
检索问答 RETRIEVAL_QA 使用指定数据表中的知识库结合大语言模型构建一个检索增强生成（Retrieval Augmented Generation，RAG）应用。时序预测 TIME_SERIES_FORECAST 时序预测类任务。时序异常检测 TIME_SERIES_ANOMALY_DETECTION 时序异常...
管理数据模型
说明 如果选择数据模型的子类模型中存在循环依赖的数据模型，则无法编辑。删除数据模型 说明 如果当前数据模型已被引用或已绑定了 API，则无法被删除。您可以通过以下任一方式删除数据模型：在数据模型列表页，单击相应数据模型右侧 删除 ...
CREATE MODEL
Lindorm AI引擎支持通过Lindorm SQL创建AI模型，对宽表引擎或时序引擎中的数据进行建模分析。您可以根据业务场景，在CREATE MODEL语句中设置推理任务类型、配置任务参数，创建不同类型的模型，例如文生图、检索问答、时序预测等模型。引擎...
精模建筑
说明 当模型数据较大时，建议使用OSS上传方式上传模型。您可以在上传成功页面，单击 下一步 进入模型信息配置页面，或者单击选择 重新上传 重新上传新的模型压缩文件；也可单击 取消 即可取消上传模型压缩文件。在完善模型信息对话框中，您...
数据问答最佳实践
规避业务数据冗余：每行数据不应该有业务相关的冗余，给模型理解带来困扰，比如一张表中的数据如下：大学 专业 研究方向 招生人数 北京工业大学 数学 应用数学 12 北京工业大学 数学 基础数据 12 北京工业大学 物理 应用物理 11 说明 实际...
精模建筑
说明 当模型数据较大时，建议使用OSS上传方式上传模型。您可以在上传成功页面，单击 下一步 进入模型信息配置页面，或者单击选择 重新上传 重新上传新的模型压缩文件；也可单击 取消 即可取消上传模型压缩文件。在完善模型信息对话框中，您...
数据模型概述
DDM目前支持逻辑模型和物理模型建模，其中物理模型又分为关系型数据模型和非关系型数据模型，支持的大数据引擎为MaxCompute、Hive。说明 Hadoop的MR调优参数属于底层，DDM是数据建模工具，支持设置表、字段等物理属性。
背景
模型和案例丰富，专家在线支持 表格存储针对不同业务场景提供了相应的数据模型，简化业务的设计和开发，例如消息和Feed流提供Timeline模型，时序数据提供Timestream模型，科学大数据的多维网格数据提供Grid模型等。针对典型业务场景，提供...
数据建模
Excel导出：支持将数据模型设计模块中的逻辑表及信息以Excel的形式导出，并提供按全量模型与按查询条件的方式进行导出。DDL设置：支持根据逻辑表，自动生成并保存不同云计算资源类型的DDL语句。物理化：支持将已存在的逻辑表物理化到数据库...
概念解释
模型中心模块核心概念解释如下表所示：模块 概念 解释 训练数据 训练集 调优所用的数据集，格式一般为Prompt+Completion的文本数据，可通过Excel进行编辑和上传，最小训练数据条数为20，最大训练数据条数为10000，一条训练数据Prompt+...
创建数据模型
在新打开的 创建数据模型 页面中，配置如下信息：模型名称：必填，用于识别数据模型，需保证唯一性。支持数字、字母、下划线，32 个字符以内，以字母或下划线开头。模型描述：选填，用于描述该数据模型的业务意义或使用范围等，64 个字符...
导入模型
逆向数据库 对于存量系统，通过逆向的形式，可以将数据库塑造成模型文件。当前支持的数据库类型和版本如下：MySQL 5.7+、Oracle 9i/10g/11g/12c、DB2 9.7/10.5、MariaDB、PostgreSQL 9.5+、SQL Server 2008+、GaussDB A、GBASE 8A、...
基本概念
应用体验中心 通过上传自己的测试数据，以对话的形式进行大模型应用的测试，支持展示测试过程中的debug等信息，方便开发者调试和定位问题。应用广场 在这里您可以挑选官方预置完整工程链路的应用或预置场景prompt的应用，通过应用将通义...
配置识别模板
打开或关闭模板中的模型 内置模板中所有模型默认为开启状态。如果无需使用内置模板中的模型，您可以关闭该模型。在 模板管理 页签的 模板详情 子页签，打开或关闭目标识别模型状态开关，开启或关闭识别模型。使用自定义模板 以下步骤介绍...
LLM数据处理
本文以开源项目RedPajama在GitHub中的少量数据为例，为您介绍如何使用PAI提供的LLM大语言模型数据处理组件，对GitHub代码数据进行数据清洗和处理。前提条件 已创建工作空间，详情请参见 创建工作空间。已将MaxCompute资源关联到工作空间，...
模型规范化检查
模型规范化检查是指在进行数据模型设计的过程中，开启数据规范检查功能，在建模时予以参考。操作步骤 在模型设计区的下方可以看到 模型规范 选项卡，单击 开始检查 即可对模型的设计规范进行检查，错误、警告、提示栏 中分别显示模型规范...
BI分析功能简介
DataV的BI分析功能是基于DataV6.0迭代更新后的数据映射能力，通过简便实用的数据模型构建、视觉绑定和交互式动态数据查询，向用户提供探索数据间关系的能力，可以丰富可视化视图的创作模式，完善可视分析循环。本文介绍BI分析的基本概念。...
导入数据模型
API 网关会从 Swagger 2.0 文件中的 Model 或 Swagger 文件 3.0 中的 Schema 解析参数名称，参数结构，参数类型并转换后导入数据模型，可直接在 API 中自动生成示例入参的 JSON，数据模型也可直接在流程编排中进行参数配置，参数映射等。...
模型训练最佳实践
创建新模型训练任务需要选择模型类型，平台支持两种模型类型，如果第一次训练模型，一般选择预置模型，如果希望基于已训练的模型进行再次训练，则可选择自定义模型，定义如下：预置模型 预置模型为未经过任何训练的原始模型，您可以通过...
功能简介
Excel导出：支持将数据模型设计模块中的逻辑表及信息以Excel的形式导出，并提供按全量模型与按查询条件的方式进行导出。DDL设置：支持根据逻辑表，自动生成并保存不同云计算资源类型的DDL语句。物理化：支持将已存在的逻辑表物理化到数据库...
功能简介
Excel导出：支持将数据模型设计模块中的逻辑表及信息以Excel的形式导出，并提供按全量模型与按查询条件的方式进行导出。DDL设置：支持根据逻辑表，自动生成并保存不同云计算资源类型的DDL语句。物理化：支持将已存在的逻辑表物理化到数据库...
通义千问大模型数据推理和交互
本文介绍了如何通过扩展的SQL在 PolarDB 上使用通义千问大模型，并通过模型生成的数据来和数据库中的数据进行交互。简介 通义千问大模型基于Transformer大语言模型，在超大规模的预训练数据上进行训练。预训练数据类型多样，覆盖广泛，包括...
数据模型
点击 添加数据模型 按钮或者列表中的 详情 链接，添加或编辑数据模型定义：模型名称：模型名称，以字母或下划线开头，由字母、下划线、数字组成。模型描述：模型的描述信息。模型参数：名称：必填，模型中参数的名称。类型：必填，可选择的...
- 产品推荐
- 这些文档可能帮助您