预处理规则管理
查看预处理规则详细信息 在预处理规则列表中，单击预处理规则名称链接，即可查看该预处理规则的详细信息，包括该预处理规则在各节点中的存储地址、预处理配置和关联的任务等信息。基本信息 在预处理规则的 基本信息 页签下，可以查看预处理...
新建通用模型
配置预处理组件（可选）可选，支持上传本地 GDP 预处理 组件。说明 您可以单击右侧的 样例下载，获取预处理组件的样例文件。离线特征 Schema 模型文件配置完成后单击 开始解析，进行离线特征 Schema 的解析。解析完毕后可获取 特征名称 ...
新增通用模型版本
配置预处理组件（可选）支持上传本地 GDP 预处理 组件。说明 您可以单击右侧的 样例下载，获取预处理组件的样例文件。离线特征 Schema 模型文件配置完成后单击 开始解析，进行离线特征 Schema 的解析。解析完毕后可获取 特征名称 列表及其...
Kafka实时入湖
详情请参见 数据预处理。配置目标数据湖信息。配置项包括目标数据库、目标数据表名称、存储格式、数据湖存储位置等。配置任务信息。配置项包括任务实例名称、RAM角色、最大资源使用量等。数据预处理 Kafka实时入湖提供了数据预处理功能对...
编辑脚本
脚本类型 输入配置 输出配置 创建联邦表 原始样本（多个）联邦表（一个或多个）预处理规则 联邦表（一个或多个）联邦表（一个或多个）预处理应用 联邦表（一个或多个）联邦预处理规则（一个）联邦表（一个或多个）模型开发 联邦表（一个或...
图文解释
单击选中 SAM分割预处理 后，在右侧 配置 区域配置具体参数。参数说明如下：参数 说明 标题 默认标题区域无需修改。数据集字段 在数据集字段中选择使用SAM分割的embedding字段，可以配置该字段来提升页面SAM分割工具的加载速度。如果不配置...
数据标注
并且我们可以通过预处理规则配置：去除url、去除emoji、大写转小写、繁体转简体，帮助我们处理文本里面的无用信息。在这里我们选择分类类型支持单选分类和多选分类，多选分类：每个题目，可以选择多个答案；单元分类：每个题目，只能选择...
联邦预处理
函数路径 fascia.biz.api.preprocessing.load_preprocessing_rule 函数定义 def load_preprocessing_rule(rule_desc)->List[PreprocessingRule]:请求参数 rule_desc：保存预处理信息后得到的预处理规则，对应输入配置里的预处理规则占位符...
功能发布记录
招标中标类型分类服务 预训练模型 适用于作为招标解析服务（高级版）、中标解析服务（高级版）的前处理步骤，区分公告类型。详见右侧文档 2021-06-08 招标中标公告类型分类服务 招标中标信息抽取-高级版服务 预训练模型 高级版对比基础版，...
建立VPC到本地数据中心的连接（双隧道模式和BGP路由）
pre-shared-key fddsFF123*/配置预共享密钥，本文为fddsFF123*。exit!在本地网关设备2中添加如下配置 crypto ikev2 keyring alicloud peer alicloud address 47.XX.XX.138/配置云上备隧道的公网IP地址，本文为47.XX.XX.138。pre-shared-key...
基于多个VPN网关建立高可用的IPsec-VPN连接（负载分担...
pre-shared-key fddsFF123*/配置预共享密钥，本文为fddsFF123*。exit!在本地网关设备2中添加如下配置 crypto ikev2 keyring alicloud peer alicloud address 47.XX.XX.224/配置云上VPN网关2的公网IP地址，本文为47.XX.XX.224。pre-shared-...
数据预处理
对于文本数据而言，通常文本数据里面会含有很多跟任务无关的噪音，这时应该进行文本的预处理。在NLP自学习平台内置了一些预处理规则，如果您觉得有必要进行预处理，可以选择这些规则。我们内置的规则包括：去除 URL 链接；去除 emoji 表情...
导出和导入动态配置
动态配置提供配置快速导出和导入功能，您可以通过导出功能将动态配置备份到本地，也可通过导入功能快速恢复动态配置。支持在不同环境中导出和导入动态配置。导出动态配置 登录 SOFAStack 控制台。在左侧导航栏，选择 中间件>微服务平台>微...
Designer支持LLM数据预处理算子及常用模板
新增功能/规格 高质量的数据预处理是LLM成功应用的关键步骤，PAI-Designer提供去重、标准化、敏感信息打码等等常用的高性能数据预处理算子，并基于MaxCompute提供大规模分布式数据计算能力，可大幅提升客户在LLM场景下的数据预处理效率，...
Tracer DRM 开关
动态配置项 默认情况下，Tracer 会生成各种网络中间件调用的详细日志和统计日志。由于 Tracer 的日志生成是异步的，所以 Tracer 对性能的影响很小。但是，对于特殊需要，Tracer 提供了动态配置开关用于关闭中间件的 digest 日志。Tracer 的...
概述
动态配置（Distributed Resource Management，简称 DRM）是一个分布式环境下，实时动态的配置管理框架。可以在应用没有重启的情况下，完成配置的动态更新。广泛用于业务参数配置、应急开关切换等场景。动态配置是微服务下的模块之一，您只...
0040-00000374
问题描述 在使用新版本图片服务对图片添加图片水印时，设置的图片水印预处理相关参数格式无效。问题原因 image参数值经Base64解码后的图片水印预处理相关参数中（x-oss-process）出现了获取信息参数/info。问题示例 GET/example_image?x-...
0040-00000372
问题描述 在使用新版本图片服务对图片添加图片水印时，设置的图片水印预处理相关参数格式无效。问题原因 image参数值经Base64解码后的图片水印预处理相关参数中（x-oss-process）出现了分隔符|。问题示例 GET/example_image?x-oss-process=...
使用注解标识配置类
动态配置的主要编程方式为使用注解标识配置类信息。本文介绍如何覆盖注解配置，实现更灵活的动态配置类初始化。说明 如何完全使用注解方式配置一个动态配置类，请参见 开始使用动态配置。覆盖注解配置方式 动态配置客户端提供两种方式注册...
推送动态配置
属性配置完成后，您可以根据实际需求推送动态配置。目前支持以下两种方式推送动态配置：直接推送：立即将配置发布至所有订阅服务器。建议在验证配置无误后再进行此操作。灰度推送：仅将配置推送到几台服务器进行测试验证，并不保存数据到...
动态配置快速入门
动态配置（DRM）功能是基于 SOFABoot 工程实现的。本文介绍如何快速实现动态配置。前提条件 已完成环境配置，配置详情请参见 搭建环境。已下载 示例工程，并将示例工程主 pom.xml 文件的 SOFABoot 版本号改为最新版。SOFABoot 版本信息，请...
日志数据预处理与投递
本视频介绍如何对日志数据进行预处理与投递。
最佳实践
Paraformer语音识别 了解如何通过从视频文件中提取音轨、并进行合理的压缩以显著降低文件尺寸，从而减少API调用过程中的文件传输耗时、加快文件转写吞吐效率，请查阅：预处理视频文件以提高文件转写效率。通过OSS可以提高文件转写的效率和...
新增动态配置
动态配置属性以键值对的形式定义，隶属于某一动态配置类。配置类与属性的关系可类比 Java 中的类与属性的关系。配置步骤 登录 SOFAStack 控制台。在左侧导航栏，选择 中间件>微服务平台>微服务>动态配置。单击 新增配置类，然后配置以下...
读配置文件
组件截图 二、参数说明 参数名称 参数说明 选择配置文件 用户如果在本项目某个工作流中使用【数据预处理】或者【特征生成】类组件进行建模，运行成功之后，则可以在其他任务中选择配置文件。注意：建模文件的名称格式为${工作流名称}_${...
ESSD AutoPL云盘
云盘性能配置 及费用示例 配置预配置性能和性能突发 当您在ECS管理控制台上创建ESSD AutoPL云盘，或者在创建ECS实例选择ESSD AutoPL云盘时，可以在配置ESSD AutoPL云盘容量的同时根据业务需求自定义云盘的预配置性能和性能突发，以提升云盘...
SubmitPreprocessJobs-导播台视频预处理
接口说明 视频预处理实际是转码过程，生成符合导播台播放要求的视频，所以会有 计量计费信息产生，计费详情请参见 云导播费用。接收 转码完成 的回调消息，来获取处理结果。当回调消息 Preprocess=true时，表示预处理完成回调。QPS 限制 本...
名词解释
动态配置和静态配置 系统配置可以是静态或者动态配置。配置的版本与软件本身的版本强绑定的称之为静态配置。反之，在同一个版本的系统部署且运行期间配置可以连续发生多次变更的则称之为动态配置。例如build-version:1.0.0配置与软件版本...
配置数据计算和数据过滤
配置数据计算 您可以配置表达式，预处理上一节点输出字段的数据。进入数据解析工作台。在中间画布单击当前节点后的添加 图标。在弹出的节点列表中单击 数据计算 节点。在画布中单击 数据计算 节点，在右侧配置面板，显示原始字段列表。根据...
Kafka单表实时入湖OSS（HUDI）
如果在 JSON解析 节点配置了 动态输出字段，则在OSS节点中会出现 上游流入动态字段处理策略 表单。动态列指在任务配置中未明确定义列名，而是根据源端输入数据内容的不同，能够解析出不同列名和列值，并输出到OSS节点的列。对上游流入动态...
修改ESSD AutoPL云盘突发I/O
云数据库 MongoDB 版 集成了ESSD AutoPL云盘突发I/O调整能力，您可以根据业务实际情况调整I/O的预配置大小，助您轻松应对突发或计划中的流量高峰。前提条件 实例存储类型为ESSD AutoPL云盘。使用限制 IOPS预配置性能24小时内最多可修改两次...
Kafka实时ETL同步至Hologres
如果在 JSON解析 节点配置了 动态输出字段，则在Hologres节点中会出现 上游流入动态字段处理策略 表单。动态列指在任务配置中未明确定义列名，而是根据源端输入数据内容的不同，能够解析出不同列名和列值，并输出到Hologres节点的列。对...
数据处理配置
每个数据源默认免费提供2个资源，如您的数据量更新较大，并且对数据的时效性有要求的场景，可以通过数据处理配置，扩容process_partition_count来支持更大的数据更新。扩容数据处理资源 在高级配置中，用户点击数据处理配置后，选择需要...
数据处理配置
每个数据源默认免费提供2个资源，如您的数据量更新较大，并且对数据的时效性有要求的场景，可以通过数据处理配置，扩容process_partition_count来支持更大的数据更新。扩容数据处理资源 在高级配置中，用户点击数据处理配置后，选择需要...
修改AutoPL云盘预置IOPS
您可以在配置ESSD AutoPL云盘容量的同时，根据业务需求自定义云盘的预配置性能。本文介绍了如何修改已有PolarDB集群的AutoPL云盘预置IOPS。使用限制 同一块ESSD AutoPL云盘24小时内最多可变配2次预配置IOPS大小。操作步骤 登录 PolarDB控制...
修改AutoPL云盘预置IOPS
您可以在配置ESSD AutoPL云盘容量的同时，根据业务需求自定义云盘的预配置性能。本文介绍了如何修改已有PolarDB集群的AutoPL云盘预置IOPS。使用限制 同一块ESSD AutoPL云盘24小时内最多可变配2次预配置IOPS大小。操作步骤 登录 PolarDB控制...
修改ESSD AutoPL云盘性能配置
在使用ESSD AutoPL云盘过程中，您可以根据业务需求灵活开启或关闭云盘的预配置性能和性能突发，从而节约您的费用成本。也可以在已开启预配置性能的基础上修改预配置IOPS，从而实现在保持云盘存储容量大小不变的情况下，提升云盘的性能。...
PolarDB标准版支持ESSD AutoPL云盘
预配置性能 单盘预配置性能的最大IOPS 50,000 单盘IOPS性能 单盘IOPS性能等于预配置IOPS性能，上限为50000。单盘吞吐量性能（MB/s）单盘吞吐量性能与预配置IOPS有关，单盘吞吐量性能=16 KB×预配置IOPS/1024，上限为350。云盘价格 计费方式...
为Dubbo服务动态配置超时时间
本文介绍如何动态配置Dubbo服务的超时。前提条件 请确保在EDAS控制台能查询到相应的Dubbo服务信息，具体操作，请参见 查询Dubbo服务。背景信息 在日常工作中会遇到各类超时配置，业务逻辑变更后，已有调用关系随着业务发展可能需要不断调整...
一字管道
支持静态和动态配置。静态：设置一个满足数据类型的值。动态：设置一个返回数据为数值型的数据源。可选数据源有 设备 和 接口。流动方向 设置管道标志的流动方向，支持静态和动态（关联设备）配置。静态 红端-蓝端（默认值）：从左至右流动...
- 产品推荐
- 这些文档可能帮助您