LLM-扩展LaTeX宏定义(DLC)

LLM-扩展LaTeX宏定义(DLC)组件适用于TEX文档格式数据。主要功能是内联扩展所有无参数的宏,宏如果由字母和数字组成且没有参数,则将宏的名称替换成宏的值。输入的OSS数据文件(JSONL格式,示例)需符合:每一行是一个合法的JSON对象,文件由多行JSON对象组成,整个文件本身不是合法的JSON对象。

支持的计算资源

DLC

算法说明

LLM-扩展LaTeX宏定义组件内联扩展所有无参数的宏,正则表达式如下:

对比项

不带参数的\newcommand

不带参数的\def

正则表达式

r'\\\bnewcommand\b\*?\{(\\[a-zA-Z0-9]+?)\}\{(.*?)\}$'

r'\\def\s*(\\[a-zA-Z0-9]+?)\s*\{(.*?)\}$'

正则表达式匹配的内容

\newcommand{\macro_name}{macro_value}

\newcommand*{\macro_name}{macro_value}

\def\macro_name{macro_value}

说明

macro_name只允许包含字母和数字,macro_value可以包含任何字符

提取所有满足上述正则表达式的字符串,将macro_name替换为macro_value。示例如下:

处理前

image

处理后

image

配置组件

Designer工作流页面添加LLM-扩展LaTeX宏定义(DLC)组件,并在界面右侧配置相关参数:

参数类型

参数

是否必选

描述

默认值

字段设置

目标处理字段

要处理的字段名称。

数据输出OSS目录

处理后数据的OSS存储目录。如果为空,使用工作空间默认路径。

执行调优

多进程个数

设置进程数。

8

选择资源组

公共资源组

选择节点规格(CPUGPU实例规格)、节点数量、专有网络。

专有资源组

选择CPU核数、内存、共享内存、GPU卡数、节点数量。

最大运行时长

组件最大运行时长,超过这个时间,作业会被kill。