字符串比较
1.组件介绍 说明 必要前置组件：无 利用本组件可以实现字符串比较 2.输入项 说明 请参照可视化编辑器内组件面板中各输入项的帮助信息 3.输出项 说明 请参照可视化编辑器内组件面板中各输出项的帮助信息 4.组件使用示例 4.1.组件配置示例 在...
如何书写正则表达式
匹配包含不同拼写或特殊字符的字词 用法示例 匹配字词“viagra”和垃圾邮件发件人使用的某些内容，例如：vi@gra v1agra v1@gra v!gr@Regex 示例 v[i!1][a@]gr[a@]注释 未添加 \W，因此 viagra 的任何变体前后都可能出现其他字符。例如，该...
字符串函数
STRCMP(s1,s2)比较字符串s1和s2，如果s1与s2相等返回0，如果s1>s2返回1，如果s1，返回-1 比较字符串：SELECT STRCMP("runoob","runoob");返回：0 SUBSTR(s,start,length)从字符串s的start位置截取长度为length的子字符串 从字符串RUNOOB中...
STR_HASH
也不支持浮点数）randSeed 当子串以字符串类型来计算路由的哈希值时 PolarDB-X 所使用的随机种子的值，通常不用需要填写，仅当用于使用默认值随机种子（randSeed=31）的STR_HASH在实际业务中出现路由不均衡的场景，达到用哈希均衡数据的...
STR_HASH
也不支持浮点数）randSeed 当子串以字符串类型来计算路由的哈希值时 PolarDB-X 1.0 所使用的随机种子的值，通常不用需要填写，仅当用于使用默认值随机种子（randSeed=31）的STR_HASH在实际业务中出现路由不均衡的场景，达到用哈希均衡数据...
LPAD
当您需要格式化数据表中的字符串，以保证字符串输出的一致性和对齐时，MaxCompute支持使用LPAD函数，用字符串 str2 将字符串 str1 向左补足到 length 位。此函数为MaxCompute 2.0扩展函数，本文为您介绍LPAD的命令格式和使用示例。命令格式...
RPAD
当您需要格式化数据表中的字符串，以保证字符串输出的一致性和对齐时，MaxCompute支持使用RPAD函数，用字符串 str2 将字符串 str1 向右补足到 length 位。此函数为MaxCompute 2.0扩展函数，本文为您介绍RPAD的命令格式和使用示例。命令格式...
创建数据脱敏规则
掩盖 掩盖脱敏是对部分信息进行掩盖，将对应位置上的字符用“*”替换，达到脱敏的效果。使用掩盖方式进行脱敏时需选择掩盖脱敏的方式，当前DataWorks为您内置了一些掩盖脱敏方式，也支持您自定义。参数 说明 推荐方式 在下拉框选择推荐的...
字符串相似度-topN
组件配置 您可以使用以下任意一种方式，配置字符串相似度-topN组件参数。方式一：可视化方式 在 Designer 工作流页面配置组件参数。页签 参数 描述 字段设置 输入表在输出表追加的列名 输入表中需要在输出表中追加的列名。映射表在输出表...
新建计算字段
支持加减乘除运算 例如从订单明细表计算客单价：SUM([成交金额])/COUNT(DISTINCT[客户名称])复杂的分组场景 对维度进行分组的场景，简单的单字段分组可以支持使用 分组维度 功能，当您需要针对多个字段组合条件后分组，此时可以用 ...
列的最佳实践（2.0版）
从内部索引机制上，字符串类型适合等值查询和范围查询情况，而时间，数值类型性能更高，建议用户尽可能使用数值类型，减少使用字符串类型。方法 常见将字符串转换为数值类型方法：包含字符前缀或后缀，例如E12345，E12346等。可以直接去掉...
字符串相似度
计算字符串相似度是机器学习领域的一个基本操作，主要用于信息检索、自然语言处理和生物信息学等...您也可以使用字符串相似度-topN算法组件计算字符串相似度，并筛选出最相似的Top N个数据。关于该组件的使用详情，请参见 字符串相似度-topN。
文章相似度
文章相似度是在字符串相似度的基础上，...您可以使用字符串相似度组件来计算字符串相似度，详情请参见 字符串相似度。Designer预置了多种算法组件，你可以根据不同的使用场景选择合适的组件进行数据处理，详情请参见 组件参考：所有组件汇总。
GET_JSON_OBJECT
使用说明 GET_JSON_OBJECT函数的作用是在一个标准JSON字符串中，按照JSON PATH抽取指定的字符串。当前函数的入参支持两种类型：入参为JSON类型：基于最新支持的JSON数据类型，采用更为规范的JSON PATH。入参为STRING类型：原有的JSON PATH...
字符串替换
您在使用Logtail采集日志时，可以使用processor_string_replace插件，实现文本日志的全文替换、正则提取替换或去转义符。本文介绍processor_string_replace插件的参数说明和配置示例。重要 表单配置方式：采集文本日志和容器标准输出时可用...
Trajectory最佳实践
减少使用字符串类型属性 轨迹属性中如有大量的字符串属性，会导致存储空间浪费和性能下降。如果字符串为固定内容，可以转换为整型进行枚举，建议在程序中进行转换；如果无法避免使用字符串类型属性，可指定字符串类型默认长度，避免空间...
事件检查函数
abc")#字段名不能用双引号（""）包裹，特殊字符用反斜线（\）转义。e_search("_tag_\:_container_name_:abc")#用反斜线（\）转义。e_search("中文字段:abc")#直接写中文。正则匹配 e_search('content~="正则表达式"')#正则匹配。数字 e_...
Trajectory最佳实践
减少使用字符串类型属性 轨迹属性中如有大量的字符串属性，会导致存储空间浪费和性能下降。如果字符串为固定内容，可以转换为整型进行枚举，建议在程序中进行转换；如果无法避免使用字符串类型属性，可指定字符串类型默认长度，避免空间...
Trajectory最佳实践
减少使用字符串类型属性 轨迹属性中如有大量的字符串属性，会导致存储空间浪费和性能下降。如果字符串为固定内容，可以转换为整型进行枚举，建议在程序中进行转换；如果无法避免使用字符串类型属性，可指定字符串类型默认长度，避免空间...
Trajectory最佳实践
减少使用字符串类型属性 轨迹属性中如有大量的字符串属性，会导致存储空间浪费和性能下降。如果字符串为固定内容，可以转换为整型进行枚举，建议在程序中进行转换；如果无法避免使用字符串类型属性，可指定字符串类型默认长度，避免空间...
使用 REF CURSOR 的动态查询
以下是使用字符串文字的动态查询示例。CREATE OR REPLACE PROCEDURE dept_query IS emp_refcur SYS_REFCURSOR;v_empno emp.empno%TYPE;v_ename emp.ename%TYPE;BEGIN OPEN emp_refcur FOR 'SELECT empno,ename FROM emp WHERE deptno=30'|'...
如何使用资产变量
本文通过案例来介绍资产变量的使用方法。案例介绍一 创建126邮箱登录页面并使用账号密码实现登录（使用字符串以及密码类型资产）。案例实现 1）在控制台创建字符串类型以及密码类型的资产变量，对应126邮箱的登录账号和密码。创建方法参考...
推广短信模板规范
不支持非常用字符、emoji字符。不支持QQ号、微信号。个人姓名 请自定义，建议为个人户籍登记姓名。示例：${name} 长度限制为2~5位简体中文。数量/金额 请自定义，建议为有意义的变量名称。示例：${money} 数字、小数点组合。不含￥、$、元...
JSON
LITERAL：使用字符串常量来替换Map中的空key值。字符串常量的值由json.map-null-key.literal定义。json.map-null-key.literal 否 null String 当json.map-null-key.mode的参数是LITERAL时，指定字符串常量替换Map中的空key值。json.encode....
pg_similarity
阈值：控制比较字符串被判定为匹配的临界值。对于每对字符串，如果计算出的值（使用相应的相似性函数）大于或等于阈值，则认为匹配。取值范围为：0.0~1.0。默认值为0.7。归一化：控制相似性系数/距离是否被归一化（如果相似性系数被归一化...
字段值提取函数
exclude_path="",jmes="",output="",jmes_ignore_none=False,mode='fill-auto')说明 使用e_json解析目标数据，如果需要解析的字符串不符合JSON数据结构，则不会进行字符串解析，而返回原字符串。参数说明 参数名称 参数类型 是否必填 说明 ...
0011-00000005
问题描述 用户自定义元数据（User Meta）中Value包含非法字符。问题原因 自定义元数据是一组键值对，该报错是因为键值对中的Value包含非法字符。问题示例 正确示例：x-oss-meta-last-modified:20210506。解决方案 检查自定义元数据的Value...
0011-00000004
问题描述 UserMeta中key包含非法字符。问题原因 自定义元数据是一组键值对，元数据名称必须以 x-oss-meta-开头。该报错原因是用户自定义元数据（User Meta）的Key中 x-oss-meta-*包含非法字符。问题示例 用户自定义元数据的Key为：x-oss-...
如何在日志样例中设置不可见字符
在某些场景下，需要使用不可见字符作为日志的 分隔符 或 引用符，本文档主要介绍如何在日志样例中填写不可见字符。背景信息 如果需要保留日志的原始格式，而且日志内容中本身存在逗号（,）、分号;等字符，使用这些字符作为 分隔符 或 引用...
地理函数
重要 在日志服务分析语句中，表示字符串的字符必须使用单引号（''）包裹，无符号包裹或被双引号（""）包裹的字符表示字段名或列名。例如：'status' 表示字符串status，status 或"status"表示日志字段status。函数名称 语法 说明 支持SQL ...
正则表达式入门教程
转义字符：使用 \ 将有特殊作用的字符（元字符、分隔符等）转义为普通字符。例如 \.表示匹配半角句号。如下图所示，Regex101工具默认在正则表达式 a.\d\.前添加了分隔符/。其中，a 表示匹配字母a，.表示匹配一个任意字符，\d 表示匹配一个...
RLIKE字符匹配
使用示例 示例1 正则表达式要匹配字符串 a+b，其中+是正则中的一个特殊字符，因此要用转义的方式表达。在正则表达式引擎中的表达方式是 a\\+b，由于还要解释一层转义，因此能够匹配该字符串的表达式是 a\\\+b。select 'a+b' rlike 'a\\\+b'...
JSON类型
jsonb 类型也拒绝 \u0000（因为本数据库的 text 类型无法表示它），并且它坚持使用 Unicode 代理对来标记位于 Unicode 基本多语言平面之外的字符是正确的。合法的 Unicode 转义会被转换成等价的单个字符进行存储，这包括把代理对折叠成一个...
导入中特殊符号处理
AnalyticDB PostgreSQL版 支持多种数据导入方法，在通过OSS高速并行导入和通过\COPY命令导入数据的过程中，经常因为存在特殊字符导致导入失败。本文将介绍预先处理导入数据中的特殊字符的方法，从而消除特殊字符带来的问题。更多导入数据到...
REGEXP_EXTRACT
对于中文字符可以用对应的16进制编码表示，中文字符编码的范围是[\\x{4e00},\\x{9fa5}]。返回值说明 返回STRING类型。返回规则如下：如果 pattern 为空串或 pattern 中没有分组，返回报错。groupid 非BIGINT类型或小于0时，返回报错。不...
自定义过滤条件
过滤条件校验方式：即如何使用过滤条件值，是通过字符串比较的方式还是数字比较的方式。字符串比较即从字符串第一个字符开始逐个比较。黑白名单：设为黑名单则不符合条件的设备通过，设为白名单则符合条件的设备通过。过滤条件值：支持通过...
Hive数据脱敏
Ranger支持对Hive数据的脱敏处理（Data Masking），即可以对Select的返回结果脱敏，以屏蔽敏感信息。背景信息 该功能只针对HiveServer2...语句查看表testdb1.testtbl中a列的数据时，只有前面4个字符是正常显示，后面字符全部用 x 脱敏处理了。
字符串函数
重要 在日志服务分析语句中，表示字符串的字符必须使用单引号（''）包裹，无符号包裹或被双引号（""）包裹的字符表示字段名或列名。例如：'status' 表示字符串status，status 或"status"表示日志字段status。函数名称 语法 说明 支持SQL ...
秒级修改列字符集
在MySQL中，当用户指定列的字符集为UTF-8时，会默认使用utf8mb3字符集，该字符集最大使用3个字节来存储字符。如果用户需要存储表情（emoji）等信息时，则需要将列字符集修改为utf8mb4。一般情况下，修改列字符集需要重建表，耗时较长，且对...
签名机制
Signature=Base64(HMAC-SHA1(AccessKey Secret,UTF-8-Encoding-Of(StringToSign)))步骤一：构造待签名字符串 使用请求参数构造规范化的请求字符串（Canonicalized Query String）。按照参数名称的字典顺序对请求中所有的请求参数（包括公共...
- 产品推荐
- 这些文档可能帮助您