smlar
formula的预定义变量说明如下：N.i：两个数组中的相同元素个数（交集）。N.a：第一个数组中的唯一元素个数。N.b：第二个数组中的唯一元素个数。anyarray%anyarray 当两个数组的相似度超过阈值时返回 TRUE；否则返回 FALSE。text[]tsvector2...
smlar
formula的预定义变量说明如下：N.i：两个数组中的相同元素个数（交集）。N.a：第一个数组中的唯一元素个数。N.b：第二个数组中的唯一元素个数。anyarray%anyarray 当两个数组的相似度超过阈值时返回 TRUE；否则返回 FALSE。text[]tsvector2...
smlar
formula的预定义变量说明如下：N.i：两个数组中的相同元素个数（交集）。N.a：第一个数组中的唯一元素个数。N.b：第二个数组中的唯一元素个数。anyarray%anyarray 当两个数组的相似度超过阈值时返回 TRUE；否则返回 FALSE。text[]tsvector2...
smlar
formula的预定义变量说明如下：N.i：两个数组中的相同元素个数（交集）。N.a：第一个数组中的唯一元素个数。N.b：第二个数组中的唯一元素个数。anyarray%anyarray 当两个数组的相似度超过阈值时返回 TRUE；否则返回 FALSE。text[]tsvector2...
ARRAYS_OVERLAP
array中的 T 指代ARRAY数组元素的数据类型，数组中的元素可以为任意类型。a 和 b 中元素的数据类型必须一致。数组中的元素可以为如下类型：TINYINT、SMALLINT、INT、BIGINT FLOAT、DOUBLE BOOLEAN DECIMAL、DECIMALVAL DATE、DATETIME、...
Array数组类型
unnest(ARRAY[1,2],ARRAY['foo','bar','baz'])1 foo 2 bar NULL baz 说明 在 string_to_array 函数中，如果分隔符参数是NULL，输入字符串中的每个字符将在结果数组中变成独立的元素。如果分隔符是一个空白字符串，那么整个输入字符串将变为...
CONCAT
将多个ARRAY数组中的所有元素连接在一起，生成一个新的ARRAY数组，或将多个字符串连接在一起，生成一个新的字符串。命令格式 array<T>concat(array<T><a>,array<T><b>[,.])string concat(string,string[,.])参数说明 a、b：必填。ARRAY数组...
数组类型
array_dims-[1:3](1 row)当两个具有相同维度数的数组被串接时，其结果保留左操作数的外维度的下界下标。结果将是一个数组，它由左操作数的每一个元素以及紧接着的右操作数的每一个元素。例如：SELECT array_dims(ARRAY[1,2]|ARRAY[3,4,5]);...
FILTER
将ARRAY数组 a 中的元素利用 func 进行过滤，返回一个新的ARRAY数组。命令格式 array<T>filter(array<T><a>,function,boolean>)参数说明 a：必填。ARRAY数组。array中的 T 指代ARRAY数组元素的数据类型，数组中的元素可以为任意类型。func...
ARRAY_MAX
计算ARRAY数组 a 中的最大元素。命令格式 T array_max(array<T><a>)参数说明 a：必填。ARRAY数组。array中的 T 指代ARRAY数组元素的数据类型。数组中的元素可以为如下类型：TINYINT、SMALLINT、INT、BIGINT FLOAT、DOUBLE BOOLEAN DECIMAL...
ARRAY_MIN
计算ARRAY数组 a 中的最小元素。命令格式 T array_min(array<T><a>)参数说明 a：必填。ARRAY数组。array中的 T 指代ARRAY数组元素的数据类型。数组中的元素可以为如下类型：TINYINT、SMALLINT、INT、BIGINT FLOAT、DOUBLE BOOLEAN DECIMAL...
ARRAY_EXCEPT
找出在ARRAY数组 a 中，但不在ARRAY数组 b 中的元素，并去掉重复的元素后，返回新的ARRAY数组。命令格式 array<T>array_except(array<T><a>,array<T><b>)参数说明 a、b：必填。ARRAY数组。array中的 T 指代ARRAY数组元素的数据类型，数组中...
ARRAY_DISTINCT
去除ARRAY数组 a 中的重复元素。命令格式 array<T>array_distinct(array<T><a>)参数说明 a：必填。ARRAY数组。array中的 T 指代ARRAY数组元素的数据类型，数组中的元素可以为任意类型。返回值说明 返回ARRAY类型。返回规则如下：新ARRAY数...
内建函数概述
COUNT 计算窗口中的记录数。MIN 计算窗口中的最小值。MAX 计算窗口中的最大值。AVG 对窗口中的数据求平均值。SUM 对窗口中的数据求和。MEDIAN 计算窗口中的中位数。STDDEV 计算总体标准差。是STDDEV_POP的别名。STDDEV_SAMP 计算样本标准差...
ARRAYS_ZIP
合并多个给定数组并返回一个结构数组，其中第N个结构包含输入数组的所有第N个值。命令格式 array,U,.>>arrays_zip(array<T><a>,array<U><b>[,.])参数说明 a、b：必填。ARRAY数组。array及 array中的 T 和 U 指代ARRAY数组元素的数据类型，...
用户画像分析概述
bit_construct 函数：用于对表达求值并存储在响应位数组中，比如对SQL中的a、b两个条件，计算结果分别是[1,0],[0,0],[0,1].bit_or 函数：用于将两个位数组按位进行或运算，用来聚合uid上满足的条件集合。bit_match：用于判断位数组是否...
列存索引如何实现高效数据过滤
当一个元素被添加到过滤器中时，哈希函数将元素映射到比特数组中的几个位置，并将相应的比特设置为1。当检查一个元素是否在过滤器中时，哈希函数再次应用于该元素，如果所有相应的比特位都是1，则该元素可能在集合中。然而，如果任何一个...
WAF连接源站服务器超时
4.初步判断为源站有配置访问控制规则，拦截了这个回源地址的请求。解决方案：SLB访问控制白名单、ECS实例的安全组规则、防火墙安全策略或Iptables规则放行WAF回源地址段。原因二：后端ECS性能或源站服务器性能瓶颈 排查步骤如下：1.排查...
消息过滤
云消息队列 RocketMQ 版 主要解决的单个业务域即同一个主题内不同消息子集的过滤问题，一般是基于同一业务下更具体的分类进行过滤匹配。如果是需要对不同业务域的消息进行拆分，建议使用不同主题处理不同业务域的消息。功能概述 消息过滤...
CPU使用率高排查方法
参考以下命令，查询具备一定规模数据量（元组约为10万个）且使用全表扫描获取到的元组数量最多的5张表。SELECT*FROM pg_stat_user_tables WHERE n_live_tup>100000 AND seq_scan>0 ORDER BY seq_tup_read DESC LIMIT 5;定位长时间执行不...
java_lang_ArrayStoreException
问题分析 这是数组存储异常，当试图将类型不兼容类型的对象存入一个 Object[]数组时将引发异常。解决方案 当试图将类型不兼容类型的对象存入一个 Object[]数组时将引发异常，建议根据堆栈信息修改存储对象类型。代码示例 class Father{} ...
订阅者最佳实践
消费位点 每个Topic会有多个分区，每个分区会统计当前消息的总条数，这个称为最大位点MaxOffset。云消息队列 Kafka 版 Consumer会按顺序依次消费分区内的每条消息，记录已经消费了的消息条数，称为消费位点ConsumerOffset。剩余的未消费的...
Proxima向量计算
Proxima与Hologres概念对照 Proxima概念 Hologres中的概念 特征向量 数组类型Array，仅支持固定长度数组 向量索引 一种特殊类型的Index，当前仅支持KNN/RNN的Graph索引 距离计算 一种类型的UDF:proxima_distance()每种距离计算对应一个UDF ...
通过DaemonSet方式采集Kubernetes容器文本日志
容器发现 Logtail容器采集其他容器的日志，必须发现和确定哪些容器正在运行，这个过程称为容器发现。在 容器发现阶段，Logtail容器不与Kubernetes集群的kube-apiserver进行通信，而是直接和节点上的 容器运行时守护进程（Container Runtime...
Logview诊断实践
要解决这个问题，可以考虑先将右表的行做聚合，变成两行数据，这样Join的结果就不会膨胀了。由于Grouping Set导致的数据膨胀。Grouping Set操作会有一个扩展过程，输出数据会按照Group数倍增。目前的plan没有能力适配Grouping Set并做下游...
数据倾斜调优
数据倾斜示例 在下面这个表中，eleme_uid 中存在很多热点数据，容易发生数据倾斜。SELECT eleme_uid,.FROM(SELECT eleme_uid,.FROM)t1 LEFT JOIN(SELECT eleme_uid,.FROM)t2 on t1.eleme_uid=t2.eleme_uid;解决方案。可以通过如下四种方法...
实时同步任务延迟解决方案
确认造成延迟问题在同步任务的读端还是写端 如果是在DataStudio创建的实时同步任务，您需要在 运维中心>实时任务运维>实时同步任务 界面单击运行中的任务名称，弹出任务运行详情对话框。详情请参见 实时同步任务运行与管理。在任务运行详情...
混合检索使用指南
半结构化字段在混合检索中的使用 假设某证券公司有一个股票分析文章的文本库 stock_analysis_chunks，这个文本库主要包括以下字段：字段 类型 说明 id serial 编号。chunk varchar(1024)股票分析文章切块后的文本块。release_time ...
离线同步常见问题
读取Loghub字段映射时读到的字段不符合预期 读取kafka配置了endDateTime来指定所要同步的数据的截止范围，但是在目的数据源中发现了超过这个时间的数据 Kafka中数据量少，但是任务出现长时间不读取数据也不结束，一直运行中的现象是为什么...
交叉表
联动 设置该选项后，单击仪表板中某个图表中的区域或字段时，仪表板中和这个图表相关的其他图表的内容会发生联动变化。具体设置请参见 联动设置与展示。跳转 设置该选项后，单击仪表板中某个图表中的字段时，会跳转到与被单击部分相关联的...
OOM常见问题排查指南
如下图所示，执行计划中 Hash(cost=727353.45.627353.35,rows=970902134 width=94)即为build side，rows=970902134 就是构建Hash表的数据量，若是实际表数据量比这个少，说明Hash表预估不准确。解决方法如下。查看子查询的表是否更新统计...
组件参考：所有组件汇总
序列标注训练（MaxCompute）（即将下线）该组件是将输入序列的每个TOKEN作为一个多分类问题，采用Google原论文中的序列标注方法，实现对输入序列TOKEN进行分类，通常用于分词、词性标注和命名实体识别等。文本摘要训练 该组件旨在从冗长、...
概览
Flink全托管 Hologres Connector已知缺陷和修复版本 等级 缺陷描述 影响版本 修复版本 解决方法 P0 通过FixedFE（对应Connector中的 jdbc_fixed 模式）写入JSON或JSONB类型数据到Hologres时，如果数据源有不合法的JSON或JSONB字段，会导致...
MySQL分库分表同步至Hologres（方案1.0）
为了便于在Hologres表里区分某条记录属于源端哪个物理库、物理表，则需要在Hologres表中添加上三个附加字段（src_datasource、src_database、src_table），标识某条记录的来源数据源实例、数据库以及表，这三个附加字段和物理表中的主键在...
向量计算使用指南
Hologres中的向量计算功能可以应用于相似度搜索、图像检索、场景识别等多种场景。通过灵活应用向量计算，可以提升数据处理和分析的效果，并实现更精准的搜索和推荐功能。本文为您介绍在Hologres中使用Proxima进行向量计算的方法及完整示例...
测试分析及调优
分析问题 当确定了问题之后，我们要明确这个问题影响的是响应时间吞吐量，还是其他问题？是多数用户还是少数用户遇到了问题？如果是少数用户，这几个用户与其它用户的操作有什么不同？系统资源监控的结果是否正常？CPU的使用是否到达极限？...
distinct子句
distinct uniq插件 如上面描述，如果reserved=false情况下，会导致搜索结果中的total及viewtotal不准确，如果用户需要依赖于这个值进行翻页或者其他处理，则会有问题。为此，系统提供了distinct uniq的插件来解决在dist_times:1,dist_count...
distinct子句
distinct uniq插件 如上面描述，如果reserved=false情况下，会导致搜索结果中的total及viewtotal不准确，如果用户需要依赖于这个值进行翻页或者其他处理，则会有问题。为此，系统提供了distinct uniq的插件来解决在dist_times:1,dist_count...
DLA Lakehouse实时入湖
DLA Lakehouse实时入湖方案利用数据湖技术，重构数仓语义；分析数据湖数据，实现数仓的应用。本文以RDS MySQL数据源为例介绍了RDS MySQL从入湖到分析的操作步骤。背景信息 数据湖分析（Data Lake Analytics）是⽬前炙⼿可热的⽅向，主要是...
通知策略最佳实践
通知策略的数量原则上与不同的通知对象群体数对应，先按照不同的通知对象群体创建对应的通知策略，然后设置事件匹配规则来匹配想要发送给这个群体的事件。当使用钉钉群、企业微信或者飞书等IM工具作为告警接收平台时，推荐使用IM机器人的...
- 产品推荐
- 这些文档可能帮助您