新建实时元表规则

实时多链路对比 高可用场景下,需要构建多条链路,以便数据出现异常时,能够及时切换。对于多链路之间的数据计算进度监控则可以发现一些数据滞留、统计偏差问题,提升实时数据质量 稳定性 实时统计值检测 实时数据为指标值或可统计数据时,...

通过Logstash导入数仓版

更多参数配置:max_flush_exceptions:当写入数据出现异常时,设置最大重试次数,默认值100。skip_exception:设置是否跳过异常,默认为FALSE,表示出现异常时将重试直到到达最大重试次数 max_flush_exceptions,如果仍然失败,则同步程序...

企业版和标准版功能对比

自治服务开启后,DAS会在数据出现异常时,自动进行根因分析,给出优化或止损建议,并自动进行优化或止损操作(需经您授权后才会开启优化操作)。支持 支持 会话管理 PolarDB MySQL版 的一键诊断融合了DAS部分功能,您可以通过其中的会话...

实例告警

及时发现数据库异常是数据库日常运维的重要...当数据出现异常情况或达到预设的告警阈值时,系统会立即通知设定的告警联系人,以帮助您及时发现数据库异常并维护数据库的稳定性。操作步骤 为实例配置警规则和告警模板,详情请参见 配置告警。

实例告警

数据出现异常情况或达到预设的告警阈值时,系统会立即通知设定的告警联系人,以帮助您及时发现数据库异常并维护数据库的稳定性。操作步骤 登录 DAS控制台。在左侧导航栏中,单击 实例监控。找到目标实例,单击实例ID,进入目标实例详情...

组件参考:所有组件汇总

异常检测 局部异常因子异常检测 该组件是根据数据样本的局部异常因子值(Local Outlier Factor,LOF)判断样本是否异常。IForest异常检测 该组件使用sub-sampling算法,降低了算法的计算复杂度,可以识别数据中的异常点,在异常检测领域有...

使用创建反向任务功能

请根据业务数据出现异常后的预估恢复时间,合理设置数据库Binlog的保存时间。若原实例为Serverless实例,则创建的反向实例的计费方式将为按量付费,且规格为 micro;若原实例的计费方式为包年包月或按量付费,则创建的反向实例的计费方式...

异常检测

及时发现数据库的异常问题是数据库日常运维的重点。数据库自治服务DAS提供异常检测功能,基于...相关文档 您可以利用DAS的自治功能,在数据出现异常时进行自动处理。自动SQL限流 自动SQL优化 自动性能扩展 自动空间扩展 空间碎片自动回收

一键诊断

自治服务开启后,DAS会在数据出现异常时,自动进行根因分析,给出优化或止损建议,并自动进行优化或止损操作(需经您授权后才会开启优化操作)。详情请参见 自治中心。会话管理:您可以通过会话管理功能查看目标实例的会话详情和会话统计...

文档修订记录

DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务,需先将已创建的数据源或集群绑定至数据开发...

告警服务

数据出现异常情况或达到预设的告警阈值时,系统会立即通知设定的告警联系人,以帮助您及时发现数据库异常并维护数据库的稳定性。背景信息 了解以下概念,能帮助您更好地配置告警:告警规则:定义了触发告警的监控项、触发次数、告警...

使用限制

您在使用数据湖构建(Data Lake Formation,简称DLF)控制台和接口时,产品做了如下限制,请在使用时注意不要超过相应的限制值,以免出现异常数据湖元数据 限制项 用户配额 单表QPS 500 单表分区数量 100万 数据湖入湖预处理作业 限制项 ...

分段多项式回归

参数说明 IN端口 参数名 参数描述 是否必填 输入数据类型 数据源类型 特征变量 配置模型特征列 是 整数或浮点数 说明 若存在数值数据,则会抛出异常。CSV组件。IGateOffline组件。平台上其他数据处理组件。按照平台组件开发的自定义组件...

高斯过程回归

是 整数或浮点数 说明 若存在数值数据,则会抛出异常。CSV组件。IGateOffline组件。平台上其他数据处理组件。按照平台组件开发的自定义组件。目标变量 配置模型目标变量。是 整数或浮点数 说明 若存在数值数据,则会抛出异常。CSV组件...

逻辑回归

参数说明 IN端口 参数名 参数描述 是否必填 输入数据类型 数据源类型 特征变量 配置模型特征列 是 整数或浮点数 说明 若存在数值数据,则会抛出异常。CSV组件。IGateInOffline组件。平台上其他数据处理组件。按照平台规范开发的自定义...

数据管理DMS中出现“Data truncated for column”的...

问题描述 在数据管理DMS中执行DDL语句进行变更时,系统提示以下错误。...请您在操作前,确保数据已经备份成功,避免出现数据丢失或异常。您还可以通过阿里云数据库备份DBS提前备份您的数据库,详情请参见 什么是DBS。适用于 数据管理DMS

批量创建质量规则

异常数据归档表:可以将异常数据存储到表中,后续可以直接读表进行数据分析或数据下载。自定义存储的大小和生命周期可以由您进行统一管理,有更高的灵活性,一个规则单次最多归档10000条。说明 在归档表中针对本次校验的异常数据进行下载,...

查看异常告警

行为异常正常的数据操作行为。例如:登录密码连续错误、登录使用终端异常等。自定义异常:根据您自定义的检测模型检测异常事件并上报告警。风险等级说明 异常事件的风险等级是根据命中事件的敏感等级按照一定规则确定的,属于同一事件...

滤波

是 整数或浮点数 说明 若存在数值数据,则会抛出异常 不限 OUT端口-输出参数 参数名 参数描述 输出数据类型 OUT 滤波后的输出,与IN端口配置的输入参数一致。浮点数 其他参数 参数名 参数描述 是否必填 参数默认值 参数范围 滤波类型 ...

Tair Proxy特性说明

在某些极端场景下某个数据分片出现异常后,对数据的影响及优化方案如下。场景 影响与优化方案 图 2.多Key命令场景 影响:客户端通过4个连接发送4个请求,当数据分片2处于异常状态时,仅有请求1(GET Key1 可正常读取到数据),其他请求会...

Redis Proxy特性说明

在某些极端场景下某个数据分片出现异常后,对数据的影响及优化方案如下。场景 影响与优化方案 图 2.多Key命令场景 影响:客户端通过4个连接发送4个请求,当数据分片2处于异常状态时,仅有请求1(GET Key1 可正常读取到数据),其他请求会...

核心自治技术案例解析

如下图为双11期间自动SQL限流的实际案例:某自治服务接入实例于2020年11月5日12点31分,活跃会话数和CPU开始骤然飙升,DAS异常检测中心于12点33分确定此次飙升为一次数据异常抖动尖刺,触发SQL自动限流根因诊断,12点34分诊断完成,...

功能特性

数据迁移 数据迁移功能帮助您实现同构或异构数据源之间的数据迁移,适用于数据上云迁移、阿里云内部跨实例数据迁移、数据库拆分扩容等业务场景 功能集 功能 功能描述 参考文档 同构迁移 逻辑迁移 支持同构数据库间的数据迁移。自建MySQL...

常见错误处理方法

连接异常 连接异常即应用程序或者客户端与数据库的连接出现异常,例如已经创建的连接,提示连接不存在或连接超时,无法与数据库实例建立连接等。连接异常经常发生在网络闪断,或者数据库服务重启时,您需要在应用程序中就此类异常,添加重...

使用须知

问题描述:某些情况下,Phoenix对有些索引的主表回查会存在bug,在执行查询的时候,会出现异常。解决方法:通过冗余全部列,避免回查主表。RegionServer OOM的情况。问题描述:LookupJoin会在ScanRpc请求中发起Get请求,这个Get请求的...

泊松分布拟合

是 整数或浮点数 说明 若存在数值数据,则会抛出异常。CSV组件。igateoffline组件。平台上其他数据处理组件。按照平台组件开发的自定义组件。OUT端口-输出参数 参数名 参数描述 输出数据类型 概率分布 输出拟合变量拟合后的概率分布。...

高斯分布拟合

是 整数或浮点数 说明 若存在数值数据,则会抛出异常。CSV组件。igateoffline组件。平台上其他数据处理组件。按照平台组件开发的自定义组件。OUT端口-输出参数 参数名 参数描述 输出数据类型 概率分布 输出拟合变量拟合后的概率分布 浮点...

导入与导出

数据同步过程中,可以修改源表中的字段类型,目前仅支持整型数据类型之间、浮点数据类型之间的列类型更改,并且只能将取值范围小的数据类型更改为取值范围大的数据类型,或者将单精度数据类型更改为双精度数据类型。整型数据类型:支持...

卡方分布拟合

是 整数或浮点数 说明 若存在数值数据,则会抛出异常。CSV组件。igateoffline组件。平台上其他数据处理组件。按照平台组件开发的自定义组件。OUT端口-输出参数 参数名 参数描述 输出数据类型 概率分布 输出拟合变量拟合后的概率分布。...

内置检测模型说明

数据安全中心DSC(Data Security Center)通过内置的行为异常自学习模型和流转异常自学习模型,能够高效地分析审计日志,以识别与敏感数据相关的异常行为及攻击行为。当这些模型检测到潜在的风险活动时,会自动触发告警。支持的数据库 RDS...

相关性分析

皮尔逊相关系数:用于衡量两个数据集是否在一条线上面,即针对线性数据的相关系数计算,针对非线性数据便会有误差。肯德尔相关系数:用于反映分类变量的相关性,即针对无序序列的相关系数计算,非正太分布的数据。斯皮尔曼相关系数:用于非...

错误码

说明:当分库包含的数据节点出现访问异常,并且分库下没有其他可用数据节点时,PolarDB-X 会将分库置于fail-fast状态并提示PXC-4200错误。通常该错误是由于数据节点故障导致的。请根据包含的数据节点异常信息定位和解决问题。当故障数据...

单值查询数据

算子 描述 插值方法 avg 平均值 线性插值(斜率拟合)count 数据点数 插0 mimmin 最小值 插最大值 mimmax 最大值 插最小值 min 最小值 线性插值 max 最大值 线性插值 none 不做计算 插0 sum 求和 线性插值 zimsum 求和 插0 Filters说明 有...

多值数据查询

多值模型数据查询 mquery 请求路径和方法 请求路径 请求方法 描述/api/mquery POST 查询数据 重要 多值模型数据和原来写入的单值模型数据不兼容。单值模型数据需要通过原有的/api/put 接口进行写入。同时多值写入数据需要通过/api/mquery ...

使用数据订阅SDK出现“client partition is empty,...

问题描述 数据订阅SDK...如果数据订阅已经正常启动,则需要排查是否有多个Client消费数据,如有多个,只有正在订阅数据的Client异常或是出现网络连接异常时后,Backup才可进行数据订阅,详情请参考 数据订阅SDK容灾。适用于 数据传输服务 DTS

数据安全监控和审计

数据安全监控和审计有利于事前发现风险和事后审计,面向云的数据安全监控和审计需要考虑的维度如下:安全监控的维度 监控特征 特征描述 流转异常 异常地理位置下载敏感数据 来自异常地理位置的数据下载可能是由于账号访问权限被外部攻击者...

发现和处理异常告警

行为异常正常的数据操作行为。例如:登录密码连续错误、短时间内大量删除数据等。自定义异常:根据您自定义的检测模型检测异常事件并上报告警。风险等级说明 异常事件的风险等级是根据命中事件的敏感等级按照一定规则确定的,属于同一...

线性回归

线性回归模型具有简单、易于理解和解释的特点,同时可以通过多项式扩展等方法处理非线性数据,具有较高的泛化能力和预测准确率。但是,线性回归模型对于离群点、噪声数据和非线性关系的数据比较敏感,需要进行特征标准化和正则化处理。组件...

线性回归

参数说明 IN端口 参数名 参数描述 是否必填 输入数据类型 数据源类型 特征变量 配置模型特征列 是 整数或浮点数 说明 若存在数值数据,则会抛出异常。CSV组件。IGateOffline组件。平台上其他数据处理组件。按照平台组件开发的自定义组件...

时序异常检测

本文介绍异常检测算法的概念和时序异常检测的语法。引擎与版本 时序异常检测仅支持时序引擎。无版本要求。使用限制 时序异常检测必须和 SAMPLE BY 语句搭配使用。功能简介 时序异常检测用于检测指定时间线上异常点的值,支持阿里达摩院自研...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 云数据库 Redis 版 云数据库 RDS 数据传输服务 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用