数据质量:全流程质量监控

DataWorks的全流程数据质量监控功能为您提供35种预设表级别、字段级别和自定义的监控模板。数据质量帮助您第一时间感知到源端数据的变更与ETL(Extract Transformation Load)中产生的脏数据,自动拦截问题任务,有效阻断脏数据向下游蔓延...

服务监控概述

完成模型开发和部署后,您可以在多方安全建模控制台,配置模型服务的监控采集规则。节点中内置了采集统计值模块,可以在不泄露原始数据的前提下,向控制台...服务监控流程如下:各流程的详细配置请参见以下文档:配置监控信息 查看报表信息

资产质量概述

数据质量的功能包括质量规则配置、质量监控、调度配置、智能报警、校验治理等。前提条件 已购买资产质量增值服务,详情请参见 开通Dataphin。背景信息 面对各行各业日趋强烈的大数据建设、管理及应用的诉求,Dataphin应用场景的多样性及...

资产质量概述

数据质量的功能包括质量规则配置、质量监控、调度配置、智能报警、校验治理等。前提条件 已购买资产质量增值服务并且当前租户已开通资产质量模块。背景信息 面对各行各业日趋强烈的大数据建设、管理及应用的诉求,Dataphin应用场景的多样性...

06物理表质量监控明细

物理表监控明细为您展示物理表的质量监控报告详情,包含质量评分、质量评分规则统计、表质量评分详情、字段质量详情,通过查看物理表维度最新质量评估结果,方便研发运维人员第一时间发现并定位物理表质量问题。本文介绍如何查看物理表监控...

【漏洞预警】Apache Log4j2远程代码执行漏洞

Logstash修复流程 通过控制重启实例。在实例的 基本信息 页面,单击右上角的 重启,选择 实例重启,变更完成后即可完成漏洞修复。具体操作请参见 重启实例或节点。警告 Logstash无须进行蓝绿变更。由于蓝绿变更会更换节点服务器,因此...

配置数据质量监控

基于用户画像分析加工流程,汇总质量监控规则如下:表名 需求明细 ods_raw_log_d 对每日同步的原始日志数据进行表数据非0监控,避免后续无效加工,及时止损。ods_user_info_d 对每日同步的用户信息数据进行表行数非0校验(强规则)和业务...

配置数据质量监控

基于用户画像分析加工流程,汇总质量监控规则如下:表名 需求明细 ods_raw_log_d 对每日同步的原始日志数据进行表数据非0监控,避免后续无效加工,及时止损。ods_user_info_d 对每日同步的用户信息数据进行表行数非0校验(强规则)和业务...

数据质量规则配置流程

本文为您介绍数据质量监控规则的配置流程及生效逻辑,以及规则列表的相关操作。规则配置流程 您可基于表配置单个表的数据质量监控规则,也可基于模板,批量配置多个表的数据质量监控规则,具体如下。基于表配置数据质量监控规则(单个配置...

重启实例或节点

本文介绍如何通过控制重启实例或节点。前提条件 实例的 状态 为 正常(绿色),且资源使用率不是很高。说明 资源使用率可在 集群监控 页面查看,例如 节点磁盘使用率、节点HeapMemory使用率、节点CPU使用率 和 节点load_1m。详细信息,请...

Fluid监控大盘参数说明

Fluid控制器详细指标 Runtime控制器处理耗时 表示在一个监控周期内,Runtime控制器处理对应Runtime资源的耗时,以分位数显示。Runtime控制器处理失败数量 表示在一个监控周期内,Runtime控制器处理对应Runtime资源时的失败类型和次数,失败...

耗资源用户处理流程

为了保证您的站点能够安全、稳定的运行,阿里云的监控系统会实时关注您的站点运行状态。当您的站点出现因过度消耗资源导致运行速度下降或严重影响服务器性能时,系统会根据影响程度采取不同的处理方式以保证网站正常运行。耗资源即程序异常...

监控指标

如果您需要了解流程执行情况的统计指标,您可以登录 云监控控制台 查看。目前已提供的指标在流程维度按分钟聚合,描述某地域某个流程的执行情况。具体指标如下。指标名称 单位 指标说明 流程启动次数 count/min 描述一分钟内某个流程的启动...

操作流程

新建数据元 通过新建数据元,配置数据元的类型、长度、质量校验函数和引用数据字典,为模型标准化设计及数据治理过程中的质量监控提供规则依据。具体操作,请参见 新建数据元。采用维度+指标的数据标准管理 通常使用维度建模方式创建的数仓...

操作流程

新建数据元 通过新建数据元,配置数据元的类型、长度、质量校验函数和引用数据字典,为模型标准化设计及数据治理过程中的质量监控提供规则依据。具体操作,请参见 新建数据元。采用维度+指标的数据标准管理 通常使用维度建模方式创建的数仓...

Kibana FAQ

可能原因 解决方法 存在多个Kibana系统索引或者数据结构发生了变化 删除.kibana 开头的相关索引,并通过控制重启Kibana节点,或者重启Elasticsearch实例,重启操作请参见 重启实例或节点。警告 删除.kibana 索引后,会丢失Kibana中已创建...

工艺流程页面模板

工艺流程页面模板是组态编辑器中专门为工艺流程监控设计的页面模板。该模板包含了工艺流程监控常用的数据展示方式和功能模块,可以帮助用户快速地搭建工艺流程监控相关的应用场景。使用工艺流程监控页面模板可以遵循以下步骤:登录组态编辑...

重启实例或节点

本文介绍如何通过控制重启阿里云Elasticsearch实例或节点。前提条件 确保实例的 状态 为正常(绿色)、索引至少包含1个副本、资源使用率不是很高。重要 对于多可用区实例,在变更时,需要确保集群中任意一个索引的副本数都小于可用区数。...

GPU监控

memory_usedutilization userId、instanceId、gpuId(Agent)GPU维度GPU功率 W gpu_power_readings_power_draw userId、instanceId、gpuId 查看GPU的监控数据 登录 云监控控制台。在左侧导航栏,选择 云资源监控>主机监控。在 主机监控 ...

使用流程

本文介绍使用TPP个性化算法开发的流程,包括创建实例、开发代码、创建和发布方案、创建和部署场景、访问场景、查看服务监控流程说明如下:购买和创建实例 用户购买TPP实例,下单后,tpp自动拉起服务集群。开发方案代码 用户编写TPP代码...

GPU监控

memory_usedutilization userId、instanceId、gpuId(Agent)GPU维度GPU功率 W gpu_power_readings_power_draw userId、instanceId、gpuId 查看GPU的监控数据 登录 云监控控制台。在左侧导航栏,选择 云资源监控>主机监控。在 主机监控 ...

功能特性

Serverless 工作流 功能集 功能 功能描述 参考文档 基础功能建设 流程(Flow)云工作流使用YAML格式的流程定义语言来描述和定义流程。执行流程时,云工作流服务会根据流程定义解析并驱动执行相关状态流转。一个流程通常包含若干状态(State...

通过企业监控大盘实现本地日志监控

登录 云监控控制台。在左侧导航栏,选择 云资源监控>应用分组。在 应用分组 页签,单击左上角的 创建应用分组。在 创建应用分组 面板,选择 创建实例方法 为 手动创建,输入 应用分组名称,打开 初始化安装监控插件 开关,选择 报警联系人...

数据质量管理流程

数据质量的管理流程包括业务数据资产定级、加工卡点、风险点监控和及时性监控,您可以构建属于自己的数据质量保障体系。数据质量管理的流程图如下。数据质量管理的流程说明如下:分析业务场景,对数据流转链路上的整个依赖关系,进行资产...

修改实例维护属性

例如,某台实例处于自动重启恢复流程时,修改实例维护属性无法阻止实例重启或改为其他动作。实例维护属性 相关的系统事件 适用实例类型 说明 自动重启恢复(默认)SystemMaintenance.Reboot SystemFailure.Reboot 所有支持系统事件的实例。...

数据质量管理流程

数据质量的管理流程包括业务数据资产定级、加工卡点、风险点监控和及时性监控,您可以构建属于自己的数据质量保障体系。数据质量管理的流程图如下。数据质量管理的流程说明如下:分析业务场景,对数据流转链路上的整个依赖关系,进行资产...

如何处理无法在主机监控中删除非阿里云主机的问题?

登录 云监控控制台。在左侧导航栏,单击 主机监控。在 主机监控 页面,单击目标非阿里云主机对应 操作 列的 图标,选择 删除主机。确认删除非阿里云主机。在非阿里云主机上卸载云监控插件。具体操作,请参见 卸载插件。相关文档 如何卸载云...

通过移动端探测目标站点的网络质量

操作步骤 登录 云监控控制台。在左侧导航栏,选择 网络分析与监控>站点监控。在 监控任务 页签,单击 创建任务。在 创建任务 页面,先选择 移动端(Mobile),再设置移动端站点监控任务的相关信息。基本信息 任务类型 为 HTTP(S)参数 ...

通过PC端探测目标站点的网络质量

操作步骤 登录 云监控控制台。在左侧导航栏,选择 网络分析与监控>站点监控。在 监控任务 页签,单击 创建任务。在 创建任务 页面,先选择 PC端(PC),再设置PC端站点监控任务的相关信息。基本信息 任务类型 为 HTTP(S)参数 描述 任务...

安装和卸载云监控插件

自动安装(推荐)通常情况下,推荐您通过云监控控制台上的相关功能自动为阿里云主机和非阿里云主机安装云监控插件。登录 云监控控制台。在左侧导航栏,选择 云资源监控>主机监控。在 主机监控 页面,选中待安装或升级插件的阿里云主机,...

弹性伸缩中创建的报警任务提示数据不足

以 自动创建 页签下的ECS实例为例,如下图所示:登录 云监控控制台。在左侧导航栏,单击 主机监控。在搜索框中输入ECS服务器的ID,查看云监控插件是否安装。如果 argusagent状态 显示为 图标,表示尚未安装云监控插件,您需要单击 或 图标...

数据质量管理流程

本文为您介绍数据质量管理概念、数据管理流程。数据质量管理是通过划分数据资产等级和分析元数据的应用链路,对不同资产等级的数据采取相对应的质量管理方式。数据质量管理流程图如下。数据管理流程说明如下:分析业务场景,根据应用的影响...

非阿里云主机如何通过Nginx代理服务器上报监控数据?

cloudmonitorCtl.sh restart 步骤三:查看非阿里云主机的监控数据 登录 云监控控制台。在左侧导航栏,单击 主机监控。在 主机监控 页面,单击目标主机的实例名称链接,或单击目标主机对应 操作 列的 监控图表。查看非阿里云主机的监控数据...

配置X-Pack监控

注意 重启完成后,才可在Kibana控制台上查看到Logstash监控信息。在 集群监控 页面,单击 前往Kibana控制台管理。输入用户名和密码,登录Kibana控制台。具体操作,请参见 登录Kibana控制台。根据提示进入主页,在左侧导航栏,单击 ...

EMR Kafka ECS磁盘事件处理

如果ECS修复磁盘事件流程中,要求重启ECS,则可以按照如下步骤重启:在EMR控制台停止故障Broker节点服务。重启故障ECS实例。在ECS修复磁盘事件流程中,单击 重启。在EMR控制台启动故障Broker节点服务。观察Broker节点状态是否处于正常状态...

如何安装和配置Windows Exporter

修改Config后,您需要执行命令 sc stop windows_exporter&sc start windows_exporter 或者通过Windows服务控制台,重启Exporter Service。步骤三:配置ECS的标签 可观测监控 Prometheus 版 可以通过识别ECS的标签实现服务发现(Service ...

如何安装和配置Windows Exporter

修改Config后,您需要执行命令 sc stop windows_exporter&sc start windows_exporter 或者通过Windows服务控制台,重启Exporter Service。步骤三:配置ECS的标签 可观测监控 Prometheus 版 可以通过识别ECS的标签实现服务发现(Service ...

什么是用户体验监控

ARMS 用户体验监控(Real User Monitoring,RUM)专注于对Web场景、App移动应用场景和小程序场景的监控,以用户体验为切入点,完整再现用户操作过程,从页面打开速度(测速)、请求服务调用(API)和故障分析(JS错误、网络错误等)稳定性...

操作流程

通过操作流程图及说明,您可以...查看物理表监控明细 通过查看物理表的质量监控报告详情的最新质量评估结果,包含表质量评分详情、字段质量详情等,方便研发运维人员第一时间发现并定位物理表质量问题。具体操作,请参见 查看物理表监控明细。

操作流程

通过操作流程图及说明,您可以...查看物理表监控明细 通过查看物理表的质量监控报告详情的最新质量评估结果,包含表质量评分详情、字段质量详情等,方便研发运维人员第一时间发现并定位物理表质量问题。具体操作,请参见 查看物理表监控明细。
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
机器人流程自动化 云监控 应用实时监控服务 轻量应用服务器 视图计算 弹性公网IP
新人特惠 爆款特惠 最新活动 免费试用