通用数据开发
通常数据开发的总体流程包括数据产生、数据收集与存储、数据分析与处理、数据提取和数据展现与分享。...数据展现与分享：数据提取成功后，可以通过报表、地理信息系统等多种展现方式，展示与分享大数据分析、处理后的成果。
常见问题
only问题的排查与处理方法 集群负载不均问题的分析方法及解决方案 通过手动迁移shard均匀分布热点数据的解决方案 指标含义与异常处理建议 fielddata内存使用率高问题的排查与处理方法 重启变更报错：集群状态不健康或存在close索引，不能...
产品简介
EMR基于开源的Apache Hadoop和Apache Spark，让您可以方便地使用Hadoop和Spark生态系统中的其他周边系统分析和处理数据。EMR还可以与阿里云其他的云数据存储系统和数据库系统（例如，阿里云OSS和RDS等）进行数据传输。产品介绍 阿里云EMR...
产品概述
EMR基于开源的Apache Hadoop和Apache Spark，让您可以方便地使用Hadoop和Spark生态系统中的其他周边系统分析和处理数据。EMR还可以与阿里云其他的云数据存储系统和数据库系统（例如，阿里云OSS和RDS等）进行数据传输。阿里云EMR提供了on ...
ECS系统事件汇总
您可以通过系统事件获取ECS资源的风险和异常信息，例如 某一实例到期、实例因底层升级需迁移或因系统维护重启了某一实例等，然后及时响应和处理系统事件，避免因ECS资源可用性或性能受损而影响业务。本文汇总了云服务器ECS支持的系统事件...
事件流概述
随着越来越多的数据源持续、快速地产生数据，此类流式数据急需被系统分析和处理。事件流适用于端到端的流式数据处理场景，对源端产生的事件实时抽取、转换和分析并加载至目标端，帮助您轻松处理流式数据。本文介绍事件流功能的应用场景、...
处置安全事件
处置安全事件 及时处理威胁分析与响应的安全事件可以提高系统的安全性，建议您及时处理风险等级为 高危 的安全事件。您可以选择手动处置或自动处置安全事件。手动处置安全事件：通过人工审核安全事件，并根据安全事件的严重性和实际情况...
容量规划服务内容说明
乙方不负责非阿里云平台以外（第三方软件、应用系统）问题处理、技术的支持和答疑工作。2.2 容量规划标准版服务范围 容量规划服务标准版内容如下：一个标准版包含预计40个工作日、3个应用(实例数不超过30)及1条测试链路以内的容量规划咨询...
应用场景
问题分析与快速定位示意图 应用性能优化 在调用关系拓扑中，可以对各个应用的调用次数以及耗时情况进行分析，找到负载较高以及负载较少的应用，从而对资源进行合理利用。调用链路聚合汇总：对所有的调用信息进行聚合汇总，对各个应用的调用...
Windows实例系统负载的查询及分析
系统内存 如果Windows实例系统内存问题，请参考 Windows系统内存分析工具的介绍。带宽使用率 如果Windows实例带宽使用率较高，请参考 Windows实例中带宽使用率较高问题的排查及解决方法。临时文件占用过多 如果Windows实例的磁盘空间不足，...
应用场景
与传统架构不同，云消息队列 Kafka 版 以及Storm、Samza、Spark等数据处理引擎的出现，就是为了更好地解决这类数据在处理过程中遇到的问题，数据处理模型能实现在数据流动的过程中对数据进行实时地捕捉和处理，并根据业务需求进行计算分析...
什么是云数据库SelectDB版
云数据库SelectDB版 是新一代实时数据仓库 SelectDB 在阿里云上的全托管服务，...日志存储与分析 将日志系统接入到 云数据库SelectDB版，实现日志的实时查询、低成本存储、高效处理，降低企业日志系统综合成本，提升日志系统的性能和可靠性。
监控与日志
您可以通过云企业网的系统事件和监控指标信息来判断系统是否按照预期运行，同时您也可以对系统事件和监控指标设置报警规则，以便在系统运行异常时，您可以收到报警通知，及时处理问题。系统事件监控 阿里云云监控服务的事件监控功能自动...
如何对JSON类型进行高效分析
PolarDB 列存索引（In Memory Column Index，IMCI）功能推出了完备的虚拟列与列式JSON功能等，可以快速处理大数据和多种数据类型（包括结构化数据与半结构化数据等），并提供高效的数据分析、查询与流计算能力，适用于数据分析、数据仓库与...
全链路专家服务内容说明
完工标准 提交《专家服务验收报告》，内容包括：阿里云资源架构分析、问题诊断分析、压测分析、最佳实践建议和解决方案等；针对相关问题的技术原理和方案赋能；以及针对相关潜在风险的评估和建议。4.服务目录 4.1 全链路专家服务包 一、全...
Windows实例通过外部访问网络不通的处理
解决方案 根据以上问题原因，此处分别介绍通过逐步排查和抓网络包分析两种处理方法。方案一：逐步实践排查 请根据实际情况，选择以下合适的排查步骤：在云安全中心中检查该ECS实例状态，确认其状态正常。检查是否针对特定网段的网络不通。...
测试分析方案报告
版本号 更新日期 触发情况 测试环境描述 对测试环境给出逻辑图描述，分析问题和风险。例如测试环境和线上环境不一致，可能导致的测试风险。测试环境在一些可能和开发公用的系统，存在的消息分发问题等。测试进入退出准则 测试进入准则，下...
应用场景
适用场景 OLAP多维分析 用户行为分析 用户画像、标签分析、圈人 高维业务指标报表 自助式报表平台 业务问题探查分析 跨主题业务分析 财务报表 系统监控分析 实时数仓 电商大促数据分析 教育行业的直播质量分析 物流行业的运单分析 金融行业...
应用场景
场景一：问题分析快速定位 在分布式场景下，服务调用错综复杂，问题分析与定位非常困难，分布式链路跟踪系统能迅速定位到有问题的服务，协助快速解决问题节点。完整的应用调用拓扑关系：自动发现该服务之前的调用以及对所有中间件的调用，...
事件管理
事件的处理与解决：事件处理人接受事件，并查看相应的告警详细信息，初步分析告警原因。在事件处理时，可查看、参考相似事件的处理方式，以便于快速解决。同时支持在处理事件时进行内容记录，便于后续的分析与参考。事件的完结与持续运营：...
监控与日志
您可以通过VPN网关的系统事件和监控指标信息来判断系统是否按照预期运行，同时您也可以对系统事件和监控指标设置报警规则，以便在系统运行异常时，您可以收到报警通知，及时处理问题。系统事件监控 阿里云云监控服务的事件监控功能自动汇集...
概述
开放平台将Quick BI报表和数据提供给第三方使用，使更多人更轻松地与数据进行交互。重要 Chrome和Edge为了治理跨顶域的用户隐私跟踪问题，计划从2024年1月4日开始 逐步弃用三方cookie。为了减少对产品嵌入场景的影响，Quick BI侧也同步做了...
一对一专家服务工作说明书
1.服务概述 一对一专家服务是为了满足客户超出基础服务范围的诉求，如用云过程中的第三方产品的安装和环境部署问题，涉及第三方软件的环境异常问题排查等，提供的限定第三方产品扩展支持服务，确保客户在用云的过程中相关问题可以及时解决...
无侵入观测概述
当流量过多或前序请求大量阻塞时，后续的请求会发生阻塞，此时传统分析手段下的Time1与Time2可能存在巨大差值，且如果埋点位置仅存在于Service B，则消耗时间可能始终处于正常状态，整个系统的瓶颈问题将被忽略。此时您可以使用无侵入监控...
离线全量Key分析
您可以通过离线全量Key分析功能来分析 Tair 的备份文件，快速发现实例中的大Key，帮助您掌握Key在内存中的占用和分布、Key过期时间等信息，为您的优化操作提供数据支持，帮助您避免因Key倾斜引发的内存不足、性能下降等问题。该功能由 ...
日志同步分析概述
Kafka实时接收到Filebeat采集的数据后，输出到Logstash中进行过滤处理，最终将满足需求的数据输出到Elasticsearch中进行分布式检索，并通过Kibana进行分析与展示。查询分析RocketMQ客户端日志 使用Beats、Elasticsearch、Logstash和Kibana...
离线全量Key分析
通过离线全量Key分析功能来分析Redis的备份文件，可以快速发现实例中的大Key，帮助您掌握Key在内存中的占用和分布、Key过期时间等信息，为您的优化操作提供数据支持，帮助您避免因Key倾斜引发的内存不足、性能下降等问题。该功能由 ...
产品架构
分布式文件系统 LDFS（Lindorm DFS，也称为Lindorm文件引擎）是面向云基础存储设施设计、兼容HDFS协议的分布式存储系统，并同时支持运行在本地盘环境，以满足部分大客户的需求，向多模引擎和外部计算系统提供统一的、与环境无关的标准接口...
可观测性能力介绍
实时Top Key统计 功能准确性高，且对性能几乎无影响，帮助您掌握Key在内存中的占用、Key的访问频次等信息，溯源分析问题，为您的优化操作提供数据支持。在控制台目标实例详情页的 CloudDBA>实时Top Key统计 页签中，进行热Key与大Key分析，...
畅捷通
日志服务帮助畅捷通运维开发团队解决了误报频繁、无法快速发现问题站点、无法快速定位异常的问题，实现了运维效率、运维成本、沟通成本等方面的改善。日志服务支撑了畅捷通所有云产品的健康稳定运行，在IT运维开发领域树立了一个标杆。公司...
可观测性能力
实时Top Key统计 功能准确性高，且对性能几乎无影响，帮助您掌握Key在内存中的占用、Key的访问频次等信息，溯源分析问题，为您的优化操作提供数据支持。在控制台目标实例详情页的 CloudDBA>实时Top Key统计 页签中，进行热Key与大Key分析，...
性能测试技术指南
瓶颈分析 分析 瓶颈定位的目的是对系统中存在的瓶颈点进行分析，为调优做准备，系统的性能瓶颈点主要分布在操作系统资源、中间件参数配置、数据库问题以及应用算法上，对于有针对性的进行调优，有利于系统性能的提升。风险 当系统的瓶颈点...
测试分析及调优
分析问题 当确定了问题之后，我们要明确这个问题影响的是响应时间吞吐量，还是其他问题？是多数用户还是少数用户遇到了问题？如果是少数用户，这几个用户与其它用户的操作有什么不同？系统资源监控的结果是否正常？CPU的使用是否到达极限？...
产品简介
基于DLA无服务器化（Serverless）数据湖分析服务与内置的Spark计算引擎，DLA Ganos打通了阿里云各个存储系统，如PolarDB、Lindorm(HBase)、OSS等，通过统一的时空数据模型与计算接口，实现对多源异构数据的一体化管理与计算，并支持进行...
应用场景
表格存储 数据湖架构能有效的解决大数据领域面临的数据存储与数据分析问题，典型应用场景包括推荐系统和舆情&风控分析场景。推荐系统 推荐系统作为当前所有业务精细化运营的主要手段，广泛应用在电商、短视频、新闻等场景，具有数据量大、...
Linux实例存在OOM问题的处理方法
概述 本文主要介绍当您的Linux实例存在OOM问题的处理方法。详细信息 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但不限于ECS、RDS）等进行配置与数据修改，...
确定需求
在基于Dataphin构建与管理企业数据中台之前，首先需要确定数仓构建的目标与需求，进行全面的业务调研。您需要了解真实的业务需求是什么，以及确定整个业务系统能解决什么问题。业务调研 充分的业务调研和需求分析是数据仓库建设的基石，...
常见问题
OSS和云监控是两个独立的产品，OSS将数据推送至云监控，由云监控产品进行分析处理。OSS控制台上看到的存储容量监控以及带宽流量监控来自于云监控产品的数据。OSS的数据推送到云监控会延迟2~3小时，同时云监控在接收OSS数据时存在窗口期，单...
基于SLS+OSS+DLA构建海量、低成本日志分析方案
方案介绍 对于数据分析人员、开发人员或者运维人员而言，日志数据对分析和诊断问题以及了解系统活动等有着非常重要的作用，日志都是其工作过程中必不可缺的数据来源。为了节约成本，通常情况下日志会被设定一定的保存时间，此类日志称之为...
安全服务
定期安全服务报告，协助客户分析问题、制定问题解决方案并解决。安全管家对服务范围内业务进行周期性的巡检，确保安全效果。安全管家将事前、事中、事后全流程跟进，从而实现更高质量的安全管理水平，降低安全事件发生率。购买安全服务 ...
- 产品推荐
- 这些文档可能帮助您