大数据分析工具的常见问题和解决方法
概述 大数据分析是阿里云用户中心与DataWorks和MaxCompute联合推出的成本分析工具，提供大数据分析能力，解决因账单过大而导致无法分析的问题，当前仍处于灰度期间。在使用大数据分析时可能会碰到DataWorks或MaxCompute的权限问题，您可以...
流数据分析相关问题
本章描述流数据分析及其任务相关的一些常见问题。查看任务运行状态 在远程控制台执行如下命令：/linkedge/gateway/build/bin/lectl sc show 系统返回类似如下内容，若 running 参数值为 true，则表示任务正在运行中。TOTALCOUNT 02=-01-ID:...
常见问题索引
移动数据分析常见问题索引 统计原理常见问题 Q1:如何识别一个用户？Q2:用户在一台设备上反复卸载并重新安装启动应用，新增用户算几个？Q3:同一个用户由老渠道升级到新渠道，是否会被算到新渠道中？Q4:什么是活跃用户？哪里可以看到下载和...
移动数据分析 SDK Android（安卓）SDK：so包加载失败...
如果遇到下面的报错：MotuCrashReporter:load motu library error.可以进行如下排查：移动分析在部分arm64-v8a设备上，导致load motu library error，目前移动分析只支持仅支持armeabi、armeabi-v7a、x86架构，以后会覆盖更多。
如何分析数据分布不均衡
本文介绍了分析和处理数据倾斜问题的方法。概述 PolarDB-X 是由阿里巴巴自主研发的PolarDB分布式版数据库，在物理资源上是由多个节点所组成的分布式集群。通过数据分区的方式，可以将数据分布到集群中的多个存储节点，发挥多个节点的存储和...
数据门户常见问题
数据门户是否支持分享和公开功能？为什么有的数据门户无法分享？如何在手机端使用子账号登录数据门户？是否支持关闭数据门户，不允许用户访问？是否支持设置数据门户的菜单权限？在数据门户中是否支持设置一级菜单？设置数据门户的菜单权限...
仪表盘
仪表盘是 数据管理DMS 数据分析的其中一种可视化应用类型，其提供自动布局和可交互能力，您可以通过使用仪表盘来进行数据分析和制作可视化报表。本文介绍仪表盘的基本概念、功能展示及操作步骤。基本概念 仪表盘集合：仪表盘集合是用户管理...
数据源常见问题
本文汇总了创建数据源的常见问题。支持哪些数据源？是否支持连接自建数据库？是否支持清除MaxCompute查询缓存？如何配置关联模型？数据源连接了本地MySQL后，是否还可以导入Excel或CSV文件作为数据源？是否支持数据清洗功能？是否支持JDBC...
账单数据订阅及查询分析
订阅成功后，账单数据将会定时同步至MaxCompute，您可使用DataWorks的数据分析功能查询并分析账单数据，将分析结果生成可视化图表卡片及报告，同时，也可将您的阿里云消费分析报告分享给其他用户。背景信息 订阅并分析账单数据前，请先了解...
产品简介
客户不仅能够对阿里云OSS、PolarDB、Lindorm（HBase）中的数据进行分析，还能将这两者之间的数据进行关联性分析，解决了客户需要将不同种类的数据进行联合分析的问题。开通DLA Ganos 创建虚拟集群，详情请参见 虚拟集群管理。在创建好的...
数据湖管理FAQ
元数据发现相关问题 为什么配置了元信息发现，并在“手动执行”之后，过了几天新的数据看不到了？OSS数据源配置数仓模式和自由模式的差异以及适用场景是什么？为什么Excel导出的CSV文件没有被识别建表？为什么一个目录下面是同样Schema的...
页面分析无数据
移动分析对日志进行实时上报，但并非对日志数据进行实时计算，因此控制台上展示的数据为 T+1 数据。如需在通过 MAS 后台查询相关日志信息，需提供 appid、workspaceid、tenantId、mPaaS 控制台页面 URL。如果通过上述步骤仍未解决问题，请 ...
如何解决查询分析与流处理两种场景下的数据口径差异
问题现象 在使用日志服务查询分析时，难免会碰到源端时间字段同步到目标端之后，发生时间不一致的问题。例如：SLS一周前的数据同步到MaxCompute之后，相同的时间间隔数据条数不一致。SLS的数据通过数据加工同步到另一个Logstore之后，在...
数据分析概述
DataWorks提供的数据分析平台，可以流畅地进行数据处理、分析、加工及可视化操作。在数据分析板块中，您不仅可以在线洞察数据，还可以编辑和共享数据。本文为您介绍数据分析平台的优势、功能、权限等概要信息。产品优势 与本地数据分析相比...
数据分析：即时快速分析
计费 DataWorks的数据分析功能不收取功能费用，您开通DataWorks后即可使用数据分析功能，但不同版本的DataWorks支持的数据分析功能细节不一致，详情请参见 DataWorks各版本详解。开通使用 购买DataWorks版本后，您即可登录DataWorks控制台...
应用场景
多源联合分析 该场景需要解决云上企业构建数据仓库时配置数据同步链路繁杂的问题，以及分库分表所带来的数据分析复杂性问题，让用户可以更专注于业务逻辑。该场景可实现：支持多数据源接入 支持数据库（RDS、PolarDB-X（原DRDS）、PolarDB...
数据集常见问题
数据源被删除后，基于该数据源的数据集也将失效。您需要重新创建相关数据集。如何将地理数据应用到地图图表中？在数据集编辑页面，将地理数据通过维度类型切换功能转换为相应的地理信息。请参见 编辑维度。是否支持设置行级权限吗？支持。...
新功能发布记录
数据归档至AnalyticDB PostgreSQL版 数据分析 新增 数据分析功能支持通过图形或组件，将数据库中的表数据直观地展示出来。概述 名词解释 访问数据分析功能 管理数据集 仪表盘 08月 功能名称 变更类型 功能描述 相关文档 极简模式 新增 极简...
数据下载
在DataWorks的数据开发（DataStudio）、数据分析、安全中心模块下载的CSV、XLSX格式文件数据将同步保存至数据下载功能。通过该功能，您可将所需历史...数据分析的更多介绍，请参见 数据分析概述。安全中心的更多介绍，请参见 安全中心概述。
使用DataWorks连接
使用场景 数据分析使用场景 数据分析的 SQL查询 功能使用场景如下：您可以通过数据分析的 SQL查询 功能查询数据，并通过分析模式的Web Excel对查询结果进行分析。您也可以下载查询结果至本地，减少数据的流动，更好地保障数据安全。...
查询加速
本章将详细介绍如何在 云数据库 SelectDB 版 实例中进行查询优化和数据分析，云数据库 SelectDB 版 提供了多种分析SQL和优化方案，帮助您提升查询速度并实现高效的数据分析。概述 云数据库 SelectDB 版 采用了MySQL网络连接协议，兼容 标准...
准备工作
取决于您想分析的应用问题，数据源有所不同。Q：发现GC频率过快？GC回收效率低下？应用出现OutOfMemoryError等问题？A：生成Java堆转储文件（Heap Dump）Q：发现CPU负载过高？应用卡死？线程过高 A：生成Java栈文件 Q：评估GC性能？发现长...
分析视图简介
接下来问题诊断部分会将gc日志中应用存在的较为严重的问题，标在时间轴上，下方会指出这些问题中最严重，最应该优先解决的问题，给出问题发生的时间段（可通过点击时间来查看该时间段的数据以便于分析问题），然后给出常见的排查和调优方法...
Presto FAQ
分析型的查询往往只会获取一个表里面少数几列的数据，这样执行引擎比如Presto在实际扫描底层数据的时候只需要扫描需要的列的数据。而这种节省扫描量的效果只有当底层的数据是以列存的形式存储才能达到。示例代码如下。SELECT col1 FROM tbl...
快速体验
DataWorks的数据分析功能为企业提供了全面的数据分析和服务共享能力，可便捷地连接多种数据源、支持SQL查询，并提供电子表格等多样化的数据分析工具，以满足企业日常的数据提取和分析需求。本文将通过MaxCompute引擎在SQL查询中对公共数据...
互联网、电商行业离线大数据分析
方案介绍 实现互联网、电商行业离线大数据分析的流程如下：同步用户订单等数据至MaxCompute。通过DataWorks对原始数据进行处理，并形成开放API。以API的形式通过DataV在大屏上展示结果数据。方案优势 大规模存储：超大规模存储且自动扩容，...
云产品集成
请参见：什么是DataV数据可视化 配置数据库白名单 添加OceanBase for MySQL数据源 Quick BI 数据分析与展现 Quick BI 是一款全场景数据消费式的BI平台，秉承全场景消费数据，让业务决策触手可及的使命，通过智能的数据分析和可视化能力帮助...
OSS Foreign Table功能概览
OSS Foreign Table（简称OSS FDW）是基于PostgreSQL Foreign Data Wrapper（简称PG FDW）框架开发的用于访问OSS数据的数据分析方案，支持将OSS数据导入至 AnalyticDB PostgreSQL版，且提供分区表功能，在性能、功能以及稳定性上都优于OSS ...
Sugar BI连接MaxCompute
操作流程 Sugar BI连接MaxCompute进行可视化数据分析的操作流程如下：步骤一：Sugar BI连接MaxCompute 通过配置连接参数，连接Sugar BI和MaxCompute项目。步骤二：创建数据模型 创建数据模型，为后续进行数据可视化分析做准备。步骤三：...
快速接入
角色授权 埋点方案录入 将业务准备中梳理好的埋点方案内容录入到Quick tracking后台，为下一步埋点集成做准备 方案管理 事件管理 属性管理 埋点集成与验证 在创建组织和应用后，需要客户端接入SDK来采集用户行为日志，为后续的数据分析提供...
与Spark集成分析
基于DLA无服务器化（Serverless）数据湖分析服务与内置的Spark计算引擎，DLA Ganos提供了不同级别的数据分析模型，最基础的是GeometryRDD模型，用来实现Ganos数据中SimpleFeature与Spark中RDD模型的之间的转换。在GeometryRDD基础上，DLA ...
与Spark集成分析
基于DLA无服务器化（Serverless）数据湖分析服务与内置的Spark计算引擎，DLA Ganos提供了不同级别的数据分析模型，最基础的是GeometryRDD模型，用来实现Ganos数据中SimpleFeature与Spark中RDD模型的之间的转换。在GeometryRDD基础上，DLA ...
常见术语
数据湖分析 数据湖分析就是针对数据湖数据分析的方案。云原生数据湖分析（简称DLA）是新一代大数据解决方案，采取计算与存储完全分离的架构，支持数据库（RDS\PolarDB）与消息实时归档建仓，提供弹性的Spark与Presto，满足在线交互式查询、...
什么是EMR Notebook
产品优势 EMR Notebook可以为大数据用户带来全新的数据分析和数据开发体验。统一平台 EMR Notebook支持多种开发语言，包括SQL和Python等。不论是进行SQL交互式查询还是PySpark程序开发，都可以在同一个开发环境中完成，无需在多种工具中...
数据可视化展现
登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据分析>SQL查询，在下拉框中选择对应工作空间后单击 进入SQL查询。配置SQL查询数据源 数据源 授权。在数据分析中使用数据源，需要先给数据源授权，您可以进入 安全中心>安全...
查询概述
查询进阶 查询加速 为了提供极致的数据分析服务，SelectDB中采用了查询优化技术，包含基于Cascades框架的全新优化器、基于Pipeline的执行引擎、高并发点查、物化视图、索引加速、Join优化等。通常情况下，SelectDB会自动优化查询规划和执行...
分析平台概述
Dataphin提供了简单、快速、高效的数据分析平台，您可通过数据分析对数据仓库中的数据进行洞察、在线查询及可视化分析，提取出有效信息而形成结论，辅助决策。前提条件 需开通智能研发版。分析平台简介 在分析平台上，您可选择您有权限的...
大数据AI公共数据集分析
本教程通过DataWorks，联合云原生大数据计算服务MaxCompute，使用大数据AI公共数据集（淘宝、飞猪、阿里音乐、Github、TPC等公共数据），指导您如何快速进行大数据分析，快速熟悉DataWorks的操作界面与最基础的数据分析能力。DataWorks的更...
基础常问类问题
它不仅是面向业务人员的数据分析工具，也是数据化运营的助推器，更是解决大数据应用“最后一公里”的神器。针对只用过Excel，想要迁移到Quick BI的人群，有哪些入门文档？请参见 入门概述 和 业务背景介绍和快速连接数据源。控制台上案列...
分析平台概述
Dataphin提供了简单、快速、高效的数据分析平台，您可通过数据分析对数据仓库中的数据进行洞察、在线查询及可视化分析，提取出有效信息而形成结论，辅助决策。前提条件 需开通智能研发版。分析平台简介 在分析平台上，您可选择您有权限的...
- 产品推荐
- 这些文档可能帮助您