Hive概述
Hive是一个基于Hadoop的数据仓库框架，在大数据业务场景中，主要用来进行数据提取、转化和加载（ETL）以及元数据管理。背景信息 E-MapReduce（简称EMR）版本中，Hadoop、Hive版本和EMR集群的配套情况，请参见 版本概述。Hive结构 名称 说明...
基于Hadoop集群支持Delta Lake或Hudi存储机制
后续可通过映射的MaxCompute项目对External Project进行数据分析操作。仅MaxCompute项目的所有者（Project Owner）或具备Admin、Super_Administrator角色的用户可以创建External Project。说明 Tenant的Super_Administrator角色可以在...
产品概述
数据总线DataHub与阿里云流计算引擎StreamCompute无缝连接，用户可以轻松使用SQL进行流数据分析。数据总线DataHub服务也提供分发流式数据到各种云产品的功能，目前支持分发到MaxCompute（原ODPS），OSS等。系统整体功能图 产品优势 高吞吐 ...
创建DataHub项目
阿里云流数据处理平台DataHub是流式数据（Streaming Data）的处理平台，提供对流式数据的发布（Publish），订阅（Subscribe）和分发功能，让您可以轻松构建基于流式数据的分析和应用。前提条件 您已经完成了 创建RDS MySQL数据库表。操作...
概述
在过去几年，数据驱动的智能应用已经逐渐从基于简单的数据分析和统计转型为基于机器学习和深度学习的特征和模型应用。转型的速度远远超出预期，部分原因是机器学习和人工智能方面的技术突破。深度神经网络在图像分析和自然语言处理等学科中...
文档修订记录
订阅成功后，账单数据会定时同步至MaxCompute，您可使用DataWorks的数据分析功能查询并分析账单数据，将分析结果生成可视化图表卡片及报告，同时，也可将您的阿里云消费分析报告分享给其他用户。账单数据订阅及查询分析 2024.2.21 新增功能...
使用SQL管理外部项目
基于数据湖构建DLF和对象存储OSS的外部项目操作 基于Hadoop外部数据源的外部项目操作 创建与外部数据源中表结构相同的表 基于数据湖构建DLF和对象存储OSS的外部项目操作 在创建External Project后，您可以通过 MaxCompute客户端 进入创建的...
Spark访问湖仓一体外部数据源
访问基于Hadoop外部数据源的外部项目 MaxCompute SQL访问外部项目表-hadoop_external_project 为外部项目，映射的是EMR的Hive数据库-访问非分区表 SELECT*from hadoop_external_project.testtbl;访问分区表 SELECT*from hadoop_external_...
数据分析概述
DataWorks提供的数据分析平台，可以流畅地进行数据处理、分析、加工及可视化操作。在数据分析板块中，您不仅可以在线洞察数据，还可以编辑和共享数据。本文为您介绍数据分析平台的优势、功能、权限等概要信息。产品优势 与本地数据分析相比...
快速玩转Tablestore入门与实战
订单搜索篇 基于MySQL+Tablestore分层存储架构的大规模订单系统实践-SQL查询和分析 基于MySQL+Tablestore分层存储架构的大规模订单系统实践-数据处理ETL篇 基于MySQL+Tablestore分层存储架构的大规模订单系统实践-历史数据分析篇 基于MySQL...
数据分析：即时快速分析
数据分析基于“人人都是数据分析师”的产品目标，旨在为更多非专业数据开发人员，如数据分析、产品、运营等工作人员提供更加简洁高效的取数、用数工具，提升大家日常取数分析效率。功能概述 数据分析支持基于个人视角的数据上传、公共数据...
智能搭建操作说明
基于测试数据集添加一个查询控件，查询各渠道的数据”（选中1个tab）“基于测试数据集添加查询控件，查询2023年1月到10月的数据”（选中1个图表）“添加查询控件，查询各渠道的数据”（选中1个图表）“筛选区域为华东的数据”查询控件置顶 ...
数据标准概述
统一、标准的数据指标体系为各主题的数据分析提供支持，提升数据处理和分析效率，提供业务指标的 事前提示、事中预警、事后提醒，实现数据驱动管理，让决策者快速获取决策信息。前提条件 已购买 数据标准 增值服务并且当前租户已开通 数据...
什么是数据资源平台
数据资源平台覆盖数据同步、数据标准建模及数据质量检查、数据开发、数据标签体系构建，基于标签数据的群体分析、专家业务模型构建、全流程任务监控告警、数据服务化、数据资产管理等核心能力，提供标准化程度高、易用性强的一站式大数据...
CDM明细层设计规范
命名说明：pub表示数据包括多个业务的数据。单分区增量全量标识：i表示增量，f表示全量。数据存储及生命周期管理规范 CDM明细层的表的类型为事实表，存储方式为按天分区。事务型事实表一般永久保存。周期快照型事实表根据业务需求设置生命...
通过DataWorks将Hadoop数据同步到阿里云ES
当您基于Hadoop进行交互式大数据分析查询，遇到查询延迟的问题时，可以将数据同步至阿里云Elasticsearch中再进行查询分析。ES对于多种查询类型，特别是即席查询（Ad Hoc），基本可以达到秒级响应。本文介绍通过DataWorks的数据集成服务，...
云产品集成
请参见：什么是DataV数据可视化 配置数据库白名单 添加OceanBase for MySQL数据源 Quick BI 数据分析与展现 Quick BI 是一款全场景数据消费式的BI平台，秉承全场景消费数据，让业务决策触手可及的使命，通过智能的数据分析和可视化能力帮助...
计算设置概述
华为 FusionInsight 8.x Hadoop 华为推出的基于Apache开源社区软件进行功能增强的企业级大数据存储、查询和分析的大数据平台。亚信DP5.3 Hadoop 基于开源生态，依托电信级技术能力构建的大数据生产运营一体化支撑平台。星环ArgoDB ...
即席分析概述
核心能力 灵活的数据分析：由于业务迭代、变化较快，数据分析思路无法固定，即席分析能够提供灵活的数据分析能力，随时取数、随时分析。多维的数据组合：允许不同维度的拼装，组合形成分面，实现更多维的分析场景。极低的操作门槛：配置...
E-MapReduce数据迁移
但是如果要迁移的数据量大，请开启YARN服务，以便使用hadoop的数据迁移工具hadoop distcp进行快速地数据迁移。迁移数据。建议将/user、/hbase、/spark-history、/apps等服务目录和相关的数据目录全量迁移至 文件存储 HDFS 版。如果涉及将云...
仪表盘
仪表盘是 数据管理DMS 数据分析的其中一种可视化应用类型，其提供自动布局和可交互能力，您可以通过使用仪表盘来进行数据分析和制作可视化报表。本文介绍仪表盘的基本概念、功能展示及操作步骤。基本概念 仪表盘集合：仪表盘集合是用户管理...
数据查询与分析管控
管控查询结果相关操作 您可对具有数据查询功能的数据分析模块配置查询结果管控策略，确保数据操作的安全可靠。在 数据查询与分析管控>查询结果管控 页签，单击 编辑，即可自定义查询结果相关操作（展示、复制、下载、分享）的管控策略，...
数据可视化展现
登录 DataWorks控制台，单击左侧导航栏的 数据分析>SQL查询，在下拉框中选择对应工作空间后单击 进入SQL查询。配置SQL查询数据源 在SQL查询页面，单击 新建SQL查询，进入SQL查询临时文件编辑页面。在页面右上角，图示位置选择当前SQL查询...
数仓规划概述
模块之间存在依赖关系，项目的计算存储资源配置基于 计算源，项目空间内所用到的数据基于 数据源。智能研发版：规划 包括 业务、项目 和 源。模块之间存在依赖关系，项目的计算存储资源配置基于 计算源，项目空间内所用到的数据基于 数据源...
产品优势
企业数据分析全场景覆盖 一站式 满足企业各种场景 的数据分析和决策的诉求，从管理层决策分析的驾驶舱，到业务专题分析门户和报表，再到一线人员的自助分析和临时取数等。人找数据和数据找人 两种数据消费的形态相结合，企业业务人员既可以...
DataWorks on EMR Serverless StarRocks最佳实践
登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据分析>SQL查询，在下拉框中选择对应工作空间后单击 进入SQL查询。单击左边侧边栏的 系统管理，设置StarRocks类的查询资源组为独享资源组。回到SQL查询页面，在右上角切换引擎...
功能发布记录（2024年）
2024.2.6 所有地域 所有DataWorks用户 系统配置 2024-01 功能名称 功能描述 发布时间 发布地域 使用客户 相关文档 数据开发与数据分析的查询结果支持脱敏展示 数据保护伞支持对E-MapReduce表数据进行分类分级、敏感数据识别、数据脱敏展示...
什么是EMR Serverless StarRocks
实例规模可以灵活伸缩，支持10 PB级别的数据分析。支持MPP框架，并行加速计算。支持多副本，具有弹性容错能力。StarRocks特性 架构精简 StarRocks内部通过MPP计算框架完成SQL的具体执行工作。MPP框架能够充分的利用多节点的计算能力，整个...
数仓规划概述
模块之间存在依赖关系，项目的计算存储资源配置基于 计算源，项目空间内所用到的数据基于 数据源。智能研发版：规划 包括 业务、项目 和 源。模块之间存在依赖关系，项目的计算存储资源配置基于 计算源，项目空间内所用到的数据基于 数据源...
基于MaxCompute进行大数据BI分析
方案介绍 基于MaxCompute进行大数据BI分析的流程如下：通过数据集成同步业务数据和日志数据至MaxCompute。通过MaxCompute、DataWorks对数据进行ETL处理。同步处理后的结果数据至AnalyticDB MySQL。通过Quick BI可视化建立用户画像。方案...
分析实例简介
构建实时数仓成本太高，公司留给数据分析的预算有限，只能默默忍受越来越长的卡顿时间，殊不知在无限的忍受中公司错过了很多机会。为解决上述问题，您可以在RDS MySQL控制台上创建一个分析实例。分析实例的复杂分析性能约为RDS MySQL实例的...
查看报表
等保参考分析报告 根据当前信息安全技术网络安全等级保护评测要求GB/T 28448-2019（简称等级保护2.0），针对等级保护2.0中关注的安全审计中的入侵防范、恶意代码监控、安全审计监控等进行针对性的数据分析和展示。数据安全法报告 从敏感...
情绪分析
该功能通过线上数据分析客服和客户间通话的情绪分布、情绪变化、情绪意图并挖掘出其中的热点高频词。情绪分析数据维度 在情绪分析功能中系统支持以情绪分类、时间维度、数据来源和角色维度进行分析。情绪分类：系统根据情绪将全部通话分为...
多维分析表
多维分析表是一种更复杂且灵活的数据分析方式，它可以从多个维度对数据进行切片，以便从不同角度深入洞察数据间的关联。本文为您介绍如何为多维分析表添加数据并配置样式。前提条件 已完成数据建模，数据集必须包含日期字段，且日期字段为...
Quick BI
数据可视化分析 单击左侧导航栏中的 数据集>新建数据集，选择之前配置的AnalyticDB链接，选择表的种类，将数据集添加进数据决策系统并进行后续的数据分析和仪表板展示。您可以使用如下两种方式进行数据的可视化分析：拖拽表对应列方式：...
趋势分析表
趋势分析表由趋势分析图和趋势分析明细表组成，您可以通过趋势分析图查看指标的宏观趋势，然后通过趋势分析表查看指标详情，帮助您更好的分析决策。本文为您介绍如何为趋势分析表添加数据...对比指标 您可以同时选中多个指标，进行数据分析。
通过ES-Hadoop实现Hive读写阿里云Elasticsearch数据
本文介绍通过ES-Hadoop组件在Hive上进行Elasticsearch数据的查询和写入，帮助您将Elasticsearch与Hadoop生态组件结合起来，实现更灵活的数据分析。背景信息 Hadoop生态的优势是处理大规模数据集，但是其缺点也很明显，就是当用于交互式分析...
快速开始
DataV-Card可视分析创作间是一款面向高频数据处理的业务人员、零代码的数据可视分析产品，提供简单、直观、易于使用的数据准备、洞察发现、可视化分析工具，通过具象、生动、有趣的方式快速理解数据，让更多用户能便捷高效地利用数据可视化...
功能特性
索引加速 文件分析 云数据库 SelectDB 版支持表函数功能（Table-Value-Function或TVF），可以将S3、HDFS等常见远端存储中的文件数据，映射成云数据库 SelectDB 版中的表，从而对这些文件数据进行分析 文件分析 数据湖分析 Hive数据源 通过...
维度表
功能概述 在日常分析数据的时候，除了基于正常上报的属性去做一些多维度的分析，业务部门内部可能也会有一些自定义的维度...比如我们要分析应不同设备型号的活跃用户数量，可以在「事件分析」中进行指标分析选择维度表就可以得到数据分析了。
- 产品推荐
- 这些文档可能帮助您