Quick BI 助力深圳光明环境水务公司举办水务数据应用...
近日，由深圳市光明区环境水务有限公司（以下简称光明环水公司）主办的水务数据应用大会暨第二届“光环杯”BI应用大赛在光明文化艺术中心举行，来自上海、福州、杭州、澳门及深圳本地的水务单位、企业代表近200人现场参加大会，阿里云智能...
应用场景
云数据库MongoDB版支持单节点、副本集和分片集群三种部署架构，具备安全审计、时间点备份等多项企业能力。在互联网、物联网、游戏、金融等...大数据应用：使用云数据库MongoDB作为大数据的云存储系统，随时进行数据提取分析，掌握行业动态。
应用场景
互联网类应用 Cassandra能够支持大并发低延时的访问需求，具备高可用和弹性扩容能力，适合日志、消息、feed流、订单、账单、网站等各种大数据量的互联网在线应用场景。多活 Cassandra原生支持多DC部署方式，实现更好的可用性和容灾能力。云...
概述
对接实时计算，用于业务数据驱动的智能运营、IoT、监控大屏等数据应用。数据同步，比如更新cache，同步到搜索引擎、数仓、冷存储等。LindormStreams支持实时获取HBase表的数据变更，您可以基于LindormStreams的这个功能构建自己的数据应用...
典型使用场景
HBase具有高吞吐，低延迟，schemaFree，水平扩展等能力，被很多大数据类应用选择。而接合LindormStreams+Blink/Spark，可以构建出一套完整的实时数据系统：应用解耦-实时同步到消息队列 通常业务发生之后，应用系统产生的数据需要被其他...
概述
Flink（VVR）完全兼容开源Flink，相关内容请参见如下文档：DataStream API Table API&SQL Python API 使用场景 Flink广泛应用于大数据实时化的场景，本文从技术领域和企业应用场景进行介绍。技术领域 从技术领域的角度，Flink主要用于以下...
时序引擎应用开发简介
5.连续查询 连续查询应用于大数据查询的场景。通过创建连续查询对新写入的数据预聚合处理，减少实时查询的数据量，从而减少计算量并降低查询延迟。6.预降采样 预降采样应用于较长时间范围的数据查询场景。在数据写入时按照设置的规则将原始...
产品简介
大数据专家服务 大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障，帮助用户...
什么是EMR on ACK
您可以将开源大数据服务部署在阿里云容器服务Kubernetes版（ACK）之上，利用ACK在服务部署和容器应用管理的优势，减少对底层集群资源的运维投入，以便于您可以更加专注大数据任务本身。形态对比 阿里云EMR提供on ECS和on ACK两种方式，以...
应用场景
数据传输服务DTS（Data Transmission Service）支持数据迁移、数据订阅和数据实时同步功能，帮助您实现多种典型应用场景。不停机迁移数据库 传输方式：数据迁移 为了保证数据的一致性，传统的迁移过程需要您在迁移数据时停止向源数据库写入...
概述
存储格式 数据来源及特点 数据量增大或减少 详细数据量 JSON 大量应用产生JSON类型的数据，冗余数据量大。增大151.7%3.02GB AVRO Hadoop生态格式的数据，数据由大部分遗留系统产生。增大8.3%1.3GB RCFile Hadoop生态格式的数据，数据由大...
设置启动命令
不同部署方式及应用环境操作步骤类似，但可配置的启动命令不同，您可以根据实际界面配置。应用托管概述 设置镜像部署应用的启动命令 设置JAR包部署应用的启动命令 设置WAR包部署应用的启动命令 设置ZIP包部署应用的启动命令 设置镜像部署...
远程调试
开启应用内存优化（G1）：默认开启，开启后可以针对多CPU与大容量内存场景，降低GC时间，适用于GC需要优化、大数据等场景。开启应用启动加速（Quickstart）：只有 Java环境 为 Dragonwell 11 时可以设置。选中 开启应用启动加速...
与云服务器ECS对比
镜像种类、数目丰富，包括公共镜像、自定义镜像、共享镜像和镜像市场镜像，满足各类型用户对应用环境的快速部署、灵活管理的需求。如果您需要使用更丰富的实例类型，如通用型、计算型、大数据型、弹性裸金属服务器、GPU/FPGA/NPU异构计算型...
数据源开发和生产环境隔离
标准模式工作空间下，DataStudio界面与开发环境运维中心默认访问开发环境数据源指向的数据源。生产调度环境下，生产环境运维中心界面任务执行默认访问生产环境数据源指向的数据源。说明 由于开发环境和生产环境数据源配置的数据库、账号...
使用场景
ACM 为大数据实时计算场景的应用带来以下好处：应用计算参数动态配置，动态生效，生效时间快，性能影响低。企业级互联网架构下的异地多活场景 异地多活是企业级互联网架构中的一种高级容灾架构。相对于传统容灾架构，有业务恢复时间短、...
EMR Workbench
阿里云EMR Workbench是一个综合性的大数据分析和开发环境，作为阿里云E-MapReduce的一部分，它提供了EMR Notebook和EMR Workflow两个核心功能。通过EMR Workbench，您可以轻松进行数据开发，以及交互式数据分析，并设计复杂的数据处理工作...
集成与开发概览
应用场景 数据集成 运维：数据容灾、异地多活、数据归档、数据迁移、测试数据生成、运维指标监控、业务指标监控等。开发：实时报表、日志分析、离线宽表、T+1数据快照、数据聚合、数据清洗、数据脱敏等。数据开发 数据库开发：跨库开发、...
SDK简介
通过Jaeger上报Go应用数据 通过SkyWalking上报Go应用数据 通过Zipkin上报Go应用数据 Python应用 通过OpenTelemetry上报Python应用数据 通过SkyWalking上报Python应用数据 通过Jaeger上报Python应用数据 Node.js应用 通过OpenTelemetry上报...
开始监控除Java之外的应用
通过SkyWalking上报Python应用数据 通过Jaeger上报Python应用数据 Node.js应用 通过OpenTelemetry上报Node.js应用数据 通过SkyWalking上报Node.js应用数据 接入Node.js应用.NET应用 通过OpenTelemetry上报.NET应用数据 通过Jaeger上报.NET...
创建并管理数据源
同一个数据源名称可分别配置开发环境数据源、生产环境数据源，且不同环境的数据源配置是相互独立的。管理数据源 在数据源管理页面，您可根据 数据源类型、数据源名称 筛选需要查看的数据源。同时，支持您对目标数据源执行如下管理操作：...
E-MapReduce弹性低成本离线大数据分析
大数据是一项涉及不同业务和技术领域的技术和工具的集合，海量离线数据分析可以应用于多种商业系统环境，例如，电商海量日志分析、用户行为画像分析、科研行业的海量离线计算分析任务等场景。离线大数据分析概述 主流的三大分布式计算框架...
调用API
说明 若您使用的是极简模式的控制台，请单击控制台左上角的 图标，选择 全部功能>集成与开发（DTS）>数据应用>数据服务。单击 API调用 页签，找到 加密签名身份认证 的 AppKey 和 AppSecret。在应用中使用SDK调用API。更多调用API信息，请...
通过Prometheus监控获取ARMS应用监控数据
阿里云 可观测监控 Prometheus 版 默认集成了ARMS应用监控数据源，您可以直接在 可观测监控 Prometheus 版 下获取应用监控相关数据、查看应用监控预置大盘，并根据需求进行二次开发。前提条件 已为应用安装探针，具体操作，请参见 应用监控...
应用环境
在应用详情的左边导航栏中选择 监控>应用环境。应用环境 页面显示应用的环境信息。表 1.参数说明 参数 说明 实例IP 应用的实例的IP地址。运行时长 应用从启动到当前的运行时长。进程号 应用所对应的进程的唯一标识。JVM版本 应用的Java虚拟...
应用场景
数据分析业务 云数据库 Memcache 版搭配大数据计算服务 MaxCompute。实现对大数据的分布式分析处理，适用于商业分析、挖掘等大数据处理场景。通过数据集成服务可自助实现数据在云数据库 Memcache 版与 MaxCompute 间的同步，简化数据操作...
准备环境
为保证您可以顺利完成本次实验，请您首先确保自己云账号已开通大数据计算服务MaxCompute、数据工场DataWorks和 人工智能平台 PAI。前提条件 注册阿里云账号，详情请参见 注册阿里云账号。实名认证，详情请参见 个人实名认证 背景信息 本次...
使用ARMS应用监控数据指标绘制自定义的Grafana大盘
阿里云 可观测可视化 Grafana 版 支持一键集成ARMS应用监控数据源和大盘，如果您需要使用ARMS应用监控数据指标绘制自定义大盘，只需要创建一个Grafana工作区，一键集成ARMS应用监控数据源后，即可根据实际场景重新绘制Grafana大盘。...
安全设置
同一项目，用户可以在Dev环境直接操作Prod环境的数据，造成Prod环境数据泄漏或意外变更。下表以开发者角色为例，介绍安全模式开启与关闭的情况下，对项目的操作权限。操作 默认（权限模式均未开启）跨项目安全模式（开启）生产数据安全模式...
安全设置
同一项目，用户可以在Dev环境直接操作Prod环境的数据，造成Prod环境数据泄漏或意外变更。下表以开发者角色为例，介绍安全模式开启与关闭的情况下，对项目的操作权限。操作 默认（权限模式均未开启）跨项目安全模式（开启）生产数据安全模式...
折线图
可选数据类型有 接口、数据表资源、静态数据、应用推送。单击 确定。数据展示 页签左侧 数据源 显示已配置的数据源名称，维度 和 度量 显示从数据源中自动解析的属性字段。说明 数据源属性字段匹配规则：维度：布尔型、字符型、时间型字段...
数据服务
面向数据资产管理者提供服务的统计分析、服务用量统计分析，实现数据中台建设后半场“数据应用”的有效落地，支撑数据智能应用的高效开发。前提条件 已根据快速入门教程完成加载样例数据操作，具体信息请参见 样例数据。已根据快速入门教程...
自建数据库与RDS性能对比的注意事项
网络环境 应用和自建数据库都需要部署于ECS实例，且与RDS实例位于同一地域，使得应用与RDS之间，以及应用与自建数据库之间都是通过内网进行通信。说明 应用与自建数据库需要部署于两台不同的ECS实例。如果部署于同一台ECS实例，则应用到自...
自建数据库与RDS性能对比的注意事项
网络环境 应用和自建数据库都需要部署于ECS实例，且与RDS实例位于同一地域，使得应用与RDS之间，以及应用与自建数据库之间都是通过内网进行通信。说明 应用与自建数据库需要部署于两台不同的ECS实例。如果部署于同一台ECS实例，则应用到自...
自建数据库与RDS性能对比的注意事项
网络环境 应用和自建数据库都需要部署于ECS实例，且与RDS实例位于同一地域，使得应用与RDS之间，以及应用与自建数据库之间都是通过内网进行通信。说明 应用与自建数据库需要部署于两台不同的ECS实例。如果部署于同一台ECS实例，则应用到自...
产品架构
数据管理DMS的产品架构分为三层：数据源、数据运营与管理和商业...数据应用：提供数据服务、数据分析和数据可视化。更多信息，请参见 功能概览。商业应用：数据化运维DataOps 容灾多活 T+1全量数据快照 数据集中处理 可视化报表 数据多维分析
数仓分层
基于阿里巴巴OneData方法论最佳实践，在阿里巴巴的数据体系中，建议将数据仓库分为三层：数据引入层（ODS，Operational Data Store）、数据公共层（CDM，Common Dimensions Model）和数据应用层（ADS，Application Data Store）。...
选择应用部署环境
EDAS支持在ECS集群和K8s集群中部署应用，两种环境都能满足应用托管的需求，但功能上也存在一定的差异。如果您处于技术选型或架构迁移过程中，对于选择使用哪种环境来管理应用存在疑惑，本文为您提供一些选择环境的建议和两种环境的功能对比...
数仓分层
在阿里巴巴的数据体系中，我们建议将数据仓库分为三层，自下而上为：数据引入层（ODS，Operation Data Store）、数据公共层（CDM，Common Data Model）和数据应用层（ADS，Application Data Service）。数据仓库的分层和各层级用途如下图所...
创建DataV大屏（模板篇）
本文主要介绍如何使用宜搭系统，通过创建空白应用后创建模板大屏，并配置应用中模板大屏的数据源和修改大屏标题的功能。背景信息 宜搭数字化大屏视频功能讲解，请参见如下视频：登录宜搭平台 操作步骤：登录 宜搭平台，在宜搭官网首页右上...
- 产品推荐
- 这些文档可能帮助您