开通日志实时查询功能

您在执行日志查询分析前,需先开通日志实时查询功能。本文介绍如何在OSS控制台上开通日志实时查询功能。前提条件 已创建OSS Bucket。具体操作,请参见 控制台创建存储空间。请确保日志服务Project和OSS Bucket在同一阿里云账号且在同一地域...

实时日志查询

支持实时查询和分析原始日志,并按照Bucket名称、Object名称、API操作、时间等条件过滤日志。注意事项 无地域属性的Bucket不支持实时日志查询。计费说明 当Logstore的计费模式为按使用功能计费时,如果OSS日志存储时间不超过7天,且当天...

查看实时标签查询调用代码

Dataphin支持通过接口形式实时查询实体标签值。本文将指导您如何查看实时标签查询的调用代码。前提条件 创建标签离线服务关联的应用。具体操作,请参见 创建及管理应用。创建标签离线服务前您需先创建对应的实体。具体操作,请参见 创建...

应用场景

日志服务的典型应用场景包括:数据采集与消费、数据清洗与流计算(ETL/Stream Processing)、数据仓库对接(Data Warehouse)、日志实时查询与分析。数据采集与消费 通过日志服务LogHub功能,可以大规模低成本接入各种实时日志数据(包括...

使用前须知

阿里云对象存储(OSS)联合日志服务推出OSS访问日志实时查询功能,帮助您完成OSS的操作审计、访问统计、异常事件回溯和问题定位等工作。本文介绍OSS日志实时查询功能相关的功能优势、资产详情、费用说明以及使用限制。重要 日志服务还联合...

阿里云实时数仓产品Hologres的应用场景

您可以通过Hologres实时查询并输出数据至第三方分析工具进行实时分析。典型应用场景如下:数据部门搭建 阿里云实时数仓产品、展示实时大屏和分析实时Reporting报表。运维和数据应用部门执行实时监控、实时异常检测预警与实时调试。业务部门...

使用高效方式获取指标数据

因此对于实时查询监控数据的场景,更推荐使用企业云监控的实时数据导出功能,通过流式的方式获取监控数据。实时导出云产品的监控数据。具体操作,请参见 实时导出监控数据。说明 实时导出监控数据之前,请您确保已开通企业云监控。具体操作...

查询MNS日志

阿里云消息服务(MNS)日志推送到日志服务后,可进行实时查询,本文介绍实时查询的常用场景及操作步骤,您也可以通过多个关键字组合方式实现更加复杂的查询。前提条件 已采集到MNS日志。具体操作,请参见 MNS日志。已配置索引。具体操作,...

号码百科的审计事件

DescribePhoneNumberAnalysis 号码分析实时查询。DescribePhoneNumberAnalysisConsole 号码分析实时查询。DescribePhoneNumberAttribute 号码归属查询。DescribePhoneNumberOperatorAttribute 号码归属查询(加密版)。...

产品优势

Hologres兼容PostgreSQL生态,支持快速查询分析MaxCompute的数据、实时查询实时写入的数据、联邦分析实时数据与离线数据,帮助您快速搭建企业实时数据仓库。Hologres专注实时数仓需求,从以下几个方面创新,提高数仓开发效率,降低应用门槛...

轨迹服务

同时,平台也存在各种类型的时空查询需求,包括但不限于实时的圈选、出入监测和历史轨迹分析,并且由于查询类型的多样性,平台对实时查询性能的要求也更加严格。如何保存和处理这些实时数据,如何提升实时查询性能,成为平台需要面临的新...

新用户免费试用

实时查询性能强,刷新TPC-H的30000 GB世界纪录。融合湖仓查询,0 ETL导入离线MaxCompute数据。免费试用介绍 Hologres 5000 CU时,支持新您免费试用,试用过程可参考:免费试用。试用额度:计算资源5000 CU*H,存储资源20 GB。可试用台数:1...

topKey分析

集群管理系统的topKey分析支持实时分析和历史快照两大功能,支持根据查询条件实时查询热点Key和历史热点Key,帮助您定位热点,快速分析。前提条件 已登录目标实例的集群管理系统,具体操作请参见 登录集群管理系统。操作步骤 在集群管理...

基本概念

三种模型的优缺点和适用场景:点模型利用索引进行实时查询的效率最高,但存储成本和二级索引代价高,适用于实时性要求较高的简单查询场景。轨迹线模型时空索引效率不高,存储成本和二级索引代价低,适用于离线分析型场景。轨迹分段线模型...

【产品变更】应用日志关联功能默认日志源下线公告

强烈建议您使用日志服务SLS作为日志源,日志服务支持PB级数据实时查询与分析,提供10多种查询运算符、10多种机器学习函数、100多个SQL函数。关联SLS日志后,ARMS会内嵌日志服务的查询页面,方便您进行日志分析。更多信息,请参见 日志分析...

产品优势

支持实时查询和join,一站式满足您的所有推荐召回需求;高稳定性:索引数据准备好之后,按行切换,不影响在线业务,避免索引更新对业务造成的影响;存储多版本历史索引,方便出现问题后快速回滚,降低业务影响;3.提升迭代效率:即时开通,...

基于代价的SQL优化

将一个复杂的查询拆解到多台机器上执行,对于复杂查询也能实时查询出结果。高度自治的体验 优化器生成最佳查询执行计划,需要依赖统计信息的输入,统计信息是优化器预测查询开销的主要信息。AnalyticDB MySQL 会智能地分析每个表的列需要...

使用前须知

日志服务提供实时查询、可视化分析、告警、投递、加工等功能,帮助您实时掌握重要云资产的操作情况。本文介绍ActionTrail操作事件投递功能相关的资产、费用、使用限制等信息。资产说明 重要 请勿删除ActionTrail操作事件相关的日志服务...

构建数据仓库

适用行业:适用于电商、游戏、社交等互联网行业大规模数据实时查询场景。方案优势:阿里云实时数仓全套链路与离线数仓无缝打通。满足一套存储,两种计算(实时计算和离线计算)的高性价比组合。产品组合:DataHub+实时计算Flink+交互式分析...

实时监控

查询实时请求命中率 查询实时字节命中率 查询实时状态码 注意事项 通过CDN/DCDN控制台(或者OpenAPI)的监控查询、用量查询(实际计费流量)功能查到的加速域名使用的流量数据与通过日志统计的流量数据有差异。通常来说,通过监控查询、...

Delta Lake概述

如果您存在以下场景,可以使用Delta:实时查询:数据实时从上游流入Delta,查询侧即可查询该数据,例如,在CDC场景下,Spark Streaming实时消费binlog时,使用Delta merge功能,实时将上游的数据通过merge更新到Delta Lake,然后可以使用...

哈啰出行

解决方案 日志服务为哈啰出行提供了TB级别日志的实时采集、弹性扩容、实时查询的能力。实时采集 日志服务原生支持Kafka协议。哈啰出行的各个客户端只需把Kafka的地址设置成日志服务的Kafka协议地址即实现了无缝迁移。弹性扩容 日志服务采用...

开源Flink 1.10实时导入数据至Hologres

本文以一个示例为您演示开源Flink如何实时...成功启动任务后,您可以在Hologres中实时查询写入的数据。示例语句如下。select count(1)from order_details;select item_id,sum(price)as total from order_details group by item_id limit 10;

Hologres结果表

Hologres实时查询数据。查询Hologres中用于接收数据的表,就可以实时获取到已写入的数据。示例查询SQL语句如下。select*from blink_test;如何使用宽表Merge/局部更新功能 对于常见的多个流的数据写入至一张Hologres宽表的场景,具体使用...

低成本RDS历史库

满足实时查询需求,例如消费账单、聊天记录等场景历史数据的查询RT要能够和在线数据的查询RT接近。能够满足数据分析需求,历史数据访问频度低,但是在某些业务场景下需要对全量数据进行挖掘分析,比如支付宝年账单。云原生多模数据库...

实时分析海量MaxCompute数据

本文为您介绍交互式分析Hologres如何实时查询海量MaxCompute数据,并以可视化方式分析和展现查询结果的最佳实践。前提条件 开通MaxCompute,详情请参见 开通MaxCompute。说明 请确保MaxCompute和Hologres的地域相同。开通Hologres并连接至...

日志服务数据同步至Hologres

您可以将SLS的数据快速写入Hologres中,进行实时分析实时查询,提升业务对数据的探索能力。通过Flink将SLS数据写入Hologres 准备SLS数据。本次准备的SLS数据来源于SLS日志平台的模拟数据,模拟游戏登录和消费日志的数据。如果您有业务数据...

迁移HBase至Hologres

联通数据孤岛,海量数据实时查询及分析,弹性扩展集群,完整SQL支持。开发方式 应用开发复杂,需要将业务分析的指标、维度、表、聚合等概念,转化为存储的KeyValue概念,将应用层查询过滤场景翻译为对Key的字节过滤操作,系统效率严重依赖...

API概览

GetAIMediaAuditJob 查询智能审核作业 调用GetAIMediaAuditJob查询智能审核作业,在提交AI作业后,会进行异步处理,通过此接口可以实时查询作业信息。GetMediaAuditResult 获取智能审核结果摘要 调用GetMediaAuditResult获取智能审核结果...

功能特性

查询与分析 日志服务支持实时查询与分析数据。具体说明如下:支持精确查询、模糊查询、全文查询、字段查询。支持上下文查询、日志聚类、LiveTail、重建索引等功能。支持标准的SQL 92语法。提供SQL独享实例。更多信息,请参见 查询概述 和 ...

API概览

GetMeetingTrans 查询实时会议状态 查询实时会议信息。StopMeetingTrans 结束实时会议 结束实时会议。会议音视频文件转写 API 标题 API概述 CreateFileTrans 创建文件转写任务 创建音视频转写任务。GetFileTrans 查询文件转写任务状态 查询...

内容分发网络CDN的审计事件

DescribeLiveStreamsFrameRateAndBitRateData 实时查询直播流帧率和码率数据。DescribeLiveStreamSnapshotInfo 查询一段时间内截图内容。DescribeLiveStreamsOnlineList 查看域名当前流信息。DescribeLiveStreamsPublishList 获取历史推流...

实时同步DataHub的数据至Hologres

您可以连接Hologres实例开发工具,实时查询同步至Hologres中的数据。Hologres连接详情,请参见 概述。执行以下示例查询语句。SELECT COUNT(*)FROM lineitem;常见问题 为您介绍在使用Hologres过程中的常见报错,以便于您能自行排查并解决...

对接DataV

您可以增加一个过滤条件host进行实时查询,使用如下语句。host:yunqi.aliyun.com |select approx_distinct(forward)as uv 需求第二次调整:在统计过程中,您发现Nginx访问日志forward字段存在多个IP,您默认只要第一个IP。使用如下语句。...

智能媒体生产的审计事件

智能媒体生产已与操作审计服务集成,您可以在操作审计中查询用户操作智能媒体生产产生的管控事件。操作审计支持将管控事件投递到日志服务SLS的LogStore或对象存储OSS的存储空间中,满足实时审计、问题回溯分析等需求。操作审计记录了用户...

2023-04-13版本

作为预览型功能,自本版本起,阿里云实时计算Flink提供了Apache Paimon(incubating),这是一项流式数据湖存储技术,提供高吞吐、低延迟的数据摄入、流式订阅和实时查询能力。平台侧将进行多项常用功能的改版,更改了产品控制台的一级目录和...

监控与日志

您可以在审计日志页面对采集到的日志进行实时查询与分析。相关操作,请参见 查询与分析审计日志。您可以查看审计日志的直方图信息、原始日志、统计图表、日志聚类信息等。查询直方图 主要展示查询到的日志在时间上的分布情况。单击绿色数据...

视频直播的审计事件

DescribeLiveStreamsFrameRateAndBitRateData 实时查询直播流帧率和码率数据。DescribeLiveStreamSnapshotInfo 查询一段时间内截图内容。DescribeLiveStreamsNotifyUrlConfig 查询推流回调配置。DescribeLiveStreamsOnlineList 查询指定...

API概览

实时监控 实时监控 访问数据 访问数据 DescribeDomainRealTimeTrafficData 查询实时流量 调用DescribeDomainRealTimeTrafficData查询加速域名的流量监控数据。DescribeDomainRealTimeBpsData 查询实时带宽 调用...

离线UV计算

distribution_key根据需求设置,根据该表的实时查询需求,从什么维度做分片能够取得较好效果即可 CALL set_table_property('public.ods_app','distribution_key','uid');用于做where过滤条件,包含完整年月日时间字段推荐设为clustering_...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云原生数据仓库AnalyticDB MySQL版 实时计算 Flink版 应用实时监控服务 云安全中心 短信服务 弹性公网IP
新人特惠 爆款特惠 最新活动 免费试用