使用前须知

阿里云开源大数据平台E-Mapreduce(EMR)联合日志服务推出日志功能,用于将EMR日志投递到日志服务进行查询分析。本文介绍EMR日志相关的资产、费用、使用限制等信息。

资产详情

  • 自定义的Project和专属Logstore

    您可以自定义一个Project,系统将在该Project下生成名为emr_EMR服务名称_log的专属Logstore。例如您要投递host服务的日志,则对应的Logstore为emr_host_log

    重要
    • 在停用日志功能前,请勿删除EMR日志相关的日志服务Project和Logstore,否则将导致已存储的日志被清除,且新日志无法被投递到日志服务。

    • 若您曾开通过按写入数据量计费模式,则系统默认创建计费模式为按写入数据量计费的专属Logstore。若您需要切换至按使用功能计费模式,可修改Logstore配置。具体操作,请参见修改Logstore配置

  • 专属仪表盘

    无专属仪表盘,您可以自定义仪表盘用于查询结果展示。具体操作,请参见创建仪表盘

费用说明

  • 目前,EMR不针对管理日志功能收取费用。

  • 当Logstore的计费模式为按使用功能计费时,推送EMR日志到日志服务后,日志服务根据存储空间、读取流量、请求数量、数据加工、数据投递等进行收费。更多信息,请参见按使用功能计费模式计费项

  • 当Logstore的计费模式为按写入数据量计费时,推送EMR日志到日志服务后,日志服务将根据原始写入数据量等进行收费。更多信息,请参见按写入数据量计费模式计费项

使用限制

  • 日志管理功能仅适用于新版数据湖(DataLake)、实时数据流(DataFlow)、数据分析(OLAP)、数据服务(DataServing)和数据湖(Hadoop)场景的集群。

  • 支持日志投递的服务包括hdfs、yarn、yarn_application、hive、spark、jindodata、tez、flink、hbase、zookeeper、kafka、presto、kudu、impala、flume、starrocks、clickhouse、kyuubi、rss和host(主机)。