Jindo AuditLog使用说明

审计信息

2020-07-09 18:29:24.689 allowed=true ugi=hadoop (auth:SIMPLE) ip=127.0.0.1 ns=test-block cmd=CreateFileletRequest src=jfs://test-block/test/test.snappy.parquet dst=null perm=::rwxrwxr-x

使用AuditLog

1. 进入SmartData服务。
   1. 登录阿里云E-MapReduce控制台。
      
   2. 在顶部菜单栏处，根据实际情况选择地域和资源组。
      
   3. 单击上方的集群管理页签。
      
   4. 在集群管理页面，单击相应集群所在行的详情。
      
   5. 在左侧导航栏，选择集群服务。
2. 进入 namespace 服务配置。
   1. 单击配置页签。
   2. 单击namespace。
      
3. 配置如下参数。
   1. 在 namespace 页签，单击右上角的自定义配置。
   2. 在新增配置项对话框中，新增如下参数。

      参数	描述	是否必填
      namespace.auditlog.enable	true：打开AuditLog功能。 false：关闭AuditLog功能。	是
      namespace.auditlog.oss.uri	存储AuditLog的OSS Bucket。 请参见oss://<yourbucket>/auditLog格式配置。 <yourbucket>请替换为待存储的Bucket的名称。	是
      namespace.auditlog.oss.accessKey	存储OSS的AccessKey ID。	否
      namespace.auditlog.oss.accessSecret	存储OSS的AccessKey Secret。	否
      namespace.auditlog.oss.endpoint	存储OSS的Endpoint。	否

   3. 单击部署客户端配置。
   4. 在执行集群操作对话框中，输入执行原因，单击确定。
   5. 在确认对话框中，单击确定。
4. 重启服务。
   1. 单击右上角的操作 > 重启Jindo Namespace Service。
   2. 在执行集群操作对话框中，输入执行原因，单击确定。
   3. 在确认对话框中，单击确定。
5. 配置清理策略。
   OSS提供了lifeCycle功能来管理OSS上文件的生命周期，您可以利用该功能来自定义Log文件的清理或者保存时间。
   1. 登录 OSS管理控制台。
   2. 单击创建的存储空间。
   3. 在左侧导航栏，单击基础设置 > 生命周期，在生命周期单击设置。
   4. 单击创建规则，在创建生命周期规则配置各项参数。
   5. 单击确定。

使用Jindo auditLog分析功能

JindoFS为存储在OSS上的AuditLog文件提供Shell命令的分析功能，通过MR任务分析Log文件，提供Top-N活跃操作命令分析、Top-N活跃IP分析。您可以使用jindo auditlog命令，使用该功能。

jindo auditlog --src oss://<yourbucket>/auditlog/ --ns test --type ip --day 1 --top 2

16 openFileStatusRequest
6  deleteFileletRequest