HDFS数据源

界面:

image

HDFS 数据源配置说明

配置项名称

配置项值说明或者示例

数据源名称

不能包含英文字符、数字、汉字之外的特殊字符, 编辑时不可修改。

数据源类型

HDFS

DefaultFS

HDFS 默认文件系统的 URI,即 NameNode 的地址。该值对应 Hadoop 配置文件 core-site.xml 中的 fs.defaultFS 参数。

用户名

访问 HDFS 所使用的用户名。

扩展参数

以 JSON 格式提供额外的 Hadoop 配置参数,常用于配置 HA(高可用)集群。

示例 (HA 配置):{"dfs.client.failover.proxy.provider.emr-cluster": "org.apache.hadoop.hdfs.server.namenode.ha.ConfiguredFailoverProxyProvider", "dfs.nameservices": "emr-cluster", "dfs.ha.namenodes.emr-cluster": "namenode1,namenode2", "dfs.namenode.rpc-address.emr-cluster.namenode1": "ip1:8021", "dfs.namenode.rpc-address.emr-cluster.namenode2": "ip2:8021"}

登录方式

选择连接 HDFS 的认证方式,支持“简单认证”和“Kerberos认证”。

Kerberos 认证配置

当“登录方式”选择为“Kerberos认证”时,需要配置以下参数。

配置项名称

配置项值说明或者示例

Keytab文件

上传包含 Principal 凭证的 Keytab 认证文件。

Conf文件

上传 Kerberos 的配置文件 krb5.conf

Principal

Kerberos 客户端主体,必须与提供的 Keytab 文件匹配。