文档

ModifyHadoopDataSource - 修改hadoop数据源配置

更新时间:

修改hadoop数据源配置

调试

您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。

授权信息

当前API暂无授权信息透出。

请求参数

名称类型必填描述示例值
RegionIdstring

地域 ID。

说明 您可以调用 DescribeRegions 接口查看可用的地域 ID。
cn-hangzhou
DBInstanceIdstring

实例 ID。

gp-xxxxxxx
DataSourceIdstring

数据源 ID。

123
DataSourceDescriptionstring

服务描述,长度最长为 256 字符。

pxf for hdfs data source
DataSourceTypestring

数据源类型,取值:

  • mysql/postgresql

  • hdfs/hive

mysql
HadoopCreateTypestring

外部服务创建类型:

  • emr:emr 实例

  • selfCreate:自建

emr
HadoopHostsAddressstring

Hadoop 集群源节点在/etc/hosts 文件中的地址和 hostname。

192.168.220.128 master-1-1.c-0edfee2cccaecc75.cn-shanghai.emr.aliyuncs.com 192.168.220.129 core-1-1.c-0edfee2cccaecc75.cn-shanghai.emr.aliyuncs.com 192.168.220.130 core-1-2.c-0edfee2cccaecc75.cn-shanghai.emr.aliyuncs.com
HadoopCoreConfstring

Hadoop core-site.xml 文件内容

<?xml version="1.0" ?> <!-- Created at 2023-08-15 13:52:39.527 --> <configuration> <property> <name>hadoop.http.authentication.kerberos.keytab</name> <value>/etc/emr/hadoop-conf/http.keytab</value> </property> <property> <name>fs.oss.idle.timeout.millisecond</name> <value>30000</value> </property> <property> <name>fs.oss.download.thread.concurrency</name> <value>32</value> </property> </configuration>
HDFSConfstring

Hadoop hdfs-site.xml 文件内容。在选择开通 HDFS 外表时,该字段必填。

<?xml version="1.0" ?> <!-- Created at 2023-08-15 13:52:43.945 --> <configuration> <property> <name>dfs.datanode.cache.revocation.timeout.ms</name> <value>900000</value> </property> <property> <name>dfs.namenode.resource.check.interval</name> <value>5000</value> </property> </configuration>
HiveConfstring

Hadoop hive-site.xml 文件内容。在选择开通 HIVE 外表时,该字段必填。

<?xml version="1.0" ?> <!-- Created at 2023-08-15 13:52:50.646 --> <configuration> <property> <name>hive.exec.reducers.bytes.per.reducer</name> <value>256000000</value> </property> <property> <name>hive.stats.column.autogather</name> <value>false</value> </property> </configuration>
YarnConfstring

Hadoop yarn-site.xml 文件内容。在选择开通 HDFS 外表时,该字段必填。

<?xml version="1.0" ?> <!-- Created at 2023-08-15 13:53:29.021 --> <configuration> <property> <name>yarn.nodemanager.linux-container-executor.nonsecure-mode.local-user</name> <value>hadoop</value> </property> <property> <name>yarn.scheduler.fair.dynamic.max.assign</name> <value>true</value> </property> </configuration>
MapReduceConfstring

Hadoop mapred-site.xml 文件内容。在选择开通 HDFS 外表时,该字段必填。

<?xml version="1.0" ?> <!-- Created at 2023-08-15 13:53:28.962 --> <configuration> <property> <name>mapreduce.map.speculative</name> <value>true</value> </property> <property> <name>mapreduce.jobhistory.keytab</name> <value></value> </property> </configuration>
EmrInstanceIdstring

HadoopCreateType=Emr 时,此字段值为 emr 实例 id。

c-1234567

返回参数

名称类型描述示例值
object
RequestIdstring

请求 ID。

2C125605-266F-41CA-8AC5-3A643D4F42C5

示例

正常返回示例

JSON格式

{
  "RequestId": "2C125605-266F-41CA-8AC5-3A643D4F42C5"
}

错误码

访问错误中心查看更多错误码。

  • 本页导读 (1)