創(chuàng)建hadoop數(shù)據(jù)源配置。
調(diào)試
您可以在OpenAPI Explorer中直接運(yùn)行該接口，免去您計(jì)算簽名的困擾。運(yùn)行成功后，OpenAPI Explorer可以自動(dòng)生成SDK代碼示例。
授權(quán)信息
下表是API對(duì)應(yīng)的授權(quán)信息，可以在RAM權(quán)限策略語(yǔ)句的Action元素中使用，用來(lái)給RAM用戶或RAM角色授予調(diào)用此API的權(quán)限。具體說(shuō)明如下：
- 操作：是指具體的權(quán)限點(diǎn)。
- 訪問(wèn)級(jí)別：是指每個(gè)操作的訪問(wèn)級(jí)別，取值為寫(xiě)入（Write）、讀取（Read）或列出（List）。
- 資源類型：是指操作中支持授權(quán)的資源類型。具體說(shuō)明如下：
- 對(duì)于必選的資源類型，用背景高亮的方式表示。
- 對(duì)于不支持資源級(jí)授權(quán)的操作，用
全部資源表示。
- 條件關(guān)鍵字：是指云產(chǎn)品自身定義的條件關(guān)鍵字。
- 關(guān)聯(lián)操作：是指成功執(zhí)行操作所需要的其他權(quán)限。操作者必須同時(shí)具備關(guān)聯(lián)操作的權(quán)限，操作才能成功。
| 操作 | 訪問(wèn)級(jí)別 | 資源類型 | 條件關(guān)鍵字 | 關(guān)聯(lián)操作 |
|---|---|---|---|---|
| gpdb:CreateHadoopDataSource | create |
|
| 無(wú) |
請(qǐng)求參數(shù)
| 名稱 | 類型 | 必填 | 描述 | 示例值 |
|---|---|---|---|---|
| RegionId | string | 否 | 地域 ID。 說(shuō)明
您可以調(diào)用 DescribeRegions 接口查看可用的地域 ID。
| cn-hangzhou |
| DataSourceName | string | 否 | 服務(wù)名稱。 | hdfs_pxf |
| DataSourceDescription | string | 否 | 服務(wù)描述。 | pxf for hdfs data source |
| DataSourceType | string | 否 | 開(kāi)通 Hadoop 外部表類型，取值
| HDFS |
| HadoopCreateType | string | 否 | 外部服務(wù)類型：
| emr |
| HadoopHostsAddress | string | 否 | Hadoop 集群源節(jié)點(diǎn)在/etc/hosts 文件中的地址和 hostname。 | 192.168.220.128 master-1-1.c-xxx.cn-shanghai.emr.aliyuncs.com 192.168.220.129 core-1-1.c-xxx.cn-shanghai.emr.aliyuncs.com 192.168.220.130 core-1-2.c-xxx.cn-shanghai.emr.aliyuncs.com |
| HadoopCoreConf | string | 否 | Hadoop core-site.xml 文件內(nèi)容字符串。 | <?xml version="1.0" ?> <!-- Created at 2023-08-15 13:52:39.527 --> <configuration> <property> <name>hadoop.http.authentication.kerberos.keytab</name> <value>/etc/emr/hadoop-conf/http.keytab</value> </property> <property> <name>fs.oss.idle.timeout.millisecond</name> <value>30000</value> </property> <property> <name>fs.oss.download.thread.concurrency</name> <value>32</value> </property> </configuration> |
| HDFSConf | string | 否 | Hadoop hdfs-site.xml 文件內(nèi)容字符串。在選擇開(kāi)通 HDFS 外表時(shí)，該字段必填。 | <?xml version="1.0" ?> <!-- Created at 2023-08-15 13:52:43.945 --> <configuration> <property> <name>dfs.datanode.cache.revocation.timeout.ms</name> <value>900000</value> </property> <property> <name>dfs.namenode.resource.check.interval</name> <value>5000</value> </property> </configuration> |
| HiveConf | string | 否 | Hadoop hive-site.xml 文件內(nèi)容字符串。在選擇開(kāi)通 HIVE 外表時(shí)，該字段必填。 | <?xml version="1.0" ?> <!-- Created at 2023-08-15 13:52:50.646 --> <configuration> <property> <name>hive.exec.reducers.bytes.per.reducer</name> <value>256000000</value> </property> <property> <name>hive.stats.column.autogather</name> <value>false</value> </property> </configuration> |
| YarnConf | string | 否 | Hadoop yarn-site.xml 文件內(nèi)容字符串。在選擇開(kāi)通 HDFS 外表時(shí)，該字段必填。 | <?xml version="1.0" ?> <!-- Created at 2023-08-15 13:53:29.021 --> <configuration> <property> <name>yarn.nodemanager.linux-container-executor.nonsecure-mode.local-user</name> <value>hadoop</value> </property> <property> <name>yarn.scheduler.fair.dynamic.max.assign</name> <value>true</value> </property> </configuration> |
| DBInstanceId | string | 是 | 實(shí)例 ID。 | gp-xxxxxxx |
| MapReduceConf | string | 否 | Hadoop mapred-site.xml 文件內(nèi)容字符串。在選擇開(kāi)通 HDFS 外表時(shí)，該字段必填。 | xxxxxx |
| EmrInstanceId | string | 否 | HadoopCreateType=Emr 時(shí)，此字段值為 emr 實(shí)例 id。 | c-1234567 |
返回參數(shù)
示例
正常返回示例
JSON格式
{
"RequestId": "2C125605-266F-41CA-8AC5-3A643D4F42C5",
"DataSourceId": 123
}錯(cuò)誤碼
訪問(wèn)錯(cuò)誤中心查看更多錯(cuò)誤碼。