创建 Apache HDFS基本连接使用 Flow Service API
NOTE
Apache HDFS连接器处于测试阶段。 请参阅 源概述 有关使用Beta标记的连接器的更多信息。
基本连接表示源和Adobe Experience Platform之间的已验证连接。
本教程将指导您完成创建基本连接的步骤。 Apache Hadoop Distributed File System (以下简称“HDFS")使用 Flow Service API.
快速入门
本指南要求您对 Adobe Experience Platform 的以下组件有一定了解:
以下部分提供成功连接时需要了解的其他信息 HDFS 使用 Flow Service API。
收集所需的凭据
凭据
描述
url
URL定义连接到所需的身份验证参数 HDFS 匿名。 有关如何获取此值的更多信息,请参阅 此 HDFS 文档.
connectionSpec.id
连接规范返回源的连接器属性,包括与创建基础连接和源连接相关的验证规范。 的连接规范ID AdWords 为:
54e221aa-d342-4707-bcff-7a4bceef0001
.使用平台API
有关如何成功调用Platform API的信息,请参阅 Platform API快速入门.
创建基本连接
基本连接会保留您的源和平台之间的信息,包括源的身份验证凭据、连接的当前状态以及唯一的基本连接ID。 基本连接ID允许您浏览和浏览源中的文件,并标识要摄取的特定项目,包括有关其数据类型和格式的信息。
POST要创建基本连接ID,请向 /connections
端点,同时提供 HDFS 作为请求参数一部分的身份验证凭据。
API格式
POST /connections
请求
以下请求为创建基本连接 HDFS:
curl -X POST \
'https://platform.adobe.io/data/foundation/flowservice/connections' \
-H 'Authorization: Bearer {ACCESS_TOKEN}' \
-H 'x-api-key: {API_KEY}' \
-H 'x-gw-ims-org-id: {ORG_ID}' \
-H 'x-sandbox-name: {SANDBOX_NAME}' \
-H 'Content-Type: application/json' \
-d '{
"name": "HDFS test connection",
"description": "A test connection for an HDFS source",
"auth": {
"specName": "Anonymous Authentication",
"params": {
"url": "{URL}"
}
},
"connectionSpec": {
"id": "54e221aa-d342-4707-bcff-7a4bceef0001",
"version": "1.0"
}
}'
属性
描述
auth.params.url
用于定义连接到所需的身份验证参数的URL HDFS 匿名
connectionSpec.id
此 HDFS 连接规范ID:
54e221aa-d342-4707-bcff-7a4bceef0001
.响应
成功的响应会返回新创建连接的详细信息,包括其唯一标识符(id
)。 在下个教程中,需要此ID才能浏览您的数据。
{
"id": "6a6a880a-2b15-4051-aa88-0a2b1570516d",
"etag": "\"1801bb7d-0000-0200-0000-5ed6ad580000\""
}
后续步骤
在本教程之后,您已创建一个 HDFS 连接使用 Flow Service API并已获取连接的唯一ID值。 在学习如何操作时,您可在下一教程中使用此ID 使用流量服务API探索第三方云存储.
recommendation-more-help
337b99bb-92fb-42ae-b6b7-c7042161d089