Crear un Apache Conexión base HDFS con el Flow Service API
Una conexión base representa la conexión autenticada entre un origen y Adobe Experience Platform.
Este tutorial lo acompañará durante los pasos para crear una conexión base para Apache Hadoop Distributed File System (en lo sucesivo, "HDFS") utilizando el Flow Service API.
Introducción
Esta guía requiere una comprensión práctica de los siguientes componentes de Adobe Experience Platform:
- Fuentes: Experience Platform permite la ingesta de datos desde varias fuentes, al tiempo que le ofrece la capacidad de estructurar, etiquetar y mejorar los datos entrantes mediante Platform servicios.
- Zonas protegidas: Experience Platform proporciona zonas protegidas virtuales que dividen una sola Platform en entornos virtuales independientes para ayudar a desarrollar y evolucionar aplicaciones de experiencia digital.
Las secciones siguientes proporcionan información adicional que deberá conocer para conectarse correctamente a HDFS uso del Flow Service API.
Recopilar credenciales necesarias
url
connectionSpec.id
54e221aa-d342-4707-bcff-7a4bceef0001
.Uso de API de Platform
Para obtener información sobre cómo realizar llamadas correctamente a las API de Platform, consulte la guía de introducción a las API de Platform.
Cree una conexión base
Una conexión base retiene información entre el origen y Platform, incluidas las credenciales de autenticación del origen, el estado actual de la conexión y el ID único de conexión base. El ID de conexión base le permite explorar y navegar por archivos desde el origen e identificar los elementos específicos que desea introducir, incluida la información sobre sus tipos de datos y formatos.
Para crear un ID de conexión base, realice una solicitud de POST al /connections
extremo al proporcionar su HDFS credenciales de autenticación como parte de los parámetros de solicitud.
Formato de API
POST /connections
Solicitud
La siguiente solicitud crea una conexión base para HDFS:
curl -X POST \
'https://platform.adobe.io/data/foundation/flowservice/connections' \
-H 'Authorization: Bearer {ACCESS_TOKEN}' \
-H 'x-api-key: {API_KEY}' \
-H 'x-gw-ims-org-id: {ORG_ID}' \
-H 'x-sandbox-name: {SANDBOX_NAME}' \
-H 'Content-Type: application/json' \
-d '{
"name": "HDFS test connection",
"description": "A test connection for an HDFS source",
"auth": {
"specName": "Anonymous Authentication",
"params": {
"url": "{URL}"
}
},
"connectionSpec": {
"id": "54e221aa-d342-4707-bcff-7a4bceef0001",
"version": "1.0"
}
}'
auth.params.url
connectionSpec.id
54e221aa-d342-4707-bcff-7a4bceef0001
.Respuesta
Una respuesta correcta devuelve detalles de la conexión recién creada, incluido su identificador único (id
). Este ID es necesario para explorar los datos en el siguiente tutorial.
{
"id": "6a6a880a-2b15-4051-aa88-0a2b1570516d",
"etag": "\"1801bb7d-0000-0200-0000-5ed6ad580000\""
}
Pasos siguientes
Al seguir este tutorial, ha creado un HDFS conexión mediante el Flow Service y han obtenido el valor de ID único de la conexión. Puede utilizar este ID en el siguiente tutorial mientras aprende a hacer lo siguiente explore un almacenamiento en la nube de terceros mediante la API de Flow Service.