Validación de ingesta de streaming

La introducción por transmisión le permite cargar los datos en Adobe Experience Platform mediante transmisión por secuencias de puntos finales en tiempo real. Las API de ingesta de transmisión admiten dos modos de validación: sincrónico y asincrónico.

Primeros pasos

Esta guía requiere una comprensión práctica de los siguientes componentes de Adobe Experience Platform:

Leer llamadas de API de muestra

Este tutorial proporciona llamadas de API de ejemplo para demostrar cómo dar formato a las solicitudes. Estas incluyen rutas, encabezados obligatorios y cargas de solicitud con el formato correcto. También se proporciona el JSON de muestra devuelto en las respuestas de API. Para obtener información sobre las convenciones utilizadas en la documentación de las llamadas de API de ejemplo, consulte la sección sobre cómo leer llamadas de API de ejemplo en el Experience Platform guía de solución de problemas.

Recopilar valores para los encabezados obligatorios

Para realizar llamadas a Platform API, primero debe completar el tutorial de autenticación. Al completar el tutorial de autenticación, se proporcionan los valores para cada uno de los encabezados necesarios en todas las Experience Platform Llamadas de API, como se muestra a continuación:

  • Autorización: Portador {ACCESS_TOKEN}
  • x-api-key: {API_KEY}
  • x-gw-ims-org-id: {ORG_ID}

Todos los recursos de Experience Platform, incluidos los que pertenecen al Schema Registry, están aisladas para zonas protegidas virtuales específicas. Todas las solicitudes a Platform Las API requieren un encabezado que especifique el nombre de la zona protegida en la que se realizará la operación:

  • x-sandbox-name: {SANDBOX_NAME}
NOTE
Para obtener más información sobre las zonas protegidas en Platform, consulte la documentación general de zona protegida.

Todas las solicitudes que contienen una carga útil (POST, PUT, PATCH) requieren un encabezado adicional:

  • Content-Type: application/json

Cobertura de validación

Streaming Validation Service abarca la validación en las siguientes áreas:

  • Intervalo
  • Presencia
  • Enumeración
  • Patrón
  • Tipo
  • Formato

Validación sincrónica

La validación sincrónica es un método de validación que proporciona información inmediata sobre el motivo por el que ha fallado una ingesta. Sin embargo, si se produce un error, se pierden los registros que no superan la validación y se impide que se envíen de forma descendente. Como resultado, la validación sincrónica solo debe utilizarse durante el proceso de desarrollo. Al realizar la validación sincrónica, se informa a los llamadores tanto del resultado de la validación XDM como, si falla, del motivo del error.

De forma predeterminada, la validación sincrónica no está activada. Para habilitarlo, debe pasar el parámetro de consulta opcional syncValidation=true al realizar llamadas de API. Además, la validación sincrónica solo está disponible actualmente si el punto final de la secuencia se encuentra en el centro de datos de VA7.

NOTE
El syncValidation El parámetro de consulta solo está disponible para el extremo de mensaje único y no se puede usar para el extremo por lotes.

Si un mensaje falla durante la validación sincrónica, no se escribirá en la cola de salida, que proporciona comentarios inmediatos a los usuarios.

NOTE
Es posible que los cambios de esquema no estén disponibles inmediatamente porque los cambios se almacenan en caché. Espere hasta quince minutos para que se actualice la caché.

Formato de API

POST /collection/{CONNECTION_ID}?syncValidation=true
Parámetro
Descripción
{CONNECTION_ID}
El id valor de la conexión de flujo continuo creada anteriormente.

Solicitud

Envíe la siguiente solicitud para introducir datos a la entrada de datos con validación sincrónica:

curl -X POST https://dcs.adobedc.net/collection/{CONNECTION_ID}?syncValidation=true \
  -H "Content-Type: application/json" \
  -d '{JSON_PAYLOAD}'
Parámetro
Descripción
{JSON_PAYLOAD}
El cuerpo JSON de los datos que desea introducir.

Respuesta

Con la validación sincrónica habilitada, una respuesta correcta incluye los errores de validación encontrados en su carga útil:

{
    "type": "http://ns.adobe.com/adobecloud/problem/data-collection-service/inlet",
    "status": 400,
    "title": "Invalid XDM Message Format",
    "report": {
        "message": "inletId: [6aca7aa2d87ebd6b2780ca5724d94324a14475f140a2b69373dd5c714430dfd4] imsOrgId: [7BF122A65C5B3FE40A494026@AdobeOrg] Message is invalid",
        "cause": {
            "_streamingValidation": [
                {
                    "schemaLocation": "#",
                    "pointerToViolation": "#",
                    "causingExceptions": [
                        {
                            "schemaLocation": "#",
                            "pointerToViolation": "#",
                            "causingExceptions": [],
                            "keyword": "additionalProperties",
                            "message": "extraneous key [workEmail] is not permitted"
                        },
                        {
                            "schemaLocation": "#",
                            "pointerToViolation": "#",
                            "causingExceptions": [],
                            "keyword": "additionalProperties",
                            "message": "extraneous key [person] is not permitted"
                        },
                        {
                            "schemaLocation": "#/properties/_id",
                            "pointerToViolation": "#/_id",
                            "causingExceptions": [],
                            "keyword": "type",
                            "message": "expected type: String, found: Long"
                        }
                    ],
                    "message": "3 schema violations found"
                }
            ]
        }
    }
}

La respuesta anterior enumera cuántas violaciones de esquema se encontraron y cuáles fueron. Por ejemplo, esta respuesta indica que las claves workEmail y person no se definieron en el esquema y, por lo tanto, no están permitidos. También indica el valor de _id como incorrecto, ya que el esquema esperaba un string, pero a long en su lugar. Tenga en cuenta que una vez que se encuentren cinco errores, el servicio de validación parada Procesando ese mensaje. Sin embargo, se seguirán analizando otros mensajes.

Validación asincrónica

La validación asincrónica es un método de validación que no proporciona comentarios inmediatos. En su lugar, los datos se envían a un lote fallido en Data Lake para evitar la pérdida de datos. Estos datos con errores se pueden recuperar más adelante para su análisis y reproducción. Este método debe utilizarse en producción. A menos que se solicite lo contrario, la ingesta de transmisión funciona en modo de validación asincrónico.

Formato de API

POST /collection/{CONNECTION_ID}
Parámetro
Descripción
{CONNECTION_ID}
El id valor de la conexión de flujo continuo creada anteriormente.

Solicitud

Envíe la siguiente solicitud para introducir datos a la entrada de datos con validación asíncrona:

curl -X POST https://dcs.adobedc.net/collection/{CONNECTION_ID} \
  -H "Content-Type: application/json" \
  -d '{JSON_PAYLOAD}'
Parámetro
Descripción
{JSON_PAYLOAD}
El cuerpo JSON de los datos que desea introducir.
NOTE
No se requiere ningún parámetro de consulta adicional, ya que la validación asincrónica está habilitada de forma predeterminada.

Respuesta

Con la validación asincrónica habilitada, una respuesta correcta devuelve lo siguiente:

{
    "inletId": "f6ca9706d61de3b78be69e2673ad68ab9fb2cece0c1e1afc071718a0033e6877",
    "xactionId": "1555445493896:8600:8",
    "receivedTimeMs": 1555445493932,
    "syncValidation": {
        "skipped": true
    }
}

Tenga en cuenta cómo la respuesta indica que la validación sincrónica se ha omitido, ya que no se ha solicitado explícitamente.

Apéndice

Esta sección contiene información sobre el significado de los distintos códigos de estado para las respuestas de ingesta de datos.

Códigos de estado

Código de estado
Lo que significa
200
Correcto. Para la validación sincrónica, significa que ha superado las comprobaciones de validación. Para la validación asincrónica, significa que solo ha recibido correctamente el mensaje. Los usuarios pueden averiguar el estado final del mensaje observando el conjunto de datos.
400
Error. Hay un problema con su solicitud. Se recibe un mensaje de error con más detalles de los servicios de validación de streaming.
401
Error. Su solicitud no está autorizada: deberá solicitarla con un token de portador. Para obtener más información sobre cómo solicitar acceso, consulte esto tutorial o esto publicación de blog.
500
Error. Hay un error interno del sistema.
501
Error. Esto significa que la validación sincrónica es no compatible con esta ubicación.
503
Error. El servicio no está disponible en este momento. Los clientes deben intentarlo al menos tres veces con una estrategia de retroceso exponencial.
recommendation-more-help
2ee14710-6ba4-4feb-9f79-0aad73102a9a