[Ultimate]{class="badge positive"}

Amazon Kinesis source

IMPORTANT
La variable Amazon Kinesis source est disponible dans le catalogue des sources pour les utilisateurs qui ont acheté Real-time Customer Data Platform Ultimate.

Adobe Experience Platform fournit une connectivité native pour les fournisseurs cloud tels qu’AWS, Google Cloud Platform, et Azure. Vous pouvez importer vos données de ces systèmes dans Platform.

Les sources de stockage dans le cloud peuvent introduire vos propres données dans Platform sans avoir à les télécharger, les formater ou les transférer. Les données ingérées peuvent être formatées sous la forme XDM JSON, XDM Parquet ou délimitées. Chaque étape du processus est intégrée dans le processus Sources. Platform vous permet d’importer des données depuis Amazon Kinesis en temps réel.

NOTE
Le facteur d’échelle pour Kinesis doit être augmenté si vous devez ingérer des données à volume élevé. Actuellement, volume maximum de données que vous pouvez importer de votre Kinesis compte à Platform est de 4 000 enregistrements par seconde. Pour augmenter et ingérer des données à volume supérieur, contactez votre représentant Adobe.

Conditions préalables

La section suivante fournit des informations supplémentaires sur la configuration de prérequis requise avant de pouvoir créer une Kinesis connexion source.

Configuration de la stratégie d’accès

A Kinesis Le flux nécessite les autorisations suivantes pour créer une connexion source :

  • GetShardIterator
  • GetRecords
  • DescribeStream
  • ListStreams

Ces autorisations sont organisées à l’aide de la fonction Kinesis et sont vérifiées par Platform une fois que vous avez saisi vos informations d’identification et sélectionné votre flux de données.

L’exemple ci-dessous illustre les droits d’accès minimaux requis pour créer une Kinesis connexion source.

{
    "Version": "2012-10-17",
    "Statement": [
        {
            "Effect": "Allow",
            "Action": [
                "kinesis:GetShardIterator",
                "kinesis:GetRecords",
                "kinesis:DescribeStream",
                "kinesis:ListStreams"
            ],
            "Resource": [
                "arn:aws:kinesis:us-east-2:901341027596:stream/*"
            ]
        }
    ]
}
Propriété
Description
kinesis:GetShardIterator
Action requise pour parcourir les enregistrements.
kinesis:GetRecords
Action requise pour obtenir des enregistrements à partir d’un décalage ou d’un identifiant de partage spécifique.
kinesis:DescribeStream
Action qui renvoie des informations concernant le flux, y compris la carte partagée, nécessaire pour générer un identifiant partagé.
kinesis:ListStreams
Action requise pour répertorier les flux disponibles que vous pouvez sélectionner dans l’interface utilisateur.

Pour plus d’informations sur le contrôle de l’accès à Kinesis flux de données, voir ce qui suit Kinesis document.

Configuration du type d’itérateur

Kinesis prend en charge les types d’itérateur suivants pour vous permettre de spécifier l’ordre de lecture de vos données :

Type d’itérateur
Description
AT_SEQUENCE_NUMBER
Les données sont lues à partir d’une position identifiée par un numéro de séquence spécifique.
AFTER_SEQUENCE_NUMBER
Les données sont lues en commençant après la position identifiée par un numéro de séquence spécifique.
AT_TIMESTAMP
Les données sont lues à partir d’une position identifiée par un horodatage spécifique.
TRIM_HORIZON
Les données sont lues à partir de l’enregistrement de données le plus ancien.
LATEST
Les données sont lues à partir de l’enregistrement de données le plus récent.

A Kinesis La source de l’interface utilisateur ne prend actuellement en charge que TRIM_HORIZON, tandis que l’API prend en charge les deux TRIM_HORIZON et LATEST comme modes d’obtention des données. La valeur d’itérateur par défaut utilisée par Platform pour la variable Kinesis la source est TRIM_HORIZON.

Pour plus d’informations sur les types d’itérateur, voir : Kinesis document.

Connexion Amazon Kinesis to Platform

La documentation ci-dessous fournit des informations sur la connexion d’Amazon Kinesis à à l’aide d’API ou de l’interface utilisateur :Platform

Utiliser les API

Utiliser l’interface utilisateur

recommendation-more-help
337b99bb-92fb-42ae-b6b7-c7042161d089