Surveiller les flux de données pour les sources dans l’interface utilisateur

Au Adobe Experience Platform, les données sont ingérées à partir d'une grande variété de sources, analysées dans l'Experience Platform et activées vers une grande variété de destinations. La plate-forme facilite le processus de suivi de ce flux de données potentiellement non linéaire en fournissant de la transparence avec les flux de données.

Le tableau de bord de surveillance vous fournit une représentation visuelle du parcours d’un flux de données. Vous pouvez utiliser une vue de surveillance agrégée et naviguer verticalement du niveau source à un flux de données et à une exécution de flux de données, ce qui vous permet de vue des mesures correspondantes qui contribuent à la réussite ou à l'échec d'un flux de données. Vous pouvez également utiliser la capacité de surveillance interservices du tableau de bord de surveillance pour surveiller le parcours d'un flux de données depuis une source, jusqu'à Identity Service et Profile.

Ce didacticiel décrit les étapes à suivre pour surveiller votre flux de données, en utilisant à la fois la vue de surveillance agrégée et la surveillance interservices.

Prise en main

Ce tutoriel nécessite une compréhension du fonctionnement des composants suivants d’Adobe Experience Platform :

  • Flux de données : Les flux de données sont une représentation des tâches de données qui déplacent les données entre les plateformes. Les flux de données sont configurés entre différents services, ce qui permet de déplacer les données des connecteurs source vers des jeux de données de cible, vers Identity et Profile et vers Destinations.
    • Flux de données s’exécute : Les exécutions de flux de données sont les tâches planifiées récurrentes en fonction de la configuration de fréquence des flux de données sélectionnés.
  • Sources : Experience Platform permet l’assimilation de données à partir de diverses sources tout en vous permettant de structurer, d’étiqueter et d’améliorer les données entrantes à l’aide des services de plate-forme.
  • Identity Service : profitez d’une meilleure compréhension de vos clients et de leurs comportements en rapprochant des identités entre appareils et systèmes.
  • Real-time Customer Profile : fournit un profil client en temps réel unifié basé sur des données agrégées issues de plusieurs sources.
  • Environnements de test : Experience Platform fournit des environnements de test virtuels qui divisent une instance de plateforme unique en environnements virtuels distincts pour favoriser le développement et l’évolution d’applications d’expérience numérique.

Vue de surveillance agrégée

Dans l'interface utilisateur de la plate-forme, sélectionnez Surveillance dans le volet de navigation de gauche pour accéder au tableau de bord Surveillance. Le tableau de bord Surveillance contient des mesures et des informations sur tous les flux de données de sources, y compris des informations sur l'état du trafic de données d'une source à Identity Service et à Profile.

Au centre du tableau de bord se trouve le panneau Origine assimilée, qui contient des mesures et des graphiques qui affichent les données sur les enregistrements ingérés et les enregistrements ayant échoué.

tableau de bord de surveillance

Par défaut, les données affichées contiennent les taux d’assimilation des dernières 24 heures. Sélectionnez Dernières 24 heures pour ajuster la période des enregistrements affichés.

change-date

Une fenêtre contextuelle de calendrier s'affiche, vous offrant des options pour d'autres périodes d'assimilation. Sélectionnez 30 derniers jours, puis Appliquer.

période d'ajustement

Les graphiques sont activés par défaut et vous pouvez les désactiver pour développer la liste des sources ci-dessous. Sélectionnez la bascule Mesures et graphiques pour désactiver les graphiques.

mesures et graphiques

Exportation de source Description
Enregistrements ingérés Nombre total d’enregistrements ingérés.
Échec des enregistrements Nombre total d’enregistrements qui n’ont pas été ingérés en raison d’erreurs dans les données.
Nombre total de flux de données ayant échoué Nombre total de flux de données avec un état failed.

La liste d'assimilation source affiche toutes les sources qui contiennent au moins un compte existant. La liste comprend également des informations sur le taux d'assimilation de chaque source, le nombre d'enregistrements ayant échoué et le nombre total de flux de données ayant échoué, en fonction de la période que vous avez appliquée.

source-assimilation

Pour trier à travers la liste des sources, sélectionnez Mes sources, puis sélectionnez votre catégorie de choix dans le menu déroulant. Par exemple, pour vous concentrer sur les enregistrements de cloud, sélectionnez enregistrement de cloud.

tri-par-catégorie

Pour vue de tous les flux de données existants dans toutes les sources, sélectionnez Flux de données.

vue-tous-flux de données

Vous pouvez également entrer une source dans la barre de recherche pour isoler une source unique. Une fois votre source identifiée, sélectionnez l’icône de filtre filter en regard de celle-ci pour afficher une liste de ses flux de données principaux.

rechercher

Une liste de flux de données s’affiche. Pour restreindre la liste et se concentrer sur les flux de données contenant des erreurs, sélectionnez Afficher uniquement les échecs.

affichage-échecs-uniquement

Localisez le flux de données à surveiller, puis sélectionnez l’icône de filtre filter située à côté de celui-ci pour afficher plus d’informations sur son état d’exécution.

flux de données

La page d’exécution de flux de données affiche des informations sur la date de début d’exécution de votre flux de données, la taille des données, l’état ainsi que la durée de traitement. Sélectionnez l’icône de filtre filter en regard de l’heure de début d’exécution du flux de données pour afficher ses détails d’exécution.

début d'exécution de flux de données

La page Détails de l'exécution du flux de données affiche des informations sur les métadonnées du flux de données, l'état d'assimilation partielle et le résumé de l'erreur. Le résumé de l'erreur contient l'erreur de niveau supérieur spécifique qui indique à quelle étape le processus d'assimilation a rencontré une erreur.

Faites défiler l'écran vers le bas pour afficher des informations plus spécifiques sur l'erreur qui s'est produite.

dataflow-run-details

Le panneau Erreurs d'exécution de flux de données affiche l'erreur et le code d'erreur spécifiques qui ont provoqué l'échec d'assimilation du flux de données. Dans ce scénario, une erreur de transformation du mappeur s'est produite, entraînant l'échec de 24 enregistrements.

Sélectionnez Fichiers pour plus d’informations.

dataflow-run-errors

Le panneau Fichiers contient des informations sur le nom et le chemin du fichier.

Pour une représentation plus détaillée de l'erreur, sélectionnez diagnostics d'erreur de Prévisualisation.

files

La fenêtre prévisualisation des diagnostics d'erreur s'affiche, affichant une prévisualisation allant jusqu'à 100 erreurs dans le flux de données. Vous pouvez sélectionner Télécharger pour récupérer une commande curl, qui vous permet ensuite de télécharger les diagnostics d'erreur.

Lorsque vous avez terminé, sélectionnez Fermer.

erreurs-diagnostics

Vous pouvez utiliser le chemin de navigation dans l’en-tête supérieur pour revenir au tableau de bord Surveillance. Sélectionnez Exécuter le début : 14/02/2021, 09:47 PM pour revenir à la page précédente, puis sélectionnez Flux de données : Démonstration de l'ingestion des données de fidélité : échec du retour à la page des flux de données.

fil d'Ariane

Surveillance interservices

La partie supérieure du tableau de bord contient une représentation du flux d'assimilation du niveau source, à Identity Service et à Profile. Chaque cellule comprend un marqueur de point qui indique la présence d’erreurs survenues à ce stade d’assimilation. Un point vert signifie une ingestion sans erreur, tandis qu'un point rouge signifie qu'une erreur s'est produite à ce stade particulier de l'assimilation.

surveillance inter-services

Dans la page des flux de données, recherchez un flux de données réussi et sélectionnez l’icône de filtre filter à côté de celui-ci pour afficher ses informations d’exécution de flux de données.

dataflow-success

La page d'assimilation de la source contient des informations qui confirment la réussite de l'assimilation de votre flux de données. À partir de là, vous pouvez début surveiller le parcours de votre flux de données depuis le niveau source jusqu'à Identity Service, puis jusqu'à Profile.

Sélectionnez Identités pour afficher l'assimilation à l'étape Identités.

sources

Identity metrics

La page Traitement des identités contient des informations sur les enregistrements assimilés à Identity Service, y compris le nombre d'identités ajoutées, les graphiques créés et les graphiques mis à jour.

Sélectionnez l'icône de filtre filter en regard de l'heure de début d'exécution du flux de données pour afficher plus d'informations sur votre exécution du flux de données Identity.

identités

Mesures d’identité Description
Enregistrements reçus Nombre d'enregistrements reçus de Data Lake.
Échec des enregistrements Nombre d’enregistrements qui n’ont pas été ingérés dans la plate-forme en raison d’erreurs dans les données.
Enregistrements ignorés Nombre d'enregistrements qui ont été ingérés, mais pas dans Identity Service car il n'y avait qu'un seul identifiant dans la ligne d'enregistrement.
Enregistrements ingérés Nombre d'enregistrements ingérés dans Identity Service.
Total des enregistrements Nombre total de tous les enregistrements, y compris les enregistrements ayant échoué, les enregistrements ignorés, Identities ajoutés et les enregistrements dupliqués.
Identités ajoutées Nombre de nouveaux identifiants nets ajoutés à Identity Service.
Graphiques créés Nombre de nouveaux graphiques d'identité nets créés dans Identity Service.
Graphiques mis à jour Nombre de graphiques d'identité existants mis à jour avec de nouveaux bords.
Exécutions de flux de données ayant échoué Nombre d’exécutions de flux de données ayant échoué.
Durée du traitement Horodatage du début de l’assimilation jusqu’à la fin.
État Définit l’état général d’un flux de données. Les valeurs d’état possibles sont les suivantes :
  • Success: Indique qu’un flux de données est principal et qu’il ingère des données en fonction du planning indiqué.
  • Failed: Indique que le processus d’activation d’un flux de données a été interrompu en raison d’erreurs.
  • Processing: Indique que le flux de données n’est pas encore principal. Cet état est souvent rencontré immédiatement après la création d’un nouveau flux de données.

La page Détails de l'exécution de flux de données affiche plus d'informations sur votre exécution de flux de données Identity, y compris son ID d'organisation IMS et son ID d'exécution de flux de données. Cette page affiche également le code d'erreur et le message d'erreur correspondants fournis par Identity Service, en cas d'erreur dans le processus d'assimilation.

Sélectionnez Exécuter le début : 14/02/2021, 21:47 PM pour revenir à la page précédente.

identities-dataflow-run

Dans la page Traitement d'identité, sélectionnez Profils pour afficher l'état d'assimilation des enregistrements à l'étape Profils.

profils sélectionnés

Profile mesures

La page Profil processing contient des informations sur les enregistrements ingérés dans Profile, notamment le nombre de fragments de profil créés, les fragments de profil mis à jour et le nombre total de fragments de profil.

Sélectionnez l'icône de filtre filter en regard de l'heure de début d'exécution du flux de données pour afficher plus d'informations sur votre exécution du flux de données Profile.

profils

Mesures de profil Description
Enregistrements reçus Nombre d'enregistrements reçus de Data Lake.
Échec des enregistrements Nombre d'enregistrements qui ont été ingérés, mais pas dans Profile en raison d'erreurs.
Fragments de profil ajoutés Nombre de nouveaux fragments Profile nets ajoutés.
Profil de fragments mis à jour Nombre de fragments Profile existants mis à jour
Nombre total de fragments de Profil Nombre total d’enregistrements écrits dans Profile, y compris tous les fragments Profile existants mis à jour et les nouveaux fragments Profile créés.
Exécutions de flux de données ayant échoué Nombre d’exécutions de flux de données ayant échoué.
Durée du traitement Horodatage du début de l’assimilation jusqu’à la fin.
État Définit l’état général d’un flux de données. Les valeurs d’état possibles sont les suivantes :
  • Success: Indique qu’un flux de données est principal et qu’il ingère des données en fonction du planning indiqué.
  • Failed: Indique que le processus d’activation d’un flux de données a été interrompu en raison d’erreurs.
  • Processing: Indique que le flux de données n’est pas encore principal. Cet état est souvent rencontré immédiatement après la création d’un nouveau flux de données.

La page Détails de l'exécution de flux de données affiche plus d'informations sur votre exécution de flux de données Profile, y compris son ID d'organisation IMS et son ID d'exécution de flux de données. Cette page affiche également le code d'erreur et le message d'erreur correspondants fournis par Profile, en cas d'erreur dans le processus d'assimilation.

profils-flux de données exécutés

Étapes suivantes

En suivant ce didacticiel, vous avez suivi avec succès le flux de données d’assimilation du niveau source à Identity Service et à Profile, en utilisant le tableau de bord Surveillance. Vous avez également identifié avec succès des erreurs qui ont contribué à l'échec des flux de données pendant le processus d'assimilation. Pour plus d’informations, voir les documents suivants :

Sur cette page