Überwachen von Datenflüssen für Streaming-Quellen in der Benutzeroberfläche

In diesem Tutorial werden die Schritte zum Überwachen von Datenflüssen für Streaming-Quellen mithilfe des Quellen Arbeitsbereich.

Erste Schritte

Dieses Tutorial setzt ein Grundverständnis der folgenden Komponenten von Adobe Experience Platform voraus:

  • Datenflüsse: Datenflüsse sind eine Darstellung von Datenvorgängen, die Daten über Platform verschieben. Datenflüsse werden über verschiedene Dienste hinweg konfiguriert und helfen beim Verschieben von Daten aus Quell-Connectoren in Zieldatensätze, in Identity und Profile sowie in Destinations.
    • Datenfluss-Abläufe: Datenflüsse sind die wiederkehrenden geplanten Aufträge, die auf der Frequenzkonfiguration ausgewählter Datenflüsse basieren.
  • Quellen: Experience Platform ermöglicht die Aufnahme von Daten aus verschiedenen Quellen und bietet Ihnen die Möglichkeit, die eingehenden Daten mithilfe von Platform-Services zu strukturieren, zu kennzeichnen und anzureichern.
  • Sandboxes: Experience Platform bietet virtuelle Sandboxes, die eine einzelne Platform-Instanz in separate virtuelle Umgebungen unterteilen, damit Sie Programme für digitale Erlebnisse entwickeln und weiterentwickeln können.

Überwachen von Datenflüssen für Streaming-Quellen

Wählen Sie in der Platform-Benutzeroberfläche die Option Quellen in der linken Navigationsleiste, um auf den Arbeitsbereich Quellen zuzugreifen. Der Bildschirm Katalog zeigt eine Vielzahl von Quellen an, mit denen Sie ein Konto erstellen können.

Um vorhandene Datenflüsse für Streaming-Quellen anzuzeigen, wählen Sie Datenflüsse aus der oberen Kopfzeile.

Katalog

Die Datenflüsse -Seite enthält eine Liste aller in Ihrem Unternehmen vorhandenen Datenflüsse, einschließlich Informationen zu ihren Quelldaten, Kontonamen und dem Ausführungsstatus des Datenflusses.

Wählen Sie den Namen des Datenflusses aus, den Sie anzeigen möchten.

Datenflüsse

Die folgende Tabelle enthält weitere Informationen zu den Ausführungsstatus von Datenflüssen:

Status
Beschreibung
Abgeschlossen
Die Completed Der Status gibt an, dass alle Datensätze für den entsprechenden Datenfluss innerhalb des Zeitraums von einer Stunde verarbeitet wurden. A Completed -Status kann in Datenflug-Ausführungen weiterhin Fehler enthalten.
Erfolgreich
Die Success Der Status gibt an, dass alle Datensätze für den entsprechenden Datenfluss innerhalb des Zeitraums von einer Stunde verarbeitet wurden und dass im Verlauf des Datenflusses keine Fehler aufgetreten sind.
Verarbeitung läuft
Die Processing Status gibt an, dass ein Datenfluss noch nicht aktiv ist. Dieser Status tritt oft unmittelbar nach der Erstellung eines neuen Datenflusses auf.
Fehler
Die Error Status gibt an, dass der Aktivierungsprozess eines Datenflusses unterbrochen wurde.
Keine Ausführungen
Die No runs Der Status gibt an, dass der Datenfluss erstellt wurde, aber keine Datenfluss-Ausführungen gestartet wurden.

Die Datenflussaktivität Seite zeigt spezifische Informationen zu Ihrem Streaming-Datenfluss an. Das obere Banner enthält die kumulative Anzahl der erfassten Datensätze und der fehlgeschlagenen Datensätze für alle Streaming-Datenfluss-Ausführungen in Ihrem ausgewählten Datumsbereich.

dataflow-activity

Standardmäßig enthalten die angezeigten Daten die Aufnahmeraten der letzten sieben Tage. Auswählen Letzte 7 Tage , um den Zeitrahmen der angezeigten Datensätze anzupassen.

Es wird ein Kalender-Popup-Fenster mit Optionen für alternative Erfassungszeitrahmen angezeigt. Sie können den Zeitrahmen für die Ausführung des Datenflusses so konfigurieren, dass die Flüsse der letzten sieben Tage oder der letzten 30 Tage angezeigt werden. Alternativ können Sie den interaktiven Kalender so konfigurieren, dass ein benutzerdefinierter Zeitrahmen Ihrer Wahl festgelegt wird. Wenn Sie fertig sind, wählen Sie Anwenden aus.

calendar

In der unteren Hälfte der Seite werden Informationen zur Anzahl der empfangenen, aufgenommenen und fehlgeschlagenen Datensätze pro Fluss angezeigt. Jeder Flusslauf wird in einem stündlichen Fenster aufgezeichnet.

dataflow-run

Datenfluss-Ausführungsmetriken dataflow-run-metrics

Jeder einzelne Datenfluss zeigt die folgenden Details an:

  • Start des Datenflusses: Die Zeit, zu der der Datenfluss gestartet wurde.
  • Verarbeitungszeit: Die Zeitdauer, die die Verarbeitung des Datenflusses dauerte.
  • Erhaltene Datensätze: Die Gesamtzahl der Datensätze, die im Datenfluss von einem Quell-Connector empfangen wurden.
  • Aufgenommene Datensätze: Die Gesamtzahl der erfassten Datensätze in Data Lake.
  • Datensätze mit Warnungen: Die Gesamtanzahl der Datensätze mit erfassten Warnungen. Alle Mapper-Transformationsfehler werden als Warnungen gemeldet und Zeilen, die teilweise erfasst werden, werden als success mit einer Warnung. Hinweis: Die Aufnahme von Datensätzen mit Warnungen wird nur für Streaming-Quellen unterstützt.
  • Datensätze fehlgeschlagen: Die Anzahl der Datensätze, die nicht in erfasst wurden Data Lake aufgrund von Fehlern in den Daten.
  • Aufnahmerate: Die Erfolgsrate der Datensätze, die in Data Lake. Diese Metrik ist anwendbar, wenn Teilaufnahme aktiviert ist.
  • Status: Stellt den Status dar, in dem sich der Datenfluss befindet: Entweder Abgeschlossen oder Verarbeitung. Abgeschlossen bedeutet, dass alle Datensätze für den entsprechenden Datenfluss innerhalb des Zeitraums von einer Stunde verarbeitet wurden. Verarbeitung bedeutet, dass die Ausführung des Datenflusses noch nicht abgeschlossen ist.

Die Übersicht über Datenfluss -Seite enthält zusätzliche Informationen zu Ihrem Datenfluss, z. B. die zugehörige Datenfluss-Ausführungskennung, den Zieldatensatz und die Organisations-ID.

Ein Fluss mit Fehlern enthält auch die Fehler bei Datenfluss-Ausführung -Bedienfeld, das den bestimmten Fehler anzeigt, der zum Fehlschlagen der Ausführung geführt hat, sowie die Gesamtzahl der fehlgeschlagenen Datensätze.

dataflow-run-overview

Anzeigen von Datensätzen mit Warnhinweisen warnings

Datensätze mit Warnungen zeigt eine Liste der Mapper-Transformationswarnungen an, die während der Ausführung des Workflows aufgetreten sind. Zeilen, die teilweise erfasst werden, werden als erfolgreich betrachtet und mit Warnungen versehen, wenn Mapper-Transformationsfehler gefunden werden.

Standardmäßig werden alle Mapper-Transformationsfehler als Warnungen betrachtet, es sei denn, es handelt sich um einen der folgenden Fehler:

  • Syntaxfehler
  • Verweise auf nicht vorhandene Attribute
  • Eine Abweichung von XDM-Datentypen

Um die Fehlerdiagnose anzuzeigen, wählen Sie Vorschau der Fehlerdiagnose.

records-with-warning

Die Fehlerdiagnose - Vorschau -Fenster können Sie eine Vorschau von bis zu 100 Fehlern und/oder Warnungen bezüglich Ihres Datenflusses anzeigen. Von hier können Sie auch das Fehlermanifest für die Aufnahme herunterladen, um weitere Informationen zu erhalten, indem Sie die Data Access API.

Diagnose

Nächste Schritte

In diesem Tutorial haben Sie erfolgreich die Quellen Arbeitsbereich zum Überwachen Ihrer Streaming-Datenflüsse und Identifizieren der Fehler, die zu fehlgeschlagenen Datenflüssen führten. Weiterführende Informationen finden Sie in folgenden Dokumenten:

recommendation-more-help
337b99bb-92fb-42ae-b6b7-c7042161d089