Überwachen der Data Lake-Aufnahme

IMPORTANT
Streaming-Quellen wie die HTTP-API-Quelle werden derzeit nicht vom Überwachungs-Dashboard unterstützt. Derzeit können Sie das Dashboard nur zur Überwachung von Batch-Quellen verwenden.

Sie können das Überwachungs-Dashboard in der Adobe Experience Platform-Benutzeroberfläche verwenden, um Metriken rund um Ihre Datenaufnahme und Datenaufbewahrungsprozesse im Data Lake abzurufen. Verwenden Sie die Diagramme in der -Benutzeroberfläche, um Aufnahme- und Aufbewahrungstrends im Laufe der Zeit zu überwachen und die Leistung über alle Quellen und Datenflüsse hinweg zusammenzufassen.

Lesen Sie dieses Dokument, um zu erfahren, wie Sie mit dem Monitoring-Dashboard die gesamte Datenverarbeitung im Data Lake überwachen können, einschließlich Aufnahme und Aufbewahrung.

Erste Schritte get-started

Dieses Tutorial setzt ein Grundverständnis der folgenden Komponenten von Adobe Experience Platform voraus:

  • Datenflüsse: Datenflüsse sind eine Darstellung von Datenvorgängen, die Daten über Experience Platform verschieben. Datenflüsse werden über verschiedene Dienste hinweg konfiguriert und helfen beim Verschieben von Daten aus Quell-Connectoren in Zieldatensätze, in Identity und Profile sowie in Destinations.
    • Datenflussausführungen: Datenflussausführungen sind die wiederkehrenden geplanten Aufträge, die auf der Häufigkeitskonfiguration ausgewählter Datenflüsse basieren.
  • Quellen: Experience Platform ermöglicht die Aufnahme von Daten aus verschiedenen Quellen und bietet Ihnen die Möglichkeit, die eingehenden Daten mithilfe von Experience Platform-Services zu strukturieren, zu kennzeichnen und anzureichern.
  • Identity Service: Verschaffen Sie sich einen besseren Überblick über einzelne Kundinnen und Kunden und deren Verhalten, indem Sie Identitäten geräte- und systemübergreifend verknüpfen.
  • Echtzeit-Kundenprofil: Bietet ein einheitliches Echtzeit-Kundenprofil, das auf aggregierten Daten aus verschiedenen Quellen basiert.
  • Sandboxes: Experience Platform bietet virtuelle Sandboxes, die eine einzelne Experience Platform-Instanz in separate virtuelle Umgebungen unterteilen, damit Sie Programme für digitale Erlebnisse besser entwickeln und weiterentwickeln können.

Verwenden des Dashboards „Monitoring“ zur Data-Lake-Aufnahme

Wählen Data Lake aus der Hauptkopfzeile im Monitoring-Dashboard aus, um Ihre Data-Lake-Aufnahmerate anzuzeigen.

Das Überwachungs-Dashboard mit der ausgewählten Quellenkarte.

Das Diagramm Aufnahmerate zeigt Ihre Datenaufnahmerate basierend auf Ihrem konfigurierten Zeitrahmen an. Standardmäßig zeigt das Überwachungs-Dashboard die Aufnahmeraten der letzten 24 Stunden an. Anweisungen zum Konfigurieren Ihres Zeitrahmens finden Sie im Handbuch unter Konfigurieren des Zeitrahmens für die Überwachung.

Das Diagramm ist standardmäßig für die Anzeige aktiviert. Um das Diagramm auszublenden, wählen Sie Metriken und Diagramme aus, um den Umschalter zu deaktivieren und das Diagramm auszublenden.

Das Diagramm mit den Metriken zur Aufnahmerate.

Im unteren Teil des Dashboards wird eine Tabelle angezeigt, die den aktuellen Metrikbericht für alle vorhandenen Datenflüsse der Quellen umreißt.

Die Tabelle mit den Metriken des Monitoring-Dashboards.

Metriken
Beschreibung
Empfangene Einträge
Die Gesamtzahl der von einer bestimmten Quelle empfangenen Datensätze.
Aufgenommene Einträge
Die Gesamtzahl der in den Data Lake aufgenommenen Datensätze.
Gelöschte Einträge
Die Gesamtzahl der gelöschten Datensätze aufgrund von Data-Lake-Aufbewahrungseinstellungen oder geänderten Datenerfassungsvorgängen.
Übersprungene Einträge
Die Gesamtzahl der übersprungenen Datensätze. Ein übersprungener Datensatz bezieht sich auf Felder, die übersprungen wurden, weil sie für die Aufnahme nicht erforderlich waren. Wenn Sie beispielsweise einen Quelldatenfluss mit aktivierter partieller Aufnahme erstellen, können Sie einen akzeptablen Schwellenwert für die Fehlerrate konfigurieren. Während des Aufnahmevorgangs überspringt die Aufnahme Datensätze von Feldern, die nicht erforderlich sind, z. B. Identitätsfelder, solange sie sich innerhalb des Fehlerschwellenwerts befinden.
Fehlgeschlagene Einträge
Die Gesamtzahl der Datensätze, die aufgrund von Fehlern nicht aufgenommen werden konnten.
Aufgenommene Rate
Der Prozentsatz der aufgenommenen Datensätze auf der Basis der Gesamtzahl der empfangenen Datensätze.
Fehlgeschlagene Datenflüsse insgesamt
Die Gesamtzahl der fehlgeschlagenen Datenflüsse.

Sie können Ihre Daten mithilfe der Optionen weiter filtern, die oben in der Tabelle Metriken bereitgestellt werden:

Filteroptionen
Beschreibung
Durchsuchen
Verwenden Sie die Suchleiste, um Ihre Ansicht nach einem einzelnen Quelltyp zu filtern.
Quellen
Wählen Sie Quellen aus, um Ihre Ansicht zu filtern und Metrikdaten nach Quelltyp anzuzeigen. Dies ist die Standardanzeige, die vom Monitoring-Dashboard verwendet wird.
Datenflüsse
Wählen Sie Datenflüsse aus, um Ihre Ansicht zu filtern und Metrikdaten pro Datenfluss anzuzeigen.
Nur Fehlschläge zeigen
Wählen Sie Nur Fehler anzeigen aus, um Ihre Ansicht zu filtern und nur Datenflüsse anzuzeigen, die Aufnahmefehler gemeldet haben.
Meine Quellen
Sie können Ihre Ansicht mithilfe des Dropdown-Menüs Meine Quellen weiter filtern. Verwenden Sie das Dropdown-Menü, um Ihre Ansicht nach Kategorie zu filtern. Alternativ können Sie auf Alle Quellen klicken, um Metriken zu allen - oder -Quellen anzuzeigen, oder auf Meine Quellen klicken, um nur die Quellen anzuzeigen, für die Sie über ein entsprechendes -Konto verfügen.

Um die Anzeige der Spalten anzupassen, wählen Sie das Symbol für die Spalteneinstellungen Spalten-Symbol .

Das Monitoring-Dashboard mit ausgewähltem Symbol für die Spalteneinstellungen.

Wählen Sie anschließend im Fenster Tabelle anpassen die Spalten aus, die Ihr Dashboard anzeigen soll. Wenn Sie fertig sind, wählen Sie Anwenden aus.

Das Popup-Fenster „Spalte anpassen“ im Monitoring-Dashboard.

Um die Daten zu überwachen, die in einen bestimmten Datenfluss aufgenommen werden, wählen Sie das Filtersymbol ( ) einer Quelle aus.

TIP
Sie können das Überwachungs-Dashboard verwenden, um Datenlöschmetriken für gelöschte Datensätze mithilfe von Datenspeicherungsrichtlinien zu überwachen. Weitere Informationen zur Datenaufbewahrung finden Sie im Handbuch unter von Richtlinien zur Datenaufbewahrung.

Überwachen Sie einen bestimmten Datenfluss, indem Sie das Filtersymbol neben einer bestimmten Quelle auswählen.

Die Tabelle Metriken wird in eine Tabelle mit aktiven Datenflüssen aktualisiert, die der ausgewählten Quelle entsprechen. In diesem Schritt können Sie zusätzliche Informationen zu Ihren Datenflüssen anzeigen, einschließlich des entsprechenden Datensatzes und Datentyps sowie eines Zeitstempels, der angibt, wann sie zuletzt aktiv waren.

Um einen Datenfluss weiter zu untersuchen, wählen Sie das Filtersymbol ( ) einem Datenfluss aus.

Die Datenfluss-Tabelle im Monitoring-Dashboard.

Als Nächstes gelangen Sie zu einer Schnittstelle, die alle Iterationen der Datenflussausführung des ausgewählten Datenflusses auflistet.

Datenflussausführungen stellen eine Instanz der Datenflussausführung dar. Wenn ein Datenfluss beispielsweise so geplant ist, dass er stündlich um 9 :00, :00 Uhr und :00 Uhr morgens ausgeführt wird, gibt es drei Instanzen eines Flussdurchgangs. Flussausführungen sind spezifisch für Ihre bestimmte Organisation.

Um Metriken einer bestimmten Iteration der Datenflussausführung zu überprüfen, wählen Sie das Filtersymbol filter neben Ihrem Datenfluss aus.

Die Metrikseite „Datenflussausführung“.

Auf der Seite mit den Datenflussausführungs-Details können Sie Metriken und Informationen der ausgewählten Iteration anzeigen.

Die Seite mit den Datenflussausführungs-Details.

Details zur Datenflussausführung
Beschreibung
Aufgenommene Einträge
Die Gesamtzahl der Datensätze, die aus der Datenflussausführung aufgenommen wurden.
Fehlgeschlagene Einträge
Die Gesamtzahl der Datensätze, die aufgrund von Fehlern in der Datenflussausführung nicht aufgenommen wurden.
Gesamtzahl der Dateien
Die Gesamtzahl der Dateien in der Datenflussausführung.
Datengröße
Die Gesamtgröße der in der Datenflussausführung enthaltenen Daten.
ID der Datenflussausführung
Die ID der Iteration der Datenflussausführung.
Organisations-ID
Die ID der Organisation, in der der Datenfluss erstellt wurde.
Status
Der Status der Datenflussausführung.
Anfang der Datenflussausführung
Ein Zeitstempel, der angibt, wann die Datenflussausführung gestartet wurde.
Ende der Datenflussausführung
Ein Zeitstempel, der angibt, wann die Datenflussausführung beendet wurde.
Datensatz
Der zum Erstellen des Datenflusses verwendete Datensatz.
Datentyp
Der Typ der Daten, die sich im Datenfluss befanden.
Teilweise Aufnahme
Die partielle Batch-Aufnahme bietet die Möglichkeit, Daten mit Fehlern bis zu einem bestimmten konfigurierbaren Schwellenwert aufzunehmen. Mit dieser Funktion können Sie alle Ihre korrekten Daten erfolgreich in Experience Platform aufnehmen, während alle Ihre falschen Daten separat mit Informationen darüber, warum sie ungültig sind, in Batches erfasst werden. Sie können die partielle Aufnahme während des Erstellungsprozesses eines Datenflusses aktivieren.
Fehlerdiagnose
Fehlerdiagnose weist die Quelle an, Fehlerdiagnosen zu erstellen, auf die Sie später bei der Überwachung Ihrer Datensatzaktivität und des Datenflussstatus verweisen können. Sie können die Fehlerdiagnose während des Erstellungsprozesses eines Datenflusses aktivieren.
Fehlerzusammenfassung
Bei einer fehlgeschlagenen Datenflussausführung zeigt die Fehlerzusammenfassung einen Fehlercode und eine Beschreibung an, um zusammenzufassen, warum die Iteration der Ausführung fehlgeschlagen ist.

Wenn bei der Datenflussausführung Fehler auftreten, können Sie über die Benutzeroberfläche „Datenflussausführungsfehler​ einen Bildlauf nach unten ​.

Verwenden Sie den Abschnitt Fehlgeschlagene Datensätze um Metriken zu Datensätzen anzuzeigen, die aufgrund von Fehlern nicht aufgenommen wurden. Um einen umfassenden Fehlerbericht anzuzeigen, wählen Sie Fehlerdiagnose in der Vorschau anzeigen. Um eine Kopie Ihrer Fehlerdiagnose und Ihres Dateimanifests herunterzuladen, wählen Sie Herunterladen und kopieren Sie dann den Beispiel-API-Aufruf, der mit der Data Access-API verwendet werden soll.

NOTE
Sie können die Fehlerdiagnose nur verwenden, wenn die Funktion während des Erstellungsprozesses der Quellverbindung aktiviert wurde.

Nächste Schritte next-steps

In diesem Tutorial haben Sie gelernt, wie Sie die Data-Lake-Aufnahmegeschwindigkeit mit dem Dashboard Monitoring überwachen. Außerdem haben Sie gelernt, Fehler zu identifizieren, die Datenflussfehler während der Aufnahme verursachen. Weiterführende Informationen finden Sie in folgenden Dokumenten:

recommendation-more-help
d4f38c9a-ed8e-4b74-98e7-57b4df1b999f