Blueprint: Datenvorbereitung und -aufnahme

In der Blueprint „Datenvorbereitung und -aufnahme“ werden die Methoden erläutert, mit denen Daten in Adobe Experience Platform aufgenommen und vorbereitet werden können.

Die Datenvorbereitung umfasst die Zuordnung der Quelldaten zum Experience Data Model-Schema (XDM). Sie umfasst auch die Durchführung von Datentransformationen, einschließlich Datenformatierung, Feldaufteilung/-verknüpfung/-umwandlung und die Zusammenführung von Datensätzen sowie die Vergabe neuer Schlüssel. Die Datenvorbereitung hilft bei der Vereinheitlichung von Kundendaten für gesammelte/gefilterte Analysen, einschließlich Berichten oder der Vorbereitung von Daten für die Erstellung von Kundenprofilen, Datenwissenschaft und Aktivierung.

Architektur

Referenzarchitektur für Blueprint „Datenvorbereitung und -aufnahme“

Leitlinien für die Datenaufnahme

Das folgende Diagramm zeigt die durchschnittlichen Performance-Bereiche sowie die Latenz bei der Datenaufnahme in Adobe Experience Platform.

Datenfluss in Experience Platform

Methoden der Datenaufnahme

Aufnahmemethoden Beschreibung
Web/Mobile SDK Latenz:
  • Echtzeit - Datensammlung auf derselben Seite für Edge Network
  • Streaming-Aufnahme in Profil ~1 Minute
  • Streaming-Aufnahme in Data Lake (Mikro-Batch ~15 Minuten)
Dokumentation:
Streaming-Quellen Latenz:
  • Echtzeit - Datensammlung auf derselben Seite für Edge Network
  • Streaming-Aufnahme in Profil ~1 Minute
  • Streaming-Aufnahme in Data Lake (Mikro-Batch ~15 Minuten)
Dokumentation
Streaming-API Latenz:
  • Echtzeit - Datensammlung auf derselben Seite für Edge Network
  • Streaming-Aufnahme in Profil ~1 Minute
  • Streaming-Aufnahme in Data Lake (Mikro-Batch ~15 Minuten)
  • 7 GB/Stunde
Dokumentation
ETL-Tools Verwenden von ETL-Tools für die Anpassung und Transformation von Unternehmensdaten vor der Aufnahme in Experience Platform.

Latenz:
  • Zeitrahmen abhängig vom externen Zeitplan des ETL-Tools, dann gelten Standardleitlinien für die Aufnahme basierend auf der Aufnahmemethode.
Batch-Quellen Geplanter Abruf aus Quellen
Latenz: ~ 200 GB/Stunde

Dokumentation
Video-Tutorials
Batch-API Latenz:
  • Batch-Aufnahme in Profil abhängig von Größe und Traffic-Volumen ~45 Minuten
  • Batch-Aufnahme in Data Lake abhängig von Größe und Traffic-Volumen
Dokumentation
Adobe-Programm-Connectoren Automatische Aufnahme von Daten, die aus Adobe Experience Cloud-Programmen stammen

Methoden der Datenvorbereitung

Methoden der Datenvorbereitung Beschreibung
Data Science Workspace – Datenvorbereitung Modellgestützte Transformation, skriptbasierte Transformation.
Dokumentation
Externes ETL-Tool (Snaplogic, Mulesoft, Informatica usw.) Durchführung komplexer Transformationen in den ETL-Tools und Verwendung von Standard-Experience Platform-Fluss-Service-APIs oder Quell-Connectoren, um die resultierenden Daten aufzunehmen.
Abfrage-Service – Datenvorbereitung Verbinden, Teilen, Zusammenführen, Transformieren, Abfragen und Filtern von Daten und Erstellung eines neuen Datensatzes. Verwendung von „Create Table as Select“ (CTAS)
-Dokumentation
XDM-Mapper- und Datenvorbereitungsfunktionen (Streaming und Batch) Zuordnung von Quellattributen im CSV- oder JSON-Format während der Experience Platform-Aufnahme zu XDM-Attributen.
Berechnung von Funktionen bei der Aufnahme von Daten, d. h. Datenformatierung, Teilung, Verknüpfung usw.
Dokumentation

Verwandte Blog-Posts

Auf dieser Seite