Schutzmaßnahmen bei der Datenaufnahme

IMPORTANT
Schutzmaßnahmen bei der Batch- und Streaming-Aufnahme werden im Allgemeinen auf Organisationsebene und nicht auf Sandbox-Ebene berechnet. Das bedeutet, dass Ihre Datennutzung pro Sandbox an die gesamte Lizenznutzungsberechtigung gebunden ist, die Ihrer gesamten Organisation entspricht. Darüber hinaus ist die Datennutzung in Entwicklungs-Sandboxes auf 10 % Ihrer gesamten Profile beschränkt. Weitere Informationen zu Lizenznutzungsberechtigungen finden Sie im Handbuch zu Best Practices für die Datenverwaltung.

Leitplanken sind Schwellenwerte, die Anhaltspunkte für die Daten- und Systemnutzung, die Performance-Optimierung und die Vermeidung von Fehlern oder unerwarteten Ergebnissen in Adobe Experience Platform bieten. Leitplanken können sich auf Ihre Nutzung oder Verwendung von Daten und Verarbeitung im Zusammenhang mit Ihren Lizenzierungsberechtigungen beziehen.

IMPORTANT
Überprüfen Sie zusätzlich zu dieser Seite mit Leitplanken Ihre Lizenzberechtigungen in Ihrem Kundenauftrag und entsprechendenProduktbeschreibung) die tatsächlichen Nutzungsbeschränkungen.

Dieses Dokument enthält Anleitungen zu Schutzmaßnahmen bei der Datenaufnahme in Adobe Experience Platform.

Schutzmaßnahmen bei der Batch-Aufnahme

In der folgenden Tabelle sind Schutzmaßnahmen aufgeführt, die bei der Verwendung der Batch-Aufnahme-API oder von Quellen zu beachten sind:

Art der Aufnahme
Leitlinien
Anmerkungen
Data-Lake-Aufnahme mithilfe der Batch-Aufnahme-API
  • Mit der Batch-Aufnahme-API können Sie bis zu 20 GB Daten pro Stunde in den Data Lake aufnehmen.
  • Die maximale Anzahl von Dateien pro Batch beträgt 1.500.
  • Die maximale Batch-Größe beträgt 100 GB.
  • Die maximale Anzahl von Eigenschaften oder Feldern pro Zeile beträgt 10.000.
  • Die maximale Anzahl der Batches pro Minute und anwendender Person beträgt 2000.
Data-Lake-Aufnahme mithilfe von Batch-Quellen
  • Sie können mit Batch-Aufnahme-Quellen wie Azure Blob, Amazon S3 und SFTP bis zu 200 GB Daten pro Stunde in den Data Lake aufnehmen.
  • Eine Batch-Größe sollte zwischen 256 MB und 100 GB liegen. Dies gilt sowohl für unkomprimierte als auch für komprimierte Daten. Wenn komprimierte Daten im Data Lake unkomprimiert werden, gelten diese Einschränkungen.
  • Die maximale Anzahl von Dateien pro Batch beträgt 1.500.
  • Die Mindestgröße einer Datei oder eines Ordners beträgt 1 Byte. Dateien oder Ordner mit einer Größe von 0 Byte können nicht aufgenommen werden.
Lesen Sie Quellen - Übersicht für einen Katalog der Quellen, die Sie für die Datenaufnahme verwenden können.
Batch-Aufnahme in Profil
  • Die maximale Größe einer Datensatzklasse beträgt 100 KB (Hard).
  • Die maximale Größe einer ExperienceEvent-Klasse ist 10 KB (Hard).
Anzahl der täglich aufgenommenen Profil- oder ExperienceEvent-Batches
Die maximale Anzahl von Profil- oder ExperienceEvent-Batches, die pro Tag aufgenommen werden, beträgt 90 pro Sandbox. Das bedeutet, dass die Gesamtanzahl der pro Tag aufgenommenen Profil- und ExperienceEvent-Batches 90 nicht überschreiten darf. Das Aufnehmen zusätzlicher Batches beeinträchtigt die System-Performance.
Dies ist ein weiches Limit. Es ist möglich, über ein weiches Limit hinauszugehen, jedoch bieten weiche Limits eine empfohlene Richtlinie für die Systemleistung. Darüber hinaus gilt diese Leitplanke für Sandbox und nicht für jede Organisation.
Verschlüsselte Datenaufnahme
Die maximal unterstützte Größe einer einzelnen verschlüsselten Datei beträgt 1 GB. Während Sie beispielsweise Daten im Wert von 2 oder mehr GB in einer einzelnen Datenflussausführung aufnehmen können, darf keine einzelne Datei in der Datenflussausführung größer als 1 GB sein.
Der Prozess der Aufnahme verschlüsselter Daten kann länger dauern als der einer regulären Datenaufnahme. Weitere Informationen finden im Handbuchverschlüsselte Datenaufnahme-API .
Upsert-Batch-Aufnahme
Die Aufnahme von Upsert-Batches kann bis zu 10-mal langsamer sein als normale Batches. Daher sollten Sie Ihre Upsert-Batches unter zwei Millionen Datensätzen aufbewahren um eine effiziente Laufzeit zu gewährleisten und zu vermeiden, dass andere Batches in der Sandbox verarbeitet werden.
Sie können zwar zweifellos Batches aufnehmen, die zwei Millionen Datensätze überschreiten, die Zeit der Aufnahme wird jedoch aufgrund der Einschränkungen kleiner Sandboxes erheblich länger sein.

Schutzmaßnahmen bei der Streaming-Aufnahme

Weitere Informationen zu Leitplanken für Streaming-Aufnahme findenin der Übersicht zur Streaming-Aufnahme .

Leitplanken für Streaming-Quellen

In der folgenden Tabelle sind Schutzmaßnahmen aufgeführt, die bei der Verwendung der Streaming-Quellen zu beachten sind:

Art der Aufnahme
Leitlinien
Anmerkungen
Streaming-Quellen
  • Die maximale Datensatzgröße beträgt 1 MB, wobei die empfohlene Größe bei 10 KB liegt.
  • Streaming-Quellen unterstützen bei der Aufnahme in den Data Lake zwischen 4.000 und 5.000 Anfragen pro Sekunde. Dies gilt für beide neu erstellten Quellverbindungen zusätzlich zu vorhandenen Quellverbindungen. Hinweis: Es kann bis zu 30 Minuten dauern, bis die Streaming-Daten vollständig im Data Lake verarbeitet sind.
  • Streaming-Quellen unterstützen bei der Aufnahme von Daten in ein Profil oder in die Streaming-Segmentierung maximal 1.500 Anfragen pro Sekunde.
Streaming-Quellen wie Kafka, Azure Event Hubs und Amazon Kinesis verwenden nicht die Route des Data Collection Core Service (DCCS) und können unterschiedliche Durchsatzbeschränkungen aufweisen. In der Quellenübersicht finden Sie einen Katalog der Quellen, die Sie für die Datenaufnahme verwenden können.

Nächste Schritte

In der folgenden Dokumentation finden Sie weitere Informationen zu anderen Experience Platform-Services-Leitplanken, zu End-to-End-Latenzinformationen und Lizenzinformationen aus Real-Time CDP-Produktbeschreibungsdokumenten:

recommendation-more-help
2ee14710-6ba4-4feb-9f79-0aad73102a9a