Azure Event Hubs source

Last update: Tue Jul 16 2024 00:00:00 GMT+0000 (Coordinated Universal Time)

Themen:

Erstellt für:

Entwickler

IMPORTANT

Die Quelle "Azure Event Hubs" steht Benutzern, die Real-time Customer Data Platform Ultimate erworben haben, im Quellkatalog zur Verfügung.

Adobe Experience Platform bietet native Konnektivität für Cloud-Anbieter wie AWS, Google Cloud Platform und Azure. Sie können Ihre Daten aus diesen Systemen in Platform importieren.

Cloud-Speicher bieten eine Quelle, von der Sie Ihre Daten in Platform übertragen können, ohne diese herunterladen, formatieren oder hochladen zu müssen. Aufgenommene Daten können als XDM JSON, XDM Parquet oder mit Trennzeichen formatiert werden. Jeder Schritt des Prozesses wird in den Quell-Workflow integriert. Mit Platform können Sie Daten aus Event Hubs in Echtzeit importieren.

Skalierung mit Event Hubs

Der Skalierungsfaktor Ihrer Event Hubs -Instanz muss erhöht werden, wenn Sie Daten mit hohem Volumen aufnehmen, die Parallelität erhöhen oder die Geschwindigkeit der Aufnahmeplattform erhöhen müssen.

Aufnehmen von Daten mit höherem Volumen

Derzeit beträgt das maximale Datenvolumen, das Sie von Ihrem Event Hubs -Konto an Platform übermitteln können, 2.000 Datensätze pro Sekunde. Wenden Sie sich an Ihren Adobe-Support-Mitarbeiter, um Daten mit höherem Datenvolumen zu skalieren und aufzunehmen.

Erhöhen Sie den Parallelismus für Event Hubs und die Plattform

Parallelismus bezieht sich auf die gleichzeitige Ausführung der gleichen Aufgaben an mehreren Verarbeitungseinheiten, um die Geschwindigkeit und Leistung zu erhöhen. Sie können die Parallelität auf der Seite Event Hubs erhöhen, indem Sie die Partition erhöhen oder mehr Verarbeitungseinheiten für Ihr Event Hubs-Konto erwerben. Weitere Informationen finden Sie in diesem Event Hubs Dokument zur Skalierung .

Um die Geschwindigkeit der Aufnahme auf Platform-Seite zu erhöhen, muss Platform die Anzahl der Aufgaben im Quell-Connector erhöhen, die aus Ihren Event Hubs-Partitionen gelesen werden sollen. Sobald Sie die Parallelität auf der Seite Event Hubs erhöht haben, wenden Sie sich an Ihren Adobe-Support-Mitarbeiter, um Plattformaufgaben basierend auf Ihrer neuen Partition zu skalieren. Derzeit ist dieser Prozess nicht automatisiert.

Verwenden Sie ein virtuelles Netzwerk, um eine Verbindung zu Event Hubs mit Platform herzustellen.

Sie können ein virtuelles Netzwerk einrichten, um Event Hubs mit Platform zu verbinden, während die Firewall-Messungen aktiviert sind. Um ein virtuelles Netzwerk einzurichten, rufen Sie dieses Dokument mit dem Event Hubs Netzwerkregelsatz auf und führen Sie die folgenden Schritte aus:

Wählen Sie Testen Sie es aus dem REST-API-Bedienfeld aus.
Authentifizieren Sie Ihr Azure -Konto mit Ihren Anmeldedaten im selben Browser.
Wählen Sie den Namespace, die Ressourcengruppe und das Abonnement Event Hubs aus, die Sie für Platform bereitstellen möchten, und wählen Sie dann AUSFÜHREN aus.
Fügen Sie im angezeigten JSON-Textkörper das folgende Platform-Subnetz unter virtualNetworkRules innerhalb von properties hinzu:

IMPORTANT

Sie müssen den JSON-Hauptteil, den Sie erhalten, sichern, bevor Sie virtualNetworkRules mit dem Platform-Subnetz aktualisieren, da es Ihre vorhandenen IP-Filterregeln enthält. Andernfalls werden die Regeln nach dem Aufruf gelöscht.

{
    "subnet": {
        "id": "/subscriptions/93f21779-b1fd-49ee-8547-2cdbc979a44f/resourceGroups/ethos_12_prod_va7_network/providers/Microsoft.Network/virtualNetworks/ethos_12_prod_va7_network_10_19_144_0_22/subnets/ethos_12_prod_va7_network_10_19_144_0_22"
    },
    "ignoreMissingVnetServiceEndpoint": true
}

Die nachstehende Liste zeigt verschiedene Regionen von Platform-Subnetzen:

VA7: Nordamerika

{
  "properties": {
    "defaultAction": "Deny",
    "virtualNetworkRules": [
      {
        "subnet": {
          "id": "/subscriptions/93f21779-b1fd-49ee-8547-2cdbc979a44f/resourceGroups/ethos_12_prod_va7_network/providers/Microsoft.Network/virtualNetworks/ethos_12_prod_va7_network_10_19_144_0_22/subnets/ethos_12_prod_va7_network_10_19_144_0_22"
        },
        "ignoreMissingVnetServiceEndpoint": true
      },
    ],
    "ipRules": []
  }
}

NLD2: Europa

{
  "properties": {
    "defaultAction": "Deny",
    "virtualNetworkRules": [
      {
        "subnet": {
            "id": "/subscriptions/40bde086-46ad-44c3-afba-c306f54b64ec/resourceGroups/ethos_12_prod_nld2_network/providers/Microsoft.Network/virtualNetworks/ethos_12_prod_nld2-vnet/subnets/ethos_12_prod_nld2_network_10_20_40_0_23"
        },
        "ignoreMissingVnetServiceEndpoint": true
      },
    ],
    "ipRules": []
  }
}

AUS5: Australien

{
  "properties": {
    "defaultAction": "Deny",
    "virtualNetworkRules": [
      {
        "subnet": {
          "id": "/subscriptions/1618ef18-9edc-48bf-88dd-61cc979629b5/resourceGroups/ethos_12_prod_aus5_network/providers/Microsoft.Network/virtualNetworks/ethos_12_prod_aus5-vnet/subnets/ethos_12_prod_aus5_network_10_21_116_0_22"
        },
        "ignoreMissingVnetServiceEndpoint": true
      },
    ],
    "ipRules": []
  }
}

Weitere Informationen zu Netzwerkregelsätzen finden Sie im folgenden Event Hubs Dokument .

Verbinden von Event Hubs mit Platform

Die folgende Dokumentation enthält Informationen dazu, wie Sie Event Hubs mithilfe von APIs oder der Benutzeroberfläche mit Platform verbinden können:

Verwenden von APIs

Verwenden der Benutzeroberfläche

recommendation-more-help

337b99bb-92fb-42ae-b6b7-c7042161d089