Azure Event Hubs connector

Adobe Experience Platform proporciona conectividad nativa para proveedores de nube como AWS, Google Cloud Platformy Azure. Puede introducir los datos de estos sistemas en Platform.

Las fuentes de almacenamiento en la nube pueden traer sus propios datos a Platform sin necesidad de descargar, formatear o cargar. Los datos introducidos pueden tener el formato XDM JSON, XDM Parquet o delimitados. Cada paso del proceso se integra en el flujo de trabajo Orígenes . Platform le permite introducir datos de Event Hubs en tiempo real.

Escalado con Event Hubs

El factor de escala de su Event Hubs se debe aumentar la instancia si necesita introducir datos de gran volumen, aumentar el paralelismo o aumentar la velocidad de la plataforma de ingesta.

Ingreso de datos de mayor volumen

Actualmente, el volumen máximo de datos que puede obtener de su Event Hubs La cuenta a Platform es de 2000 registros por segundo. Para ampliar e incorporar datos de mayor volumen, póngase en contacto con su representante de Adobe.

Aumente el paralelismo en Event Hubs y plataforma

El paralelismo se refiere a la ejecución simultánea de las mismas tareas en varias unidades de procesamiento para aumentar la velocidad y el rendimiento. Puede aumentar el paralelismo en la variable Event Hubs al aumentar la partición o al adquirir más unidades de procesamiento para su Event Hubs cuenta. Consulte esta Event Hubs documento sobre escalado para obtener más información.

Para aumentar la velocidad de ingesta en el lado de la plataforma, Platform debe aumentar el número de tareas en el conector de origen para leer desde el Event Hubs particiones. Una vez que haya aumentado el paralelismo en la variable Event Hubs además, póngase en contacto con su representante de Adobe para escalar las tareas de Platform en función de su nueva partición. Actualmente, este proceso no está automatizado.

Usar una red virtual para conectarse Event Hubs a Platform

Puede configurar una red virtual para conectarse Event Hubs a Platform mientras tenga habilitadas las medidas del cortafuegos. Para configurar una red virtual, vaya a esta Event Hubs documento de conjunto de reglas de red y siga los pasos que se indican a continuación:

• Select Pruébelo desde el panel API de REST;
• Autentique su Azure cuenta con sus credenciales en el mismo explorador;
• Seleccione el Event Hubs área de nombres, grupo de recursos y suscripción que desea traer a Platform y, a continuación, seleccione EJECUTAR;
• En el cuerpo JSON que aparece, agregue la siguiente subred de Platform debajo de virtualNetworkRules interior properties:

{
    "subnet": {
        "id": "/subscriptions/93f21779-b1fd-49ee-8547-2cdbc979a44f/resourceGroups/ethos_12_prod_va7_network/providers/Microsoft.Network/virtualNetworks/ethos_12_prod_va7_network_10_19_144_0_22/subnets/ethos_12_prod_va7_network_10_19_144_0_22"
    },
    "ignoreMissingVnetServiceEndpoint": true
}

Consulte la lista siguiente para ver las distintas regiones de las subredes de Platform:

VA7: América del Norte

{
  "properties": {
    "defaultAction": "Deny",
    "virtualNetworkRules": [
      {
        "subnet": {
          "id": "/subscriptions/93f21779-b1fd-49ee-8547-2cdbc979a44f/resourceGroups/ethos_12_prod_va7_network/providers/Microsoft.Network/virtualNetworks/ethos_12_prod_va7_network_10_19_144_0_22/subnets/ethos_12_prod_va7_network_10_19_144_0_22"
        },
        "ignoreMissingVnetServiceEndpoint": true
      },
    ],
    "ipRules": []
  }
}

NLD2: Europa

{
  "properties": {
    "defaultAction": "Deny",
    "virtualNetworkRules": [
      {
        "subnet": {
          "id": "/subscriptions/40bde086-46ad-44c3-afba-c306f54b64ec/resourceGroups/ethos_12_prod_va7_network/providers/Microsoft.Network/virtualNetworks/ethos_12_prod_nld2_network_10_20_40_0_23/subnets/ethos_12_prod_nld2_network_10_20_40_0_23"
        },
        "ignoreMissingVnetServiceEndpoint": true
      },
    ],
    "ipRules": []
  }
}

AUS5: Australia

{
  "properties": {
    "defaultAction": "Deny",
    "virtualNetworkRules": [
      {
        "subnet": {
          "id": "/subscriptions/1618ef18-9edc-48bf-88dd-61cc979629b5/resourceGroups/ethos_12_prod_aus5_network/providers/Microsoft.Network/virtualNetworks/ethos_12_prod_aus5_network_10_21_116_0_22/subnets/ethos_12_prod_aus5_network_10_21_116_0_22"
        },
        "ignoreMissingVnetServiceEndpoint": true
      },
    ],
    "ipRules": []
  }
}

Consulte lo siguiente Event Hubs documento para obtener más información sobre los conjuntos de reglas de red.

Connect Event Hubs a Platform

La siguiente documentación proporciona información sobre cómo conectar Event Hubs a Platform mediante API o la interfaz de usuario:

Uso de API

• Creación de una conexión de origen de centros de eventos mediante la API de servicio de flujo
• Recopilación de datos de flujo continuo mediante la API del servicio de flujo

Uso de la interfaz de usuario

• Creación de una conexión de origen de centros de eventos en la interfaz de usuario
• Configurar un flujo de datos para una conexión de almacenamiento en la nube en la interfaz de usuario