Créer un flux de données

Sélectionnez la vue de données contenant les données à exporter.

Tenez compte des points suivants lors de la sélection d’une vue de données :

• Si plusieurs flux de données sont créés pour la même vue de données, chaque flux de données doit avoir des définitions de colonne différentes.
• La liste des colonnes disponibles dépend de la société de connexion à laquelle appartient la vue de données sélectionnée. Si vous modifiez la vue de données, la liste des colonnes disponibles peut changer.

1. Pointez sur un composant sur la zone de travail, puis sélectionnez l’icône d’information .

2. Sélectionnez l’icône Modifier en regard de l’identifiant, puis spécifiez un nouvel identifiant de sortie.

1. Sous le panneau Aperçu du schéma, sélectionnez Modifier en bloc les identifiants de sortie.

2. Sélectionnez Copier, puis collez le fichier JSON dans un éditeur de texte ou un autre outil.

3. Mettez à jour les valeurs id, qui sont les identifiants de sortie. Vous ne pouvez pas modifier les noms (name) ou les types (type et dataType) des composants.

4. Collez à nouveau le fichier JSON modifié dans la boîte de dialogue, en remplaçant le fichier JSON existant, puis sélectionnez Valider.

5. Vérifiez le nombre d’identifiants modifiés, inchangés et erronés. S’il existe des erreurs, sélectionnez Précédent pour les corriger.

6. Sélectionnez Appliquer les modifications.

Sélectionnez le type de flux que vous souhaitez créer :

• Flux en direct : exporte les données actuelles et futures.
• Flux de renvoi : exporte les données historiques.

Sélectionnez la fréquence d’envoi du flux de données. Les événements dont la date et l’heure se trouvent dans la fenêtre de fréquence sont inclus dans la diffusion du flux de données.

Sélectionnez cette option pour inclure l’équivalent d’une heure de données ou d’un jour de données.

• Quotidien : les flux contiennent l’équivalent d’une journée complète de données, de minuit à minuit dans le fuseau horaire de la vue de données.
• Par heure : les flux contiennent l’équivalent d’une heure de données.

Chaque diffusion utilise également une fenêtre de traitement progressive de 30 jours, précédant la fenêtre de fréquence incluse, pour qualifier les segments, calculer les sessions et conserver les valeurs de dimension. La fenêtre de traitement et le paramètre Délai de traitement peuvent tous deux affecter les événements inclus. Pour plus d’informations, voir Présentation de la fenêtre de traitement et Présentation du délai de traitement.

Intervalle de temps utilisé pour diviser les données historiques en blocs. Chaque bloc contient l’équivalent d’une journée complète de données, de minuit à minuit dans le fuseau horaire de la vue de données.

La granularité détermine la manière dont les données sont regroupées, et non la fréquence de diffusion. Les données de renvoi sont diffusées le plus rapidement possible, et non une fois par jour.

Ce champ est toujours défini sur Quotidien et ne peut pas être modifié.

Temps d’attente de Customer Journey Analytics avant de traiter un fichier de flux de données. Tous les événements tardifs qui arrivent pendant le délai de traitement sont inclus dans le flux de données.

Choisissez un délai suffisant pour que les données les plus lentes de votre connexion terminent le traitement. Si le délai est trop court, les données en cours de traitement ne sont pas incluses dans le fichier de flux de données.

Le délai de traitement minimal est de 2 heures. La valeur par défaut est basée sur les jeux de données de votre connexion. Par exemple, si le groupement est activé, la valeur par défaut est de 6 heures. Certains types de données nécessitent un délai plus long. Le délai que vous choisissez dépend des types de données de votre connexion, telles que les données de diffusion en continu, par lots, groupées, de recherche ou de profil.

Avant de configurer cette option, consultez les détails et les exemples décrits dans la section ci-dessous, Comprendre le délai de traitement.

Sélectionnez le format de compression des fichiers de sortie Parquet diffusés vers votre destination cloud. Choisissez l’un des formats suivants :

• Snappy : compression et décompression rapides avec des tailles de fichier modérées. Largement pris en charge par les plateformes de données modernes telles que BigQuery, Snowflake et Apache Spark.
• GZip : largement compatible, y compris avec les outils qui ne prennent pas en charge Snappy en mode natif. Recommandé si votre pipeline en aval nécessite une norme de compression largement reconnue.
• Z Standard (Zstd) : Efficacité de compression élevée avec décompression rapide. Convient si la réduction de la taille du fichier est une priorité et que vos outils prennent en charge Zstd.

Tous les formats compressent les données à l’intérieur de chaque fichier Parquet, une colonne à la fois, de sorte que votre entrepôt de données peut toujours lire uniquement les colonnes dont une requête a besoin.

Pour plus d’informations sur les avantages de Parquet et sur la manière d’interroger ou de charger les fichiers après leur diffusion, voir ​ Utilisation de fichiers Parquet dans les flux de données ​.

• Tous les comptes cloud que vous avez précédemment configurés peuvent être utilisés pour les flux de données. Vous pouvez configurer des comptes cloud à partir du gestionnaire d’emplacements dans Composants > Exportations > Comptes d’emplacement.

• Les comptes cloud sont associés à votre compte utilisateur Customer Journey Analytics. Les autres utilisateurs ne peuvent pas utiliser ni afficher les comptes cloud que vous configurez, sauf si vous les rendez disponibles pour tous les utilisateurs de votre organisation.

• Vous pouvez modifier les emplacements que vous créez à partir du gestionnaire d’emplacements dans Composants > Exportations > Emplacements.

Effectuez l’une des opérations suivantes :

• Utiliser un compte existant : sélectionnez le menu déroulant en regard du champ Compte. Vous pouvez également commencer à saisir le nom du compte, puis le sélectionner dans le menu déroulant.

  Vous ne pouvez accéder aux comptes que si vous les avez configurés ou s’ils sont partagés avec une organisation dont vous faites partie.

• Créer un compte : sélectionnez Ajouter un compte dans le menu Compte. Pour plus d’informations sur la configuration du compte, voir Configuration des comptes d’exportation dans le cloud.

Effectuez l’une des opérations suivantes :

• Utiliser un emplacement existant : sélectionnez le menu déroulant en regard du champ Emplacement. Vous pouvez également commencer à saisir le nom de l’emplacement, puis le sélectionner dans le menu déroulant.
• Créer un emplacement : sélectionnez Ajouter un emplacement dans le menu Emplacement. Pour plus d’informations sur la configuration de l’emplacement, voir Configuration des emplacements d’exportation dans le cloud.

Activez cette option pour remplacer le chemin d’accès ou le nom de fichier par défaut défini pour l’emplacement sélectionné. Le remplacement s’applique uniquement à ce flux de données et détermine où les fichiers de flux de données sont envoyés.

Lorsque cette option est activée, le champ Chemin d’accès ou nom de fichier s’affiche.

Indiquez un chemin d’accès ou un nom de fichier (ou les deux) pour déterminer où les fichiers sont envoyés à l’emplacement sélectionné. Pour enregistrer des fichiers dans le dossier de niveau supérieur de l’emplacement, spécifiez /.

Pour les flux en direct, vous pouvez utiliser l’une des variables suivantes pour rendre le chemin d’accès ou le nom de fichier dynamique :

• {yyyy} : année civile à 4 chiffres (sensible à la casse)
• {yy} : année civile à 2 chiffres (sensible à la casse)
• {MM} : mois à 2 chiffres (sensible à la casse)
• {dd} : jour à 2 chiffres (sensible à la casse)
• {HH} : heure à 2 chiffres (sensible à la casse)
• {mm} : minutes à 2 chiffres (sensible à la casse)
• {ss} : secondes à 2 chiffres (sensible à la casse)
• {fff} : nanosecondes à 3 chiffres (sensible à la casse)
• {instance_id} : UUID de requête (instance)
• {export_id} : UUID de l’export (planning)
• {idx} : index démarré à partir de 0 (incrémenté pour chaque fichier)
• {total} : nombre total de fichiers pour l’ensemble de la tâche de transfert
• {completion_millis} : heure de transfert en millisecondes

Par exemple, si vous spécifiez ${yyyy}/${MM}/${dd}/my-feed-${instance_id}-${idx}, un flux dynamique diffusé le 15 janvier 2027 aura le chemin et le nom de fichier suivants : [prefix_folder_name]/2027/01/15/my-feed-[UUID]-1.parquet