Dataflows controleren op streamingbronnen in de gebruikersinterface
In deze zelfstudie worden de stappen beschreven voor het controleren van gegevensstromen voor streamingbronnen met de werkruimte van Sources .
Aan de slag
Deze zelfstudie vereist een goed begrip van de volgende onderdelen van Adobe Experience Platform:
- Dataflows: Dataflows zijn een vertegenwoordiging van gegevensbanen die gegevens over Platform bewegen. Dataflows worden geconfigureerd op verschillende services, waardoor gegevens van bronconnectors naar doelgegevenssets worden verplaatst, naar Identity en Profile en naar Destinations .
- looppas Dataflow: De looppas van Dataflow is de terugkomende geplande banen die op de frequentieconfiguratie van geselecteerde dataflows worden gebaseerd.
- Bronnen: Experience Platform staat gegevens toe om van diverse bronnen worden opgenomen terwijl het voorzien van u van de capaciteit om, inkomende gegevens te structureren te etiketteren en te verbeteren gebruikend de diensten van het Platform.
- Sandboxes: Experience Platform verstrekt virtuele zandbakken die één enkele instantie van het Platform in afzonderlijke virtuele milieu's verdelen helpen digitale ervaringstoepassingen ontwikkelen en ontwikkelen.
Dataflows controleren voor streamingbronnen
Selecteer in de gebruikersinterface van het platform Sources in de linkernavigatiebalk voor toegang tot de werkruimte van Sources . In het scherm Catalog worden diverse bronnen weergegeven waarmee u een account kunt maken.
Als u bestaande gegevensstromen voor streamingbronnen wilt weergeven, selecteert u Dataflows in de bovenste koptekst.
De pagina Dataflows bevat een lijst met alle bestaande gegevensstromen in uw organisatie, inclusief informatie over hun brongegevens, accountnaam en status van de gegevensstroom.
Selecteer de naam van de gegevensstroom u wilt bekijken.
De volgende lijst bevat meer informatie over dataflow looppas statussen:
Completed status wijst erop dat alle verslagen voor de overeenkomstige dataflow looppas binnen de periode van één uur werden verwerkt. Een Completed -status kan nog steeds fouten bevatten in gegevensstroomuitvoering.Success status wijst erop dat alle verslagen voor de overeenkomstige dataflow looppas binnen de periode van één uur werden verwerkt en dat er geen fouten tijdens de dataflow looppas werden ontmoet.Processing geeft aan dat een gegevensstroom nog niet actief is. Deze status wordt vaak direct na het maken van een nieuwe gegevensstroom aangetroffen.Error -status geeft aan dat het activeringsproces van een gegevensstroom is onderbroken.No runs geeft aan dat de gegevensstroom is gemaakt, maar dat er geen gegevensstroomuitvoering is gestart.Op de pagina Dataflow Activity wordt specifieke informatie over uw streaminggegevensstroom weergegeven. De bovenste banner bevat het cumulatieve aantal records dat wordt opgenomen en records die zijn mislukt voor al uw streaming dataflow-uitvoering in het geselecteerde datumbereik.
Standaard bevatten de weergegeven gegevens de innamesnelheden van de laatste zeven dagen. Selecteer Last 7 days om het tijdkader van getoonde verslagen aan te passen.
Er wordt een kalenderpop-upvenster weergegeven met opties voor alternatieve ingstijd. U kunt het dataflow runtime kader vormen om stroomlooplooppas van de vorige zeven dagen of de laatste 30 dagen te bekijken. U kunt ook de interactieve kalender configureren om een aangepast tijdframe van uw keuze in te stellen. Selecteer Apply als u klaar bent.
In de onderste helft van de pagina wordt informatie weergegeven over het aantal records dat per flowuitvoering is ontvangen, opgenomen en mislukt. Elke stroomrun wordt opgenomen binnen een uurvenster.
Metrische gegevens voor gegevensstroomuitvoering dataflow-run-metrics
Elke individuele dataflow run toont de volgende details:
- Dataflow run start: De tijd waarop de gegevensstroom is gestart.
- Processing time: De hoeveelheid tijd die nodig was voor het verwerken van de gegevensstroom.
- Records Received: Het totale aantal verslagen die in dataflow van een bronschakelaar worden ontvangen.
- Records Ingested: Het totale aantal records dat in Data Lake wordt ingevoerd.
- Records with Warnings: Het totale aantal records met waarschuwingen die zijn ingevoerd. Alle maptransformatiefouten worden gerapporteerd als waarschuwingen en rijen die gedeeltelijk worden ingeslikt, worden gelabeld als
successmet een waarschuwing. Nota: Steun voor het opnemen van verslagen met waarschuwingen is slechts beschikbaar aan het stromen bronnen. - Records Failed: Het aantal records dat niet in Data Lake is opgenomen als gevolg van fouten in de gegevens.
- Ingestion Rate: De successnelheid van records die in Data Lake worden ingevoerd. Deze metrische waarde is van toepassing wanneer Partial Ingestion is ingeschakeld.
- Status: geeft de status aan waarin de gegevensstroom zich bevindt: Completed of Processing . Completed betekent dat alle records voor de bijbehorende dataflow-run binnen een uur zijn verwerkt. Processing betekent dat de uitvoering van de gegevensstroom nog niet is voltooid.
De Dataflow run overview pagina bevat extra informatie over uw gegevensstroom, zoals zijn overeenkomstige dataflow looppas identiteitskaart, doeldataset, en organisatieidentiteitskaart
Een stroom met fouten bevat ook het deelvenster Dataflow run errors , waarin de specifieke fout wordt weergegeven die tot het mislukken van de uitvoering heeft geleid, en het totale aantal records dat is mislukt.
Records met waarschuwingen weergeven warnings
In Records with warnings wordt een lijst weergegeven met waarschuwingen voor maptransformatie die zijn opgetreden tijdens de uitvoering van de stroom. Rijen die gedeeltelijk worden ingesloten, worden als geslaagd beschouwd en worden met waarschuwingen toegevoegd als er fouten in de maptransformatie worden gevonden.
Standaard worden alle maptransformatiefouten beschouwd als waarschuwingen, behalve als ze een van de volgende zijn:
- Syntaxisfouten
- Verwijzingen naar kenmerken die niet bestaan
- Niet-overeenkomende XDM-gegevenstypen
Selecteer Preview error diagnostics om foutdiagnostiek weer te geven.
In het venster Error diagnostics preview kunt u maximaal 100 fouten en/of waarschuwingen met betrekking tot uw gegevensstroom voorvertonen. Vanaf hier kunt u het foutmanifest voor inname ook downloaden voor meer informatie met de API Data Access .
Volgende stappen
Aan de hand van deze zelfstudie hebt u de werkruimte van Sources gebruikt om de streaminggegevens te controleren en de fouten te identificeren die tot mislukte gegevensstromen hebben geleid. Raadpleeg de volgende documenten voor meer informatie: