Dataflows controleren voor streamingbronnen

Selecteer in de gebruikersinterface van het platform Sources in de linkernavigatiebalk voor toegang tot de werkruimte van Sources . In het scherm Catalog worden diverse bronnen weergegeven waarmee u een account kunt maken.

Als u bestaande gegevensstromen voor streamingbronnen wilt weergeven, selecteert u Dataflows in de bovenste koptekst.

catalogus

De pagina Dataflows bevat een lijst met alle bestaande gegevensstromen in uw organisatie, inclusief informatie over hun brongegevens, accountnaam en status van de gegevensstroom.

Selecteer de naam van de gegevensstroom u wilt bekijken.

dataflows

De volgende lijst bevat meer informatie over dataflow looppas statussen:

StatusBeschrijving
VoltooidDe Completed status wijst erop dat alle verslagen voor de overeenkomstige dataflow looppas binnen de periode van één uur werden verwerkt. Een Completed -status kan nog steeds fouten bevatten in gegevensstroomuitvoering.
SuccesDe Success status wijst erop dat alle verslagen voor de overeenkomstige dataflow looppas binnen de periode van één uur werden verwerkt en dat er geen fouten tijdens de dataflow looppas werden ontmoet.
VerwerkingDe status Processing geeft aan dat een gegevensstroom nog niet actief is. Deze status wordt vaak direct na het maken van een nieuwe gegevensstroom aangetroffen.
FoutDe Error -status geeft aan dat het activeringsproces van een gegevensstroom is onderbroken.
Geen uitvoeringDe status No runs geeft aan dat de gegevensstroom is gemaakt, maar dat er geen gegevensstroomuitvoering is gestart.

Op de pagina Dataflow Activity wordt specifieke informatie over uw streaminggegevensstroom weergegeven. De bovenste banner bevat het cumulatieve aantal records dat wordt opgenomen en records die zijn mislukt voor al uw streaming dataflow-uitvoering in het geselecteerde datumbereik.

dataflow-activity

Standaard bevatten de weergegeven gegevens de innamesnelheden van de laatste zeven dagen. Selecteer Last 7 days om het tijdkader van getoonde verslagen aan te passen.

Er wordt een kalenderpop-upvenster weergegeven met opties voor alternatieve ingstijd. U kunt het dataflow runtime kader vormen om stroomlooplooppas van de vorige zeven dagen of de laatste 30 dagen te bekijken. U kunt ook de interactieve kalender configureren om een aangepast tijdframe van uw keuze in te stellen. Selecteer Apply als u klaar bent.

kalender

In de onderste helft van de pagina wordt informatie weergegeven over het aantal records dat per flowuitvoering is ontvangen, opgenomen en mislukt. Elke stroomrun wordt opgenomen binnen een uurvenster.

dataflow-run

Metrische gegevens voor gegevensstroomuitvoering

Elke individuele dataflow run toont de volgende details:

  • Dataflow run start: De tijd waarop de gegevensstroom is gestart.
  • Processing time: De hoeveelheid tijd die nodig was voor het verwerken van de gegevensstroom.
  • Records Received: Het totale aantal verslagen die in dataflow van een bronschakelaar worden ontvangen.
  • Records Ingested: Het totale aantal records dat in Data Lake wordt ingevoerd.
  • Records with Warnings: Het totale aantal records met waarschuwingen die zijn ingevoerd. Alle maptransformatiefouten worden gerapporteerd als waarschuwingen en rijen die gedeeltelijk worden ingeslikt, worden gelabeld als success met een waarschuwing. Nota: Steun voor het opnemen van verslagen met waarschuwingen is slechts beschikbaar aan het stromen bronnen.
  • Records Failed: Het aantal records dat niet in Data Lake is opgenomen als gevolg van fouten in de gegevens.
  • Ingestion Rate: De successnelheid van records die in Data Lake worden ingevoerd. Deze metrische waarde is van toepassing wanneer Partial Ingestion is ingeschakeld.
  • Status: geeft de status aan waarin de gegevensstroom zich bevindt: Completed of Processing . Completed betekent dat alle records voor de bijbehorende dataflow-run binnen een uur zijn verwerkt. Processing betekent dat de uitvoering van de gegevensstroom nog niet is voltooid.

De Dataflow run overview pagina bevat extra informatie over uw gegevensstroom, zoals zijn overeenkomstige dataflow looppas identiteitskaart, doeldataset, en organisatieidentiteitskaart

Een stroom met fouten bevat ook het deelvenster Dataflow run errors , waarin de specifieke fout wordt weergegeven die tot het mislukken van de uitvoering heeft geleid, en het totale aantal records dat is mislukt.

dataflow-run-overview