Replicatiemethoden configureren

Replication de methodes en hercontrolesworden gebruikt om nieuwe of bijgewerkte gegevens in uw gegevensbestandlijsten te identificeren. Een juiste instelling is van cruciaal belang voor zowel de nauwkeurigheid van de gegevens als de geoptimaliseerde updatetijden. Dit onderwerp concentreert zich op replicatiemethodes.

Wanneer de nieuwe lijsten in de Manager van de Data Warehouseworden gesynchroniseerd, wordt een replicatiemethode automatisch gekozen voor de lijst. Het begrip van de diverse replicatiemethodes, hoe de lijsten worden georganiseerd, en hoe het gedrag van de lijstgegevens u toestaat om de beste replicatiemethode voor uw lijsten te kiezen.

Wat zijn de replicatiemethoden?

Replication -methoden vallen in drie groepen: Incremental , Full Table en Paused .

Incremental Replication betekent dat in Commerce Intelligence alleen nieuwe of bijgewerkte gegevens worden gerepliceerd bij elke replicatiepoging. Aangezien deze methoden de latentie aanzienlijk verkleinen, wordt het aanbevolen deze zo veel mogelijk te gebruiken.

Full Table Replication betekent dat Commerce Intelligence de volledige inhoud van een tabel dupliceert bij elke replicatiepoging. Vanwege de mogelijk grote hoeveelheid gegevens die moet worden gerepliceerd, kunnen deze methoden de latentie en updatetijden verhogen. Als een lijst om het even welke timestamped of datetime kolommen bevat, adviseert de Adobe gebruikend een Incrementele methode in plaats daarvan.

Paused geeft aan dat replicatie voor de tabel is gestopt of gepauzeerd. Commerce Intelligence controleert niet op nieuwe of bijgewerkte gegevens tijdens een updatecyclus; dit betekent dat geen gegevens van een lijst worden herhaald die dit als zijn Methode van de Replicatie heeft.

Incrementele replicatiemethoden incremental

Gewijzigd bij (meest ideaal)

De Modified At replicatiemethode gebruikt een datetime kolom - die wordt bevolkt wanneer een rij wordt gecreeerd en dan bijgewerkt wanneer de gegevens veranderen - om te herhalen gegevens te vinden. Deze methode is ontworpen voor het werken met tabellen die aan de volgende criteria voldoen:

Naast die criteria, adviseert de Adobe indexerend de datetime kolom die voor Modified At replicatie wordt gebruikt, aangezien dit hulp replicatiesnelheid optimaliseert.

Wanneer de update wordt uitgevoerd, worden nieuwe of gewijzigde gegevens geïdentificeerd door te zoeken naar rijen met een waarde in de kolom datetime die na de meest recente update is opgetreden. Wanneer nieuwe rijen worden ontdekt, worden zij herhaald aan uw Data Warehouse. Als om het even welke rijen in de Manager van de Data Warehousebestaan, worden zij met de huidige gegevensbestandwaarden beschreven.

Een tabel kan bijvoorbeeld een kolom met de naam modified\_at hebben die de laatste keer aangeeft dat gegevens zijn gewijzigd. Als de meest recente update dinsdag om 12.00 uur liep, zoekt de update naar alle rijen met een modified\_at waarde groter dan dinsdag 12.00 uur. Alle ontdekte rijen die zijn gemaakt of gewijzigd sinds 12.00 uur op dinsdag, worden gerepliceerd naar de Data Warehouse.

Wist u het?
Zelfs als uw gegevensbestand momenteel geen Incremental methode van de Replicatie kan steunen, kunt u veranderingen in uw gegevensbestand kunnen aanbrengendie gebruik van Modified At of Single Auto Incrementing PK zou toelaten.

Modified At is niet alleen de meest ideale replicatiemethode, maar ook de snelste. Deze methode veroorzaakt niet alleen merkbare snelheidsverhogingen met grote gegevensreeksen, het vereist ook het vormen van geen recheck optie. Andere methoden moeten een hele tabel doorlopen om wijzigingen te identificeren, zelfs als een kleine subset van gegevens is gewijzigd. Modified At doorloopt alleen die kleine subset.

Eén automatische incrementele primaire sleutel

Auto Incrementing is een gedrag dat achtereenvolgens primaire sleutels aan rijen toewijst. Als een tabel Auto Incrementing is en de hoogste primaire sleutel in de tabel 1000 is, is de volgende primaire waarde 1001 of hoger. Een tabel die het gedrag Auto Incrementing niet gebruikt, kan een waarde voor de primaire sleutel toewijzen die lager is dan 1000 of naar een veel groter getal springen, maar dit wordt niet vaak gebruikt.

Deze methode is ontworpen voor het repliceren van nieuwe gegevens uit tabellen die aan de volgende criteria voldoen:

Wanneer een tabel gebruikmaakt van Single Auto Incrementing Primary Key -replicatie, worden nieuwe gegevens gedetecteerd door te zoeken naar waarden voor primaire sleutels die hoger zijn dan de huidige hoogste waarde in de Data Warehouse. Als de hoogste waarde voor de primaire sleutel in de Data Warehouse bijvoorbeeld 500 is, zoekt de volgende update naar rijen met de primaire sleutel waarden 501 of hoger.

Datum toevoegen

De methode Add Date werkt ongeveer op dezelfde manier als de methode Single Auto Incrementing Primary Key . In plaats van een geheel getal voor de primaire sleutel van de tabel te gebruiken, gebruikt deze methode een kolom timestamped om te controleren op nieuwe rijen.

Wanneer een tabel replicatie met Add Date gebruikt, worden nieuwe gegevens gedetecteerd door te zoeken naar waarden met een tijdstempel die groter zijn dan de laatste datum die is gesynchroniseerd met uw Data Warehouse. Bijvoorbeeld, als een update het laatst op 20/12/2015 09 :00: 00 liep, om het even welke rijen met een timestamp groter dan dit zullen als nieuwe gegevens worden gemerkt en worden herhaald.

Volledige tabelreplicatiemethoden fulltable

Volledige tabel

Met Full table vernieuwt u de volledige tabel wanneer nieuwe rijen worden gedetecteerd. Dit is verreweg de minst efficiënte replicatiemethode, omdat alle gegevens tijdens elke update moeten worden opnieuw verwerkt, veronderstellend er nieuwe rijen zijn.

Nieuwe rijen worden ontdekt door uw gegevensbestand bij het begin van het synchronisatieproces te vragen en het aantal rijen te tellen. Als uw lokale database meer rijen bevat dan Commerce Intelligence , wordt de tabel vernieuwd. Als de rijtellingen identiek zijn, of als Commerce Intelligence meer rijen dan uw lokaal gegevensbestand bevat, dan wordt de lijst overgeslagen.

Dit werpt het belangrijke punt op dat replicatie in Full Tableniet compatibel is wanneer:

In beide bovenstaande scenario's worden door Full Table -replicatie geen wijzigingen gedetecteerd en worden uw gegevens verouderd. Vanwege de inefficiëntie van deze replicatiemethode en de hierboven vermelde vereisten wordt Full Table -replicatie alleen aanbevolen als laatste redmiddel.

Batch primaire sleutel

Wanneer een tabel Primary Key Batch (PK-batch) gebruikt, worden nieuwe gegevens gedetecteerd door rijen binnen bereiken, of batches, van waarden voor primaire sleutels te tellen. Terwijl u typisch denkt dat dit met gehelen wordt gebruikt, zelfs kunnen de tekstwaarden op een manier worden bevolen die het systeem toestaat om constante waaiers te bepalen.

Bijvoorbeeld, zeg dat een update looppas en een rijtelling voor de waaier van sleutels van 1 tot 100 uitvoert. In deze update zoekt en registreert het systeem 37 rijen. In de volgende update wordt opnieuw een rijtelling uitgevoerd voor het bereik 1-100 en worden 41 rijen gevonden. Omdat er een verschil is in het aantal rijen in vergelijking met de laatste update, inspecteert het systeem die waaier (of partij) meer in detail.

Deze methode is bedoeld voor het repliceren van gegevens uit tabellen die aan de volgende criteria voldoen:

Deze methode is niet ideaal, omdat het ongelooflijk langzaam is door de hoeveelheid verwerking die moet plaatsvinden om partijen te onderzoeken en veranderingen te vinden. Adobe raadt u aan deze methode alleen te gebruiken als het niet mogelijk is de benodigde wijzigingen aan te brengen om de andere replicatiemethoden te ondersteunen. Verwacht dat de updatetijden zullen stijgen als deze methode moet worden gebruikt.

Replicatiemethoden instellen

De methodes van de replicatie worden geplaatst op een lijst-door-lijst basis. Als u een replicatiemethode voor een tabel wilt instellen, hebt u Admin -machtigingen nodig, zodat u toegang kunt krijgen tot Data Warehouse Manager.

Kijk naar het hele proces:

Omloop

Om omhoog te beëindigen, hebt u deze lijst samengebracht die de diverse replicatiemethodes vergelijkt. Het is ongelooflijk handig als u een methode voor de tabellen in uw Data Warehouse selecteert.

Gerelateerde documentatie