Incremental extraction

Einleitung

Je nach Quellsystem ist es möglich, die inkrementelle Datenextraktion mit CData Sync auszuführen.

Voraussetzungen

Um die inkrementelle Datenextraktion mit CData Sync auszuführen, müssen Sie eine lokale Umgebung mit einer Staging-Datenbank einrichten. In dieser Staging-Datenbank können Sie Daten inkrementell aus dem Quellsystem extrahieren und das Delta zu den bereits extrahierten Daten hinzufügen. Die folgende Abbildung bietet eine Übersicht.

Staging-Datenbank

Die gängigsten Datenbanktypen können als Stagingdatenbank verwendet werden. Überprüfen Sie in der offiziellen Dokumentation für Ihr Extraktionstool, ob Ihr Extrakt in die Datenbank ausgegeben werden kann, die Sie als Staging-Datenbank verwenden möchten. Für CData Sync siehe Ziele, und für Theobald Xtract Universal siehe Ziele.

Außerdem müssen Sie in der Lage sein, die Daten aus dem Staging in den Blob-Speicher zu laden. Dies kann mit einem CData Sync-Auftrag erfolgen, wenn Ihre Datenbank als Quelle unterstützt wird, siehe Quellen.

Inkrementelle Einstellungen überprüfen

Für die meisten Quellsysteme hat CData Sync vorkonfiguriert, wie inkrementelle Extraktionen durchgeführt werden sollen. Ist dies nicht der Fall, müssen die Einstellungen manuell bearbeitet werden, um inkrementelle Extraktionen durchzuführen. Weitere Informationen dazu finden Sie in der offiziellen CData Sync-Dokumentation.

Ausführen der inkrementellen Extraktion

Führen Sie diese Schritte aus, um sicherzustellen, dass inkrementelle Datenextraktionen ordnungsgemäß ausgeführt werden.

1. Starten Sie die CData Sync Administratorkonsole und melden Sie sich als Administrator mit den während der Installation von CData Sync definierten Anmeldeinformationen an.
2. Wechseln Sie zu Aufträge und wählen Sie den Extraktionsauftrag aus, um die Auftragseinstellungen anzuzeigen.

3. Wechseln Sie zur Registerkarte Erweitert und bearbeiten Sie die Replikationsoption , um die Option Tabelle verwerfen aufzuheben. Dies ermöglicht die inkrementelle Extraktion.

Wenn der CData Sync-Extraktionsauftrag zum ersten Mal ausgeführt wird, wird eine vollständige Extraktion durchgeführt und alle Quelldaten werden extrahiert. Bei jeder nächsten Ausführung des CData Sync-Extraktionsauftrags werden nur die Daten extrahiert, die sich in der Quelle geändert haben, und das Delta wird zu den bereits extrahierten Daten hinzugefügt.

Hinweis:

Sie müssen einen zusätzlichen CData Sync-Auftrag erstellen, um die Daten aus der Staging-Datenbank in den Azure-Blobspeicher zu laden.

Weitere Informationen zur inkrementellen Datenextraktion mit CData Sync finden Sie in der offiziellen CData Sync-Dokumentation.