Alle ankommenden Daten müssen in UMF (Universal Message Format) umgesetzt werden, bevor sie von Übernahmeprogrammen zur Verarbeitung in die Pipelines transportiert werden können. Das Produkt wird mit einer Reihe von Tools ausgeliefert, die Sie beim ETL-Prozess (Extrahieren, Transformieren und Laden) unterstützen. Diese UMF-Dienstprogramme setzen Daten zuverlässlich in UMF um und stellen doppelte Daten sowie geänderte Datensätze in der Gruppe der Datenquellensätze fest.
Sie können die mit dem Produkt ausgelieferten UMF-Dienstprogramme oder ein beliebiges anderes ETL-Tool verwenden, das die Daten in UMF konvertiert.
Das Dienstprogramm Net Change stellt doppelte Daten und geänderte Datensätze in der Datenquelle fest, wodurch das Gesamtdatenvolumen reduziert wird, das umgesetzt und in das System geladen werden muss. Dieses Dienstprogramm ist nützlich, wenn mindestens eine Ihrer Datenquellen umfangreiche Gruppen von Langzeitdaten enthält, die redundant oder nahezu redundant sind. Das Dienstprogramm Net Change kann zur Steigerung der Gesamtsystemleistung beitragen, indem es die Verarbeitung doppelter Datensätze eliminiert und die Gesamtzahl Datensätze reduziert, die die Pipelines verarbeiten.