Zum Inhalt springen
SAP, DATEV und Dynamics Experten
Technische Fragen

Wie performant ist die Synchronisation bei großen Datenmengen?

Antwort

Die Performance hängt vom gewählten Integrationsmuster, der Schnittstelle des Zielsystems und dem Datenvolumen ab. Als Orientierung aus der Praxis: Bei REST-APIs sind typischerweise 500 bis 2.000 Datensätze pro Minute realistisch, über Message-Queues lassen sich 10.000 bis 50.000 Nachrichten pro Minute verarbeiten (Projekterfahrung). Der begrenzende Faktor ist meist nicht unsere Middleware, sondern die Drosselung des angebundenen ERP.

Für den Erstimport großer Kataloge mit 100.000 und mehr Artikeln nutzen wir Bulk-Import-Strategien mit paralleler Verarbeitung und sinnvoller Batch-Größe, damit das Quellsystem nicht überlastet wird. Im laufenden Betrieb greift die Delta-Synchronisation: Es werden nur tatsächlich geänderte Datensätze übertragen, wodurch die täglichen Abgleiche deutlich schneller und ressourcenschonender ablaufen als ein Voll-Import.