Für ein Dienstleistungsunternehmen innerhalb einer internationalen Unternehmensgruppe sucht softwareXperts einen Lead Data Engineer für die BMP-Datenmigration.
Einsatzort: München. Vollzeit. Angegebener Starttermin: 16.11.2026. Full Remote mit zwei bis drei Präsenztagen pro Jahr.
Aufgaben
- Technische Leitung und praktische Umsetzung der BMP-Datenmigration.
- Profiling und Bewertung der Quelldaten sowie Definition und Implementierung von Datenmappings und Transformationsregeln.
- Entwicklung und Betreuung von Datenpipelines mit Databricks, PySpark, Spark SQL und Delta Lake.
- Einrichtung und Überwachung von Datenqualitätsprüfungen und Monitoring.
- Verantwortung für Quell-Ziel-Abgleiche und die Behebung von Datenabweichungen.
- Steuerung von Tests, CI/CD-Deployments und Codequalität.
- Erstellung von Runbooks und Unterstützung beim Cutover.
Anforderungen
- Fundierte praktische Erfahrung mit Datenmigrationen und produktiven Datenpipelines.
- Umfangreiche Databricks-Erfahrung mit Unity Catalog, Delta Lake, Lakeflow Connect, Lakeflow Declarative Pipelines und Lakeflow Jobs.
- Sehr gute Kenntnisse in PySpark und Spark SQL.
- Erfahrung mit Datenprofiling, Quell-Ziel-Mappings, Reconciliation und Datenqualitätsprüfungen.
- Kenntnisse in DQX, Databricks Data Quality Monitoring und Lakebridge.
- Erfahrung mit Databricks Asset Bundles, CI/CD und automatisierten Tests.
- Kenntnisse in Lakehouse Federation und AI/BI Dashboards.
- Erfahrung mit Runbooks, Fehlerbehebung und Cutover-Unterstützung.
- Nachgewiesene technische Führungserfahrung und Koordination der Umsetzung.
- Professionelle Englischkenntnisse und Bereitschaft zur hybriden Zusammenarbeit.
- Möglichst kurzfristige Verfügbarkeit.
Rahmenbedingungen
Überwiegend remote mit zwei bis drei Tagen pro Jahr vor Ort. softwareXperts begleitet den gesamten Bewerbungsprozess als Personalvermittler.
Kontakt
Lenka Curcic: lenka.curcic@sw-xperts.com
Vollzeit
Softwareentwicklung