Data Engineer (m/w/d) Azure Data Factory | Airflow - Remote

Leistungsbeschreibung

Projektbeschreibung: 

Das agile Team „Blocking & Deletion“ entwickelt, betreibt und wartet einen End-to-End-Datenlöschprozess, um nicht mehr benötigte oder zulässige Daten gleichzeitig über mehrere zentrale EDG-Systeme hinweg zu löschen.

Ein zentraler Bestandteil davon ist der „DSGVO-Orchestrator“, der die zu löschenden Daten und die Antworten der Systeme koordiniert, um eine korrekte Löschung und die Berichterstattung über die Löschung sicherzustellen.

Leistung:

• Weiterentwicklung DSGVO-Orchestrator (Airflow+ADF)
• Anbindung neue Systeme an der Orchestrator und E2E Prozess
• Abbildung neue Szenarien (neue Gruppen zu löschen in bestehende Systemen)
• Prozess Optimierung
• Technischer Schuldenabbau
• Beratung des Teams hinsichtlich Verbesserung das Löschen im Snowflake (VDWH) und verbesserte Datenselektion.

Kompetenzen: 

• Expert in Anwendung Azure Data Factory
• Expert in Airflow
• Advanced SQL und Data Warehouse Kenntnisse, Snowflake von Vorteil
• Erfahrung mit DSGVO und Löschprozess von Vorteil
• Mindestens B2 Deutsch und B2 Englisch
• Organisert, selbst-motivert und gut in den Austausch mit den Fachbereich.
• Kommunikation auf Augenhöhe mit sowohl Technisch und nicht Technischen Ansprechpartner

Über den Auftraggeber

!!! Hierzu können wir ausschließlich Near- oder Offshore-Ressourcen berücksichtigen !!!

Start: ab 01.08.2026 

Ende: bis 31.12.2026 + Option auf Verlängerung

Volumen: Offsite Stunden: 960

Einsatzort: Remote