Lead Data Engineer / Data Architect

Für ein spannendes Projekt im Rahmen einer Datenfabrik sucht unser Kunde eine erfahrene Fachkraft als Lead Data Engineer / Data Architect (m/w/d). In dieser Rolle verantworten Sie die technische Konzeption, Architektur und Weiterentwicklung komplexer Datenmanagementlösungen. Der Fokus liegt auf der ganzheitlichen Steuerung von End-to-End-Datenprozessen über sämtliche Datenmanagement-Layer hinweg – von der Integration und Transformation bis hin zur Bereitstellung zentraler Datenprodukte.

Das Projekt und Ihre Aufgaben:

• Technische Führung und Architekturverantwortung bei der Konzeption und Umsetzung komplexer Datenmanagementlösungen
• Fachliche Anleitung und Unterstützung der Data Engineers im Entwicklungsteam
• Ganzheitliches Architekturdesign und technische Steuerung von End-to-End-Datenprozessen
• Konzeption und Weiterentwicklung skalierbarer Datenarchitekturen unter Einsatz von Azure und Databricks
• Architektur und Design vollständiger Datenstrecken vom Data Lake über harmonisierte Datenmodelle bis hin zu Datenprodukten
• Definition technischer Standards, Best Practices und Architekturprinzipien für produktionsreife Data Pipelines
• Technische Bewertung komplexer Anforderungen und Implementierung anspruchsvoller ETL-/ELT-Prozesse
• Durchführung von Architektur- und Code-Reviews sowie Sicherstellung der technischen Qualität
• Enge Abstimmung mit Systemarchitekten, Product Ownern und weiteren Stakeholdern
• Verantwortung für technische Qualitätssicherung, Integrationstests und Begleitung von Release-Prozessen
• Mitarbeit in einem agilen Product Team nach SAFe

Das erforderliche Profil:

• Fundierte Erfahrung mit der Architektur, Entwicklung und Optimierung von Databricks-Datenplattformen
• Sehr gute Kenntnisse in Microsoft Azure im Aufbau und Betrieb cloudbasierter Datenarchitekturen
• Umfangreiche praktische Entwicklungserfahrung in Python, PySpark und Pandas
• Sehr gute SQL-Kenntnisse in Datenmodellierung, Datenverarbeitung und Performanceoptimierung
• Tiefgehendes Verständnis moderner ETL/ELT-Datenintegrations- und Transformationsarchitekturen
• Erfahrung mit mehrschichtigen Datenarchitekturen, Data Lakes und zentralen Datenprodukten
• Mehrjährige Erfahrung als Lead Data Engineer, Data Architect, Technical Lead oder Senior Data Engineer mit Architekturverantwortung
• Nachweisbare Erfahrung in der technischen Leitung komplexer Data-Engineering- oder Datenmanagementprojekte
• Fundierte Kenntnisse agiler Softwareentwicklungsprozesse (idealerweise SAFe) und des Software Development Lifecycle
• Ausgeprägte Kommunikationsfähigkeit sowie Deutschkenntnisse auf C1-Niveau

Praktische Informationen:

• Start: Zum nächstmöglichen Zeitpunkt
• Auslastung: 100 % (Vollzeit)
• Dauer: Langfristig
• Einsatzort: Überwiegend remote, ca. 3 bis 4 Tage pro Monat vor Ort in Wien
• Reisebereitschaft: Erforderlich