Lead Data Engineer (m/w/d)

Lead Data Engineer (m/w/d)

Als Lead Data Engineer verbindest du hands‑on Engineering mit technischer Führung und prägst die Weiterentwicklung unseres Databricks‑basierten Datenökosystems. Du stellst die technische Verantwortung für das Data‑Engineering‑Team, leitest Design, Entwicklung und Optimierung von Data‑Lösungen im Enterprise‑Maßstab auf Databricks und arbeitest eng mit Engineers, Architekt:innen, Product Ownern und Business‑Stakeholdern zusammen. Du triffst technische Entscheidungen, die sowohl kurzfristige Anforderungen als auch langfristige strategische Ziele unterstützen.

Stelleninformationen

• Arbeitsort: verschiedene Arbeitsorte

• Arbeitszeit: Homeoffice bis zu 40 %

• Anstellungsart: Vollzeit

• Befristung: unbefristet

Unsere Aufgaben

Du übernimmst die technische Verantwortung für das Data‑Engineering‑Team und prägst maßgeblich die technische Ausrichtung unserer Data‑Engineering‑Praktiken im gesamten Unternehmen. Du schreibst Code, definierst Standards und unterstützt sowie coachst andere Engineers. Gleichzeitig bist du die zentrale technische Eskalationsstelle für komplexe Herausforderungen.

• Die Leitung von Design, Entwicklung und Optimierung von Data‑Lösungen im Enterprise‑Maßstab auf Databricks

• Die Konzeption und Implementierung skalierbarer Data‑Ingestion‑Frameworks für Batch‑ und Streaming‑Workloads

• Die Verantwortung für Databricks Asset Bundles / Declarative Automation Bundles, Deployment‑Pipelines und Multi‑Environment‑Konfigurationen

• Die Steuerung von Data‑Governance‑Initiativen über Unity Catalog, inklusive Access Management, Storage Credentials und Metadatenverwaltung

• Die Definition und Pflege von Engineering‑Standards wie Coding Practices, Code Reviews, Dokumentation und Data‑Quality‑Frameworks

• Das Coaching anderer Data Engineers sowie die Übernahme der technischen Eskalation bei komplexen Herausforderungen

Unsere Erwartungen

• Umfassende praktische Erfahrung mit produktionsreifen Databricks‑Lösungen

• Sehr sicher in Python, PySpark und SQL, inklusive komplexer Transformationen, Performanceoptimierung und Query‑Design

• Erfahrung im Design von Databricks Asset Bundles und im Deployment über mehrere Umgebungen hinweg

• Fundiertes Wissen über Unity Catalog, Data Governance, Access Control und Best Practices im Datenmanagement

• CI/CD‑Pipelines mit GitHub Actions, Azure DevOps oder ähnlichen Technologien aufgebaut und betrieben

• Architekturentscheidungen und technische Trade‑offs klar und verständlich kommunizieren können – sowohl technisch als auch nicht‑technisch – auf Deutsch und Englisch

Zusatzvorteile

• Erfahrung mit Databricks AI/BI Dashboards, Genie oder Semantic Layer Design

• Kenntnisse im Azure Identity- und Secrets‑Management, z.B. Entra ID, OIDC Federation und Azure Key Vault

• Erfahrung darin, GDPR‑ und Vertraulichkeitsanforderungen in Data‑Engineering‑Lösungen zu integrieren

Unser Angebot

Bei DLG wirst du Teil einer ambitionierten und kollaborativen Organisation, in der Daten eine immer wichtigere Rolle für Innovation und geschäftlichen Mehrwert spielen. Du erhältst die Chance, unsere moderne Datenplattform aktiv mitzugestalten und an strategischen Initiativen im gesamten Unternehmen mitzuwirken.

Wir bieten dir ein flexibles und unterstützendes Arbeitsumfeld mit hervorragenden Möglichkeiten zur fachlichen Weiterentwicklung, zum Wissensaustausch und zum beruflichen Wachstum. Dich erwartet eine Kultur, die von Zusammenarbeit, Vertrauen und kontinuierlicher Verbesserung geprägt ist.

Vorteile für Mitarbeitende

• Flexible Arbeitszeiten

• Homeoffice / Mobiles Arbeiten

• Vermögenswirksame Leistungen

• Rabatte für Mitarbeitende

• Sonderzahlungen

• Betriebliche Altersvorsorge

• Parkmöglichkeiten

• Gute Verkehrsanbindung

• Moderne technische Ausstattung

Über das Unternehmen

Die DLG‑Gruppe zählt zu den führenden Genossenschaften Europas in den Bereichen Lebensmittel, Energie und Baustoffe. Unser Auftrag ist es, langfristigen Mehrwert für unsere landwirtschaftlichen Eigentümer und für die Gesellschaft zu schaffen – durch verlässliche Produkte, innovative Lösungen und nachhaltiges Wachstum in all unseren Geschäftsbereichen. Mit rund 7.000 Mitarbeitenden in 18 Ländern und auf Basis unserer genossenschaftlichen Struktur gestalten wir unsere Zukunft durch gemeinsame Werte, nachhaltige Ziele und den festen Glauben an die Kraft der Zusammenarbeit.

team SE

Die team SE mit Sitz in Flensburg ist ein wesentlicher Bestandteil der DLG‑Gruppe. Unsere zentralen Unternehmensfunktionen sind standortübergreifend zwischen Flensburg und dem DLG‑Hauptsitz in Fredericia organisiert. Gemeinsam unterstützen wir die Geschäftsbereiche über Ländergrenzen hinweg und tragen zu einer effizienten, integrierten und zukunftsfähigen Organisation bei, die Skaleneffekte und Synergien optimal nutzt.