Das ist der Job
Das sind deine Aufgaben Du konzipierst, implementierst und betreibst vollst ndig automatisierte Datenpipelines (ETL, ELT etc.) zur effizienten Verarbeitung gro er Mengen an strukturierten und unstrukturierten Daten mit Azure databricks.
Du arbeitest eng mit unseren Data Scientists, Data Analysts, Data Engineers und BI-Entwicklern zusammen, um die notwendigen Daten schnell, sicher und effizient bereitzustellen.
Das brauchst du
Das bringst du mit Du hast ein abgeschlossenes Studium in Informatik, Data Engineering, Naturwissenschaften oder vergleichbarer Fachrichtung und erste Berufserfahrung im Bereich Data Engineering gesammelt. Du hast Kenntnisse in der Entwicklung und Optimierung von Datenpipelines (ETL, ELT) idealerweise mit Spark und databricks.
Du hast Erfahrung in Python, SQL, Spark etc. mit klarem Fokus auf Data Engineering. Du bringst ein gutes Grundverst ndnis f r die Anbindung von Datenbanken, APIs etc. an eine Daten Plattform mit.
Darum lohnt es sich
Du stellst die technisch-operative Datenqualit t und -konsistenz sicher, in dem du geeignete Validierungs- und Bereinigungsprozesse realisierst. Die Umsetzung und Einhaltung hoher Datenschutz- und Sicherheitsanforderungen in einem regulierten Umfeld sind f r dich Best Du bindest verschiedene interne (z.
Datenbanken, APIs) und externe Datenquellen (u. a. APIs, Web-Crawler) an. Du berwachst laufende Datenpipelines und Prozessen und behebst eventuelle Fehler im laufenden Betrieb. Du dokumentierst deine Arbeitsergebnisse strukturiert und adressatengerecht.
