Senior Cloud Data & AI Engineer (m/w/d) - Databricks

Dein Aufgabengebiet

• Du konzipierst und implementierst moderne Data‑ & AI‑Plattformen auf Basis von Databricks.

• Du entwickelst robuste und performante Batch‑ und Streaming‑Pipelines mit Python, SQL, Spark und PySpark.

• Du arbeitest an skalierbaren Lakehouse‑Architekturen für Analytics, ML und GenAI‑Anwendungsfälle.

• Du nutzt zentrale Databricks‑Komponenten wie Delta Lake, Unity Catalog, Workflows, MLflow, Model Serving und Vector Search in produktiven Umgebungen.

• Du unterstützt beim Aufbau und der Operationalisierung von ML‑, LLM‑ und GenAI‑Use‑Cases sowie bei Themen wie Serving, Retrieval, Evaluation, Monitoring und Governance für moderne AI‑Anwendungen.

• Du integrierst unterschiedliche Quellsysteme wie APIs, Datenbanken, ERP‑ oder CRM‑Systeme.

• Du setzt Anforderungen rund um Data Quality, Security, Governance und Observability technisch um.

• Du automatisierst Deployments und technische Standards mit Git, CI/CD und Infrastructure‑as‑Code.

• Du berätst Kunden und interne Stakeholder bei Architekturentscheidungen rund um Datenplattformen und AI‑Lösungen.

• Du trägst zu Wissensaustausch, technischer Orientierung und Unterstützung weniger erfahrener Kolleginnen und Kollegen bei.

Wesentliche Anforderungen

• Mehrjährige Erfahrung im Bereich Data Engineering, Machine Learning Engineering, AI Engineering oder einer vergleichbaren Rolle.

• Sehr gute Kenntnisse in Databricks sowie in Python, SQL, Spark und PySpark.

• Praxiserfahrung mit mindestens einer Cloud‑Plattform, idealerweise Azure oder AWS.

• Erfahrung im Aufbau und Betrieb moderner Datenplattformen in der Cloud.

• Erfahrung mit MLflow, Model Serving und Vector Search, idealerweise im Databricks‑Umfeld.

• Gute Kenntnisse in modernen AI‑/LLM‑Architekturen (z. B. RAG, Retrieval, Evaluation, Serving und produktive GenAI‑Anwendungen).

• Gutes Verständnis für Lakehouse‑Architekturen, Datenmodellierung und produktive Datenprozesse.

• Erfahrung in Data Governance, Data Quality, Security und Monitoring.

• Sicherer Umgang mit Git, CI/CD und idealerweise Infrastructure‑as‑Code.

• Abgeschlossenes Studium in Wirtschaftsinformatik, Informatik, Data Science oder einem vergleichbaren Studiengang.

• Strukturierte, eigenverantwortliche und lösungsorientierte Arbeitsweise.

Bonus‑Qualifikationen

• Kenntnisse in modernen Generative‑AI‑Anwendungen.

• Erfahrungen mit Azure‑ oder AWS‑Diensten wie Azure Data Factory, S3, IAM, oder Synapse.

Dein Aufstieg innerhalb des Teams

• Vom Experten zum Trusted Advisor: Projektarbeit bei agilen Startups und DAX‑Konzernen.

• Freiraum für innovative Konzepte – von der Ideengestaltung bis zur Produktion.

• Investition in deine Weiterbildung: volles finanzielle Förderung für Zertifizierungen (z. B. Databricks, Cloud‑Provider).

• Zukunftssicherer Arbeitsplatz mit attraktiver Vergütung und Home‑Office‑Optionen.

Über uns

ruhrdot. ist ein dynamisch wachsendes Beratungsunternehmen mit den Kernkompetenzen Prozesse, Daten & Programmierung. Wir spezialisieren uns auf die Implementierung und Anpassung von ERP‑Systemen, die Entwicklung von Add‑ons und Schnittstellen sowie auf Data‑Analytics und Business‑Intelligence.