Data Engineer (m/w/d)

New
GermanyFull-TimeMiddle
Salary not disclosed
Apply NowOpens the employer's application page

Job Details

Languages
German
Required Skills
PythonSQLApache AirflowETLGitSparkCI/CDData modelingDatabricks

Requirements

  • Sehr gute Kenntnisse in Python für die Entwicklung von Datenpipelines.
  • Praktische Erfahrung mit modernen Datenplattformen wie Databricks, Apache Airflow, Apache Spark oder Google BigQuery.
  • Fortgeschrittene SQL-Kenntnisse und fundierte Erfahrung in der relationalen Datenmodellierung.
  • Fundiertes Know-how in ETL-/ELT-Architekturen und der Orchestrierung komplexer Daten-Workflows.
  • Vertrautheit mit Cloud-basierten Datenplattformen, Data Lakes und Object Storage.
  • Kenntnisse in Git-Versionierung und CI/CD-Prozessen für Daten-Workflows.
  • Idealerweise Erfahrung im ML/AI-Umfeld, beispielsweise beim Betrieb von AI-Workflows.
  • Ausgeprägtes Qualitätsbewusstsein für Datenanalyse, Monitoring und Performance-Optimierung.

Responsibilities

  • Entwicklung und Optimierung von Batch- und Streaming-Datenpipelines für zuverlässige und performante Datenverarbeitung.
  • Konzeption, Implementierung und Betrieb von ETL-/ELT-Prozessen unter Verwendung von Python und Databricks.
  • Entwurf, Verwaltung und Optimierung von Datenmodellen für analytische Anwendungen.
  • Überwachung und Verbesserung der Datenqualität, Plattform-Stabilität und Performance.
  • Zusammenarbeit mit dem Entwicklungsteam und Fachbereichen zur Anforderungsanalyse und Lösungsfindung.
View Full Description & ApplyYou'll be redirected to the employer's site
View details
Apply Now