Data Engineer (m/w/d)
New
GermanyFull-TimeMiddle
Salary not disclosed
Apply NowOpens the employer's application page
Job Details
- Languages
- German
- Required Skills
- PythonSQLApache AirflowETLGitSparkCI/CDData modelingDatabricks
Requirements
- Sehr gute Kenntnisse in Python für die Entwicklung von Datenpipelines.
- Praktische Erfahrung mit modernen Datenplattformen wie Databricks, Apache Airflow, Apache Spark oder Google BigQuery.
- Fortgeschrittene SQL-Kenntnisse und fundierte Erfahrung in der relationalen Datenmodellierung.
- Fundiertes Know-how in ETL-/ELT-Architekturen und der Orchestrierung komplexer Daten-Workflows.
- Vertrautheit mit Cloud-basierten Datenplattformen, Data Lakes und Object Storage.
- Kenntnisse in Git-Versionierung und CI/CD-Prozessen für Daten-Workflows.
- Idealerweise Erfahrung im ML/AI-Umfeld, beispielsweise beim Betrieb von AI-Workflows.
- Ausgeprägtes Qualitätsbewusstsein für Datenanalyse, Monitoring und Performance-Optimierung.
Responsibilities
- Entwicklung und Optimierung von Batch- und Streaming-Datenpipelines für zuverlässige und performante Datenverarbeitung.
- Konzeption, Implementierung und Betrieb von ETL-/ELT-Prozessen unter Verwendung von Python und Databricks.
- Entwurf, Verwaltung und Optimierung von Datenmodellen für analytische Anwendungen.
- Überwachung und Verbesserung der Datenqualität, Plattform-Stabilität und Performance.
- Zusammenarbeit mit dem Entwicklungsteam und Fachbereichen zur Anforderungsanalyse und Lösungsfindung.
View Full Description & ApplyYou'll be redirected to the employer's site