Data Engineer
New
D
DevapoMedTech
Warszawa, Aleje Jerozolimskie 100, Warszawa, Country code: plFull-TimeMiddle
Salary not disclosed
Apply NowOpens the employer's application page
Job Details
- Experience
- Minimum 3 lata
- Required Skills
- DockerPostgreSQLPythonSQLApache AirflowGitREST APICI/CDData modelingdbt
Requirements
- Minimum 3 lata doświadczenia na stanowisku Data Engineer lub pokrewnym.
- Praktyczna znajomość języka SQL.
- Znajomość języka Python.
- Doświadczenie z Apache Airflow.
- Znajomość frameworka dbt.
- Znajomość bazy danych PostgreSQL.
- Umiejętność modelowania danych.
- Doświadczenie w projektowaniu i budowie procesów ETL/ELT.
- Doświadczenie w integracji systemów z wykorzystaniem REST API.
- Biegłość w pracy z Git i CI/CD.
- Praktyczna znajomość Docker.
Responsibilities
- Budowa procesów ETL/ELT zasilających hurtownię danych (full load, incremental load, watermarki, CDC).
- Implementacja konektorów do systemów źródłowych (REST API, SOAP, pliki, bazy danych).
- Tworzenie i utrzymanie DAG-ów w Apache Airflow.
- Budowa modeli transformacji w dbt dla warstw Raw, Silver i Gold.
- Implementacja reguł jakości danych w Great Expectations.
- Praca w środowisku on-premises z wykorzystaniem Docker, Git, CI/CD oraz monitoringu Prometheus i Grafana.
View Full Description & ApplyYou'll be redirected to the employer's site
