Senior Data Engineer
New
E
Edge One Solutions Sp. z o.oFinTech
Warszawa, -, Warszawa, Country code: PLFull-TimeSenior
Salary not disclosed
Apply NowOpens the employer's application page
Job Details
- Languages
- En B1
- Experience
- Minimum 5 lat doświadczenia w projektowaniu i utrzymaniu rozwiązań ETL/ELT w środowisku chmurowym.
- Required Skills
- AWSPythonSQLAgileETLCI/CDTerraformCloudFormationPySpark
Requirements
- Minimum 5 lat doświadczenia w projektowaniu i utrzymaniu rozwiązań ETL/ELT w środowisku chmurowym.
- Praktyczna znajomość Python, PySpark oraz zaawansowanego SQL/PLSQL.
- Doświadczenie z usługami AWS (m.in. S3, Lambda, Athena, SNS, Secrets Manager).
- Znajomość narzędzi Infrastructure as Code (Terraform, CloudFormation) oraz praktyk CI/CD.
- Doświadczenie w pracy z hurtowniami danych, integracją danych, walidacją danych oraz monitorowaniem procesów ETL.
- Znajomość systemów kontroli wersji oraz narzędzi do zarządzania projektami.
- Znajomość narzędzi BI (Power BI, Tableau) będzie dodatkowym atutem.
- Doświadczenie w pracy w środowisku Agile.
- Samodzielność, proaktywność oraz umiejętność efektywnej współpracy z zespołami technicznymi i biznesowymi.
- Dobra organizacja pracy, umiejętność zarządzania czasem oraz rozwinięte zdolności komunikacyjne.
- Znajomość języka angielskiego na poziomie B1.
Responsibilities
- Projektowanie, budowa i utrzymanie skalowalnych oraz wydajnych potoków przetwarzania danych w środowisku chmurowym.
- Tworzenie i utrzymanie procesów ETL/ELT służących do integracji oraz transformacji danych.
- Zapewnienie zgodności z wymaganiami w zakresie bezpieczeństwa informacji i ładu danych (Data Governance).
- Utrzymanie i rozwój chmurowych środowisk danych, w tym jezior danych (Data Lakes) oraz hurtowni danych (Data Warehouses).
- Ścisła współpraca z zespołami inżynierskimi, zespołami produktowymi oraz interesariuszami biznesowymi.
- Udział w badaniach technologicznych, działaniach związanych z ciągłym doskonaleniem oraz wdrażaniem nowych technologii.
- Dbanie o wysoką jakość kodu z wykorzystaniem systemów kontroli wersji oraz praktyk CI/CD.
- Wspieranie strategicznego rozwoju rozwiązań i infrastruktury z obszaru inżynierii danych.
View Full Description & ApplyYou'll be redirected to the employer's site
