Senior Data Engineer (Data Integration & Quality)

New

ScaloData engineering

Tryb realizacji usług: zdalnie, z wizytą we Wrocławiu ok. 1 raz na 6 miesięcyContractSenior

Salary22,400 - 24,000 PLN per month

Apply NowOpens the employer's application page

Job Details

Minimum 6 lat doświadczenia komercyjnego w pracy z danymi, w tym przy budowie warstw danych, integracji danych lub rozwiązaniach analitycznych.
Bardzo dobra, praktyczna znajomość SQL na poziomie zaawansowanym.
Praktyczna znajomość Python.
Doświadczenie z narzędziami do automatyzacji lub orkiestracji procesów danych, np. Apache Airflow.
Doświadczenie w integracji i mapowaniu danych z wielu źródeł, ich ujednolicaniu oraz definiowaniu reguł transformacji.
Doświadczenie w definiowaniu, weryfikacji i utrzymywaniu reguł jakości danych.
Dobre rozumienie architektury przepływu danych od systemów źródłowych przez przetwarzanie i transformację po warstwy udostępniane odbiorcom.
Doświadczenie w realizacji projektów angażujących wiele zespołów i interesariuszy.
Umiejętność planowania działań, ustalania priorytetów oraz zarządzania zależnościami projektowymi.
Umiejętność strukturyzowania niejednoznacznych potrzeb i przekładania ich na konkretne rozwiązania i działania.
Doświadczenie w prowadzeniu uzgodnień technicznych i biznesowych oraz komunikowaniu decyzji, ryzyk i konsekwencji.
Samodzielność i ownership w prowadzeniu powierzonych obszarów od analizy do wdrożenia.
Znajomość języka angielskiego na poziomie minimum B2.

Projektowanie i rozwój warstw danych oraz procesów ich zasilania.
Integracja danych z wielu źródeł, ich czyszczenie, ujednolicanie, transformacja i walidacja.
Analiza potrzeb oraz planowanie kolejnych etapów realizacji rozwiązań data engineeringowych.
Prowadzenie uzgodnień z właścicielami danych, odbiorcami biznesowymi oraz zespołami technicznymi.
Organizowanie i prowadzenie spotkań oraz warsztatów, a także przygotowywanie rekomendacji i kolejnych kroków.
Definiowanie mapowań, reguł transformacji oraz reguł jakości danych.
Rozwijanie procesów przetwarzania danych z wykorzystaniem SQL, Python i Airflow.
Wspieranie testów, code review, wdrożeń i odbiorów przygotowanych rozwiązań.
Dokumentowanie źródeł danych, mapowań, reguł biznesowych, transformacji oraz decyzji projektowych.
Identyfikowanie zależności, ryzyk i problemów oraz koordynowanie przepływu informacji między uczestnikami projektu.

View Full Description & ApplyYou'll be redirected to the employer's site