Data Engineer
New
C
CycladIT
100% zdalnaContractMiddle
SalaryDo 130 PLN netto + VAT/h
Apply NowOpens the employer's application page
Job Details
- Languages
- Bardzo dobra znajomość języka angielskiego
- Experience
- Min. 2 lat doświadczenia z Microsoft Azure
- Required Skills
- PythonSQLAgileETLAzureCI/CDAzure DevOpsPySpark
Requirements
- Min. 2 lata doświadczenia z Microsoft Azure
- Praktyczna znajomość Azure Databricks, Azure Data Factory i Azure DevOps
- Bardzo dobra znajomość Pythona i PySpark
- Dobra znajomość SQL, modelowania danych i procesów ETL/ELT
- Doświadczenie z CI/CD, testami automatycznymi i TDD
- Znajomość zagadnień data quality, data governance i data integration
- Doświadczenie w pracy w środowisku DevOps i Agile/Scrum
- Bardzo dobra znajomość języka angielskiego
Responsibilities
- Budowa i optymalizacja pipeline’ów danych oraz procesów ETL/ELT
- Przetwarzanie danych przy użyciu Pythona i PySpark
- Rozwijanie rozwiązań opartych na Azure Databricks, Data Factory i Azure Storage
- Wdrażanie testów automatycznych, kontroli jakości danych i monitoringu
- Udział w procesach CI/CD i automatyzacji wdrożeń
- Rozwiązywanie problemów z wydajnością i skalowalnością
- Współpraca z zespołami technicznymi i biznesowymi
View Full Description & ApplyYou'll be redirected to the employer's site
