Data Engineer Azure Databricks ETL Automation Specialist
D
DaCodesSoftware, Digital Transformation
Ubicación: LATAMContractSenior
Salary1,800 USD per month
Apply NowOpens the employer's application page
Job Details
- Experience
- 5+ años
- Required Skills
- PythonSQLETLData engineeringPySpark
Requirements
- 5+ años de experiencia en roles de Data Engineering, ETL Development o Data Integration.
- Experiencia comprobable trabajando con Azure Data Factory (ADF).
- Experiencia práctica desarrollando soluciones con Azure Databricks.
- Experiencia implementando procesos ETL de extremo a extremo.
- Experiencia procesando archivos estructurados (CSV, TXT, Excel).
- Conocimientos avanzados de SQL.
- Dominio de Python y PySpark.
- Conocimientos de Azure Data Lake Storage (ADLS) y Azure Blob Storage (deseable).
- Conocimientos de Git (deseable).
- Capacidad de resolución de problemas y orientación a resultados.
- Experiencia previa trabajando en entornos cloud basados en Microsoft Azure.
Responsibilities
- Diseñar, desarrollar y mantener procesos ETL utilizando Azure Data Factory y Databricks.
- Implementar pipelines de integración de datos para la ingesta y procesamiento de archivos CSV, TXT, Excel y otras fuentes.
- Automatizar procesos de carga, transformación y validación de datos.
- Configurar y administrar Jobs y Workflows en Databricks para la ejecución programada.
- Desarrollar transformaciones de datos utilizando SQL y tecnologías del ecosistema Databricks.
- Monitorear, diagnosticar y resolver incidencias relacionadas con pipelines.
- Garantizar la calidad, consistencia e integridad de los datos procesados.
- Colaborar con equipos técnicos y stakeholders para requerimientos de integración y automatización.
View Full Description & ApplyYou'll be redirected to the employer's site
