Senior Data Developer, AWS
New
C
CI&TData engineering
Listing location: Brazil; Workplace type: RemoteFull-TimeSenior
Salary not disclosed
Apply NowOpens the employer's application page
Job Details
- Required Skills
- SQLApache AirflowDynamoDBSparkPySpark
Requirements
- Ter domínio do ecossistema de dados AWS, incluindo AWS Glue, EMR, Amazon Athena, DynamoDB, Lake Formation, Amazon S3 e EventBridge.
- Ter sólida experiência com Apache Spark e PySpark.
- Ter experiência com modelagem de Data Warehouse em Amazon Redshift e arquiteturas Lakehouse.
- Conhecer Open Table Formats, incluindo Iceberg ou Delta.
- Ter experiência com data contracts e schema evolution.
- Ter prática com Apache Airflow.
- Ter sólida experiência com bancos de dados relacionais e SQL, além de bancos não relacionais e NoSQL.
- Conhecer governança de dados e data lineage, incluindo OpenLineage.
- Conhecer ferramentas de observabilidade como CloudWatch ou DataDog.
- Ter cultura DevOps, mentalidade de automação e capacidade de planejar capacidade considerando custos e desempenho.
- Ter capacidade de resolver incidentes e atuar na melhoria contínua.
Responsibilities
- Planejar e executar a migração de sistemas e volumes de dados para a nova infraestrutura em nuvem.
- Desenvolver, otimizar e orquestrar processos ETL/ELT, garantindo integridade, desempenho e qualidade dos dados.
- Colaborar com equipes de desenvolvimento, produtos e operações para implementar soluções de dados.
- Monitorar a saúde dos ambientes e solucionar problemas complexos em bancos de dados e pipelines.
- Atuar na melhoria contínua dos ambientes e processos de dados.
- Criar e manter documentação técnica de arquitetura, lineage e processos de dados.
View Full Description & ApplyYou'll be redirected to the employer's site
