Pessoa Engenheira de Dados - Pleno/Sênior
- Brasil
- Permanente
- Período integral
- Projetar, desenvolver e manter APIs utilizando AWS API Gateway;
- Implementar integrações com Lambda ou Fargate para ingestão de dados;
- Desenvolver pipelines de processamento em PySpark (AWS Glue ou EMR);
- Gerenciar dados em S3 e Glue Data Catalog;
- Garantir a qualidade e integridade dos dados (Data Quality Check);
- Otimizar custos e performance dos pipelines;
- Criar e manter documentação técnica e padrões de desenvolvimento;
- Demais rotinas da área.
- Experiência comprovada com AWS (API Gateway, Lambda/Fargate, S3, Glue, CloudWatch);
- Sólidos conhecimentos em PySpark (particionamento, joins, otimização);
- Experiência com Glue Data Catalog e consultas via Athena;
- Vivência com integração e manipulação de dados em APIs REST;
- Conhecimento de infraestrutura como código (Terraform ou CloudFormation);
- Boas práticas de versionamento (Git) e CI/CD;
- Obrigatório: Graduação completa.
- Experiência com formatos colunares e table formats (Parquet, Delta, Hudi, Iceberg);
- Uso de ferramentas de Data Quality (Great Expectations, Soda);
- Conhecimentos em Step Functions, EventBridge ou Kinesis;
- Boas práticas de segurança em APIs (Cognito, WAF, IAM Policies);
- Boa comunicação e trabalho em equipe;
- Proatividade na resolução de problemas;
- Capacidade de lidar com ambientes ágeis e mudanças rápidas.
- Inglês Avançado para conversação (Haverá etapa de entrevista nesse idioma);