Engenheiro de Dados Sênior
Extractta
- São Paulo - SP
- Permanente
- Período integral
- Projetar e manter pipelines de dados para a coleta, processamento e análise de grandes volumes de dados.
- Realizar a extração, transformação e carga de dados de diversas fontes para os ambientes de armazenamento.
- Colaborar com equipes multidisciplinares para identificar e solucionar problemas relacionados a dados.
- Criar e manter documentação técnica relacionada a arquitetura e processos de dados.
- Desenvolver e otimizar algoritmos e modelos de machine learning para análise de dados.
- Garantir a segurança, integridade e qualidade dos dados através de práticas e processos adequados.Requisitos e qualificações- Conhecimento avançado em Cloud Computing (AWS)
- Experiência com ferramentas de ETL/ELT (PowerCenter, Glue, DMS, etc)
- Experiência comprovada em projetos de Big Data
- Conhecimento avançado em Banco de Dados Relacional (Oracle)
- Conhecimento avançado em linguagens de programação como Python (script Pyspark) e SQL
- Conhecimento avançado em solução de workflow para ambientes em nuvem (Airflow e AWS Step Functions)
- Habilidade em modelagem de dados e arquitetura de sistemas
- Familiaridade com tecnologias de armazenamento e processamento de dados como Hadoop e Spark
- Capacidade de trabalhar em equipe e se comunicar de forma eficaz
- Conhecimento avançado em modelos ageis
- Formação acadêmica na área de Engenharia, Ciência da Computação ou áreas relacionadas.