Engenheiro de Dados Pleno
market4u
- Curitiba - PR
- Permanente
- Período integral
- Projetar, implementar e operacionalizar fluxos de ingestão e transformação automatizados (Dataflow, Airflow/Composer, dbt);
- Integrar diferentes fontes de dados como bancos operacionais (Aurora, RDS), APIs (Google Analytics, Meta) e sistemas legados (SAP, Pipefy, aplicação própria).
- Definir e manter modelos lógicos e físicos em Data Warehouse / Lakehouse (BigQuery Bronze/Silver/Gold);
- Otimizar particionamento, clustering e schema para performance de consultas.
- Implementar testes de consistência, alertas e rotinas de reconciliação de dados;
- Colaborar com o time de Governança para catalogação (Data Catalog/DataPlex) e definição de políticas de acesso (IAM, VPC/VPN).
- Criar dashboards para acompanhar SLAs, latência e custos de processamento;
- Propor melhorias em queries BigQuery e otimização de custos de Storage.
- Trabalhar junto a analistas de BI e cientistas de dados para definição de requisitos e validação de entregáveis;
- Revisar código e compartilhar boas práticas com o time.
- Formação: Graduação em Ciência da Computação, Engenharia de Dados, Sistemas de Informação ou áreas correlatas;
- Experiência: 3-5 anos em engenharia de dados, preferencialmente em ambientes GCP;
- Linguagens e Ferramentas:
- SQL avançado e modelagem dimensional;
- Python (Pandas, Apache Beam, dbt);
- GCP (BigQuery, Cloud Storage, Datastream/Dataflow, Composer/Airflow);
- Git, Terraform, Deployment Manager;
- Conceitos: Lakehouse, Lambda/Kappa, microserviços de dados, contêineres (Docker, Kubernetes).
- Comunicação clara, traduzindo termos técnicos para linguagem de negócio;
- Autonomia e responsabilidade para entregas end-to-end;
- Colaboração e mentoria para o time;
- Proatividade para identificar e solucionar gargalos;
- Organização para gerenciar múltiplas demandas e prioridades.