Pleno Data Engineer - Expertise Databricks | Jupyter
- São Paulo - SP
- Permanente
- Período integral
- Implementar soluções adequadas em engenharia de dados conforme a necessidade do projeto.
- Utilizar programação e manutenção de códigos para preparar dados.
- Atuar de forma a definir e construir banco de dados relacionais com arquitetura distribuída para processamento de Big Data.
- Extrair, transformar e carregar (ETL) dados de um banco de dados para outro.
- Efetuar a análise de requerimentos dos usuários.
- Mapear pipeline de dados utilizando BPMN ou similar.
- Realizar pesquisa, desenho e desenvolvimento de novos programas de software.
- Prover dados que geram valor para as áreas de negócio.
- Identificar maneiras de melhorar a confiabilidade, a eficiência e a qualidade dos dados.
- Disseminar conhecimento analítico entre o time e para a organização.
- Fluxo ETL e modelagem de dados;
- Databricks;
- Cloud Azure;
- Implementação de soluções no ambiente Hadoop;
- Python/ PySpark e SQL;
- Contrução de pipelines utilizando chamadas de API
- Atuação com a área de negócio.
- Databricks / Jupyter;
- Pyspark;
- Azure.
- Google Analytics