Sobre a vaga
Buscamos profissional para atuar no desenvolvimento e manutenção de soluções de dados, apoiando a construção de pipelines, transformações e modelos de dados em ambientes de nuvem.
Responsabilidades
- Desenvolver e orquestrar pipelines de dados (ETL/ELT) utilizando ferramentas como Azure Data Factory, SSIS e Databricks;
- Desenvolver rotinas de processamento e transformação de dados utilizando PySpark, Python e SQL;
- Implementar e manter fluxos de dados seguindo conceitos de Arquitetura Medalhão, atuando nas camadas Bronze, Silver e Gold;
- Construir e popular modelos de Data Warehouse, trabalhando com tabelas Fato e Dimensão;
- Monitorar a execução de jobs e fluxos de dados em ambientes de nuvem Azure e/ou GCP;
- Identificar e corrigir falhas em rotinas e processos de dados;
- Aplicar regras de validação, contribuindo para a integridade, qualidade e consistência dos dados;
- Desenvolver código organizado, documentado e versionado, seguindo os padrões técnicos definidos pela equipe;
- Traduzir regras de negócio em transformações e rotinas de dados;
- Participar dos ritos e atividades do time dentro de metodologias Ágeis.
- Databricks;
- Apache Spark / PySpark;
- Python;
- SQL;
- Azure Data Factory (ADF);
- SSIS;
- Azure e/ou GCP;
- Processos de ETL/ELT;
- Arquitetura Medalhão;
- Data Warehouse;
- Modelagem dimensional – Fatos e Dimensões;
- Versionamento de código.
Profissional com boa capacidade analítica, organização e autonomia para desenvolver e acompanhar suas atividades, além de facilidade para investigar problemas, trabalhar em equipe e compreender regras de negócio.