Engenheiro de Dados Pleno - Projeto 22 - São Paulo

Responsável pela vaga:

#

Projeto 22

  • Atualização: 28/11/2024 09:29
  • Data limite para inscrição: Não especificada

Informações

Responsabilidades e atribuições:

Responsabilidades e atribuições: • Desenvolver e manter pipelines de dados escaláveis e confiáveis para integrar, transformar e armazenar dados de múltiplas fontes em ambientes on-premises e na nuvem. • Projetar, implementar e monitorar soluções de ingestão de dados em tempo real e batch, garantindo a integridade e qualidade dos dados. • Colaborar com analistas de dados, cientistas de dados e outros stakeholders para entender os requisitos de dados e criar soluções que suportem análises e relatórios. • Otimizar consultas SQL e pipelines de ETL para melhorar a performance e reduzir o tempo de processamento de dados. • Garantir a segurança e conformidade dos dados seguindo as melhores práticas e padrões de governança. • Documentar processos, fluxos de trabalho e melhores práticas de engenharia de dados. Habilidades interpessoais para trabalhar em equipe e comunicar-se com clareza com stakeholders técnicos e não técnicos.

Continua apos o anúncio

Requisitos e qualificações:

Experiências e qualificações: Requisitos e Qualificações: • Experiência prática com linguagens de programação orientadas a dados, como Python, SQL ou outra linguagem • Conhecimento em sistemas de banco de dados relacionais e não relacionais, PostgreSQL, MySQL, Redshift • Experiência com ferramentas de ETL/ELT, como Apache Spark, Apache Airflow, AWS Glue, ou semelhantes. • Familiaridade com arquiteturas de dados em nuvem especialmente com serviços voltados para dados, como S3, Redshift ou Data Lake • Experiência com sistemas de mensageria, como Apache Kafka, Kafka connect ou AWS Kinesis (diferencial). • Conhecimento básico de controle de versionamento de código, como Git. • Compreensão de boas práticas de engenharia de dados, incluindo qualidade, segurança e governança de dados.

Continua apos o anúncio

Benefícios:

Trabalho 100% remoto para profissionais de fora de SP e 1 dia presencial por semana para quem estiver na região, a até 90 km de distância. Além disso, oferecemos 1 semana de descanso remunerado após 12 meses de contrato.

O que você deseja?

Veja também:

#

Gerente Governança de TI - Porto - São Paulo

33 minutos atrás

  • 28/11/2024
#

Recruitment Assistant - Bluedot BPO Solutions

45 minutos atrás

  • 28/11/2024