Engenheiro de Dados Pleno/Sr

Módulo EDW

1. Descrição da vaga:

• Planejar, arquitetar e desenvolver sistemas de processamento intensivos de dados.

Esse professional terá como responsabilidades:

- Criação de fluxos de ingestão de dados de diversas origem para o nosso data lake;

- Desenvolvimento de sistemas que auxiliem demais equipes da Pulse na obtenção de dados a partir do repositório central;

- Criação e implantação de infraestrutura na nuvem para apoiar os sistemas de processamento;

- Planejamento de evolução de processos referentes à arquitetura e uso de dados;

- Apoio aos demais Squad da Pulse quanto a implementação de soluções voltadas para processamento e tráfego massivo de dados.

1. Requisitos e qualificações:

• 04 anos ou mais como experiência atuando como desenvolvedor back-end ou engenharia de dados;
• Programação em Python Proficiente;
• Uso avançado de SQL e entendimento das engines de processamento de dados para otimização de consultas;
• Noções de engines de processamento de dados distribuidos como Spark/Flink;
• Noções de processamento de dados em stream;
• Ter a capacidade de propor novas ideias para melhoramento de arquitetura e governança de dados;
• Ter conhecimentos de ambientes em nuvem, de preferência Azure.

1. Desejável:

• Saber desenvolver pipelines de orquestração com Apache Airflow / Dagster / Prefect;
• Desenvolvimento de sistemas reativos;
• Desenvolver infraestrutura através de código, de preferência com utilização do Terraform;
• Ter conhecimentos em programação com Java/Scala;
• Ser comunicativo propondo workshops e seminários para disseminação de conhecimentos internamente e externamente.

Olá, somos a PULSE! 🖤

O setor de tecnologia e inovação do Grupo Mateus! Desenvolvemos soluções tecnológicas que atendem o mercado de varejo, atacado, eletro, indústria e e-commerce.

Somos feitos de pessoas para as pessoas! Buscamos entregar as melhores experiências todos os dias e trabalhamos para transformar o Grupo Mateus, o maior grupo alimentício do norte e nordeste, em uma empresa de referência que pulsa por inovação e tecnologia.

Quer criar tecnologia com a gente? Vem pra cá!

Nossas vagas 👇