Engenheiro(a) de Dados Streaming Tempo Integral
Vaga de Engenheiro(a) de Dados Streaming em Ananindeua, PA, para atuar no ecossistema de varejo alimentar, sustentando plataformas de dados em tempo real que suportam operações de loja, e-commerce e supply chain.
Responsabilidades:
- Desenhar, implementar e manter pipelines de dados em tempo real com Apache Kafka, Kafka Streams/Flink ou Spark Structured Streaming, garantindo baixa latência e alta disponibilidade.
- Modelar e orquestrar fluxos de ingestão de dados de PDV, e-commerce, ERP e sensores de logística, aplicando padrões de CDC e event sourcing.
- Construir camadas de serving (lakehouse/feature store) para consumo analítico e aplicações de recomendação, previsão de demanda e detecção de fraudes.
- Implementar observabilidade de dados (data quality, lineage, SLAs) com métricas, alertas e testes automatizados em pipelines de streaming.
- Colaborar com times de Engenharia, Analytics e Produto para definir contratos de dados, esquemas versionados (Schema Registry) e boas práticas de governança.
- Otimizar custos e performance em ambientes cloud, automatizando deploys via CI/CD e infraestrutura como código.
Requisitos:
- Experiência sólida com processamento de dados em streaming (Kafka/Flink/Spark), incluindo particionamento, exactly-once semantics e tratamento de desordenação/atrasos (watermarks, windows).
- Domínio de linguagens como Python e/ou Scala, e SQL avançado para transformação e validação de dados.
- Vivência com arquiteturas de dados modernas (data lake/lakehouse) usando ferramentas como Delta Lake, Iceberg ou Hudi.
- Conhecimento de cloud (AWS, GCP ou Azure) e serviços gerenciados de streaming, armazenamento e orquestração.
- Prática com CI/CD (Git, pipelines), IaC (Terraform/CloudFormation) e conteinerização (Docker/Kubernetes).
- Noções de segurança e compliance de dados (gereciamento de segredos, criptografia, controle de acesso, LGPD).
- Capacidade de resolver problemas complexos, comunicação clara e trabalho colaborativo em ambiente ágil.
Diferenciais:
- Experiência no varejo alimentar ou em operações omnichannel de alta volumetria.
- Implementação de feature stores e MLOps para modelos online em produção.
- Conhecimento de ferramentas de data observability (Great Expectations, OpenLineage, Monte Carlo, Datadog).
Sobre a Empresa:
A ‘Líder Supermercados’ é uma rede de varejo alimentar com forte presença no Norte do Brasil, reconhecida pela escala operacional e foco em experiência do cliente. De porte grande e em expansão digital, investe em tecnologia e dados para eficiência logística, precificação e personalização. A cultura valoriza colaboração, autonomia e melhoria contínua em um ambiente dinâmico e de alto impacto.
* O VagasFlix é um agregador de vagas e não possui vínculo direto com as empresas mencionadas.
Compartilhe!
Outras Vagas Recentes
-
Controlador de Estoque
Magazine Luiza Contagem, Minas GeraisEstágio -
Estágio em Tecnologia em Gestão de Recursos Humanos
Totvs São José dos Campos, São PauloTempo Integral -
Desenvolvedor(a) Back-end Sênior
Kroton Mogi das Cruzes, São PauloTempo Integral -
-
Estágio em Oceanografia
Petrobras Bahia, SalvadorTempo Integral -
Estágio em Biblioteconomia
Livrarias Leitura Piauí, TeresinaTempo Integral -
Especialista em User Research
Conta Azul Ribeirão Preto, São PauloTrabalho Remoto -
Resumo da Vaga
-
Data da Vaga:
-
Local: Ananindeua, Pará
-
Cargo: Engenheiro(a) de Dados Streaming
- 66049 Vagas Anunciadas
- 1747352 Currículos Recebidos