Descrição da Vaga:O Engenheiro Sênior de Big Data será responsável por liderar e executar a criação, manutenção e otimização de integrações de dados, além de desenvolver pipelines de ingestão e processamento distribuído.
Atuará com tecnologias de ponta, como Kafka, Spark (Scala e Python), Apache Nifi, Hive, MongoDB e AWS, contribuindo para a eficiência e inovação dos processos de dados da empresa.
Responsabilidades:Liderar e garantir a continuidade das integrações de dados implantadas, otimizando processos e resolvendo incidentes.Apoiar a área de negócios na definição e implementação de soluções de dados que atendam às necessidades estratégicas.Desenvolver e manter pipelines de ingestão de dados utilizando Apache Nifi e Kafka.Implementar e otimizar o processamento distribuído de dados com Spark (Scala e Python).Realizar consultas e manipulações de dados em Athena, Hive e MongoDB.Utilizar serviços da AWS para armazenamento, processamento e análise de dados.Garantir a qualidade e a integridade dos dados, colaborando com equipes de desenvolvimento e analistas de dados.Participar ativamente de reuniões de planejamento e revisão de projetos, contribuindo com insights e soluções inovadoras.Manter-se atualizado com as melhores práticas e novas tecnologias em Big Data, aprimorando continuamente suas habilidades.
Obrigatórios:Experiência avançada com Kafka, Spark (Scala e Python), Apache Nifi, Hive, MongoDB e AWS.Capacidade de trabalhar em equipe e colaborar com diferentes áreas da empresa.Perfil analítico e desenvolvedor, com habilidade para resolver problemas complexos.Proatividade e interesse em aprender e evoluir continuamente no campo de Big Data.Boa comunicação e habilidades interpessoais.Experiência comprovada em projetos de Big Data e integração de dados.
Desejáveis:Experiência em grandes projetos de Big Data e integração de dados.Conhecimento em orquestração de dados (Airflow, Prefect) e otimização de pipelines de ETL.Experiência com infraestrutura como código (Terraform, CloudFormation).Familiaridade com arquiteturas distribuídas e escaláveis para processamento de dados.
Salário compatível com o mercado; Caju (cartão flexível) com a recarga de R$ 1.060/mês; Plano de Saúde Bradesco; Plano Odontológico Bradesco;? Medicina preventiva com Dr. Alper; Seguro de Vida;? Gympass; SESC; Auxílio Creche para mamães e papais; PLR; Learning – área focada no desenvolvimento de hard e soft skills; Parceria com instituições de ensino para formação técnica, MBA, pós-graduação, certificações, inglês e espanhol; Plano de Carreira; Desconto em produtos de um portal parceiro.
Ressaltamos que todas as nossas vagas estão abertas a pessoas de todos os perfis e origens, valorizando a diversidade e promovendo um ambiente inclusivo e acolhedor para todos.