Descrição da Posição
Estamos em busca de um Engenheiro de Dados para atuar na construção e integração de pipelines de dados no ambiente Azure, garantindo a ingestão, processamento e disponibilidade dos dados.
Principais Responsabilidades
* Projetar e desenvolver pipelines de ingestão de dados de fontes externas (APIs, bancos relacionais e não relacionais, arquivos, sensores de telemetria, etc.);
* Integrar e consolidar dados de diferentes fontes no ambiente Azure, garantindo qualidade e consistência;
* Implementar arquitetura de referência para processamento e armazenamento de dados;
* Criar e gerenciar data lakes, data warehouses e data marts dentro do ecossistema Azure;
* Desenvolver e otimizar processos de ETL/ELT utilizando ferramentas da Microsoft como Azure Data Factory, Databricks, Synapse Analytics e Azure Functions;
* Garantir a governança, segurança e escalabilidade dos pipelines de dados;
* Monitorar e otimizar a performance das cargas de dados, identificando gargalos e propondo melhorias;
* Trabalhar em estreita colaboração com cientistas de dados e analistas funcionais para atender às necessidades do negócio.