Engenheiro de Dados – Recrutamento é responsável por projetar, implementar e manter o data warehouse (DW) da empresa, contribuindo para a alavancagem e governança dos dados.
Descrição geral do cargo:
O Engenheiro de Dados – Recrutamento desempenha um papel crucial no desenho e manutenção do DW, garantindo a qualidade e eficiência dos dados.
Responsabilidades e deveres:
Identificar, mapear e criar processos de armazenamento de dados a partir de diversas fontes, estruturadas e não estruturadas.
Desenvolver e manter pipelines de dados para movimentação eficiente entre sistemas operacionais e o DW.
Garantir eficiência e escalabilidade nas soluções de armazenamento e processamento de dados.
Propor técnicas de otimização de desempenho para grandes volumes de dados e implementar processos de limpeza e validação.
Qualificações:
Educação: Licenciatura em Ciência da Computação, Engenharia Informática, Engenharia de Dados ou áreas relacionadas.
Experiência: Mínimo de dois anos em engenharia de dados ou funções similares.
Competências específicas: Proficiência em Python, Java e SQL; experiência com Hadoop, Spark, Kafka e Data Vault 2.0; conhecimento em sistemas de banco de dados (SQL, NoSQL).
Certificações: Desejável experiência em modelação de DW com Data Vault 2.0 e ferramentas de automação como Wherescape.