Data Engineer - Databricks
Descrição do trabalho
Sobre a função:
Estamos à procura de um(a) profissional para integrar a nossa equipa de dados, com foco no desenvolvimento e manutenção de processos de carregamento de dados que suportam modelos analíticos. Este papel é essencial para garantir a qualidade, fiabilidade e eficiência dos pipelines de dados que alimentam os nossos sistemas de análise e modelação.
- Principais responsabilidades:
- Desenvolver, otimizar e manter processos de carregamento de dados em ambiente Databricks.
- Assegurar a integração, transformação e preparação dos dados para utilização em modelos analíticos.
- Colaborar com equipas de Data Science e BI na implementação e atualização de modelos analíticos.
- Monitorizar e melhorar continuamente a performance dos pipelines de dados.
- Garantir boas práticas de versionamento, segurança e documentação dos processos.
- Competências e conhecimentos técnicos obrigatórios:
- Databricks – experiência comprovada no desenvolvimento de pipelines de dados.
- Python – domínio na manipulação e transformação de dados.
- SQL – forte capacidade de escrita e otimização de queries.
- Modelação de modelos analíticos – conhecimento de conceitos e práticas de modelação de dados.
- 3-5 anos de experiêcia com Databricks
- Competências e conhecimentos técnicos valorizados:
- Experiência adicional em Databricks, Python, SQL e modelação analítica (nível avançado).
- Familiaridade com estruturas de dados em nuvem (Azure, AWS ou GCP).
- Conhecimento de ferramentas CI/CD e gestão de dados em produção.
Regime Hibrido em Lisboa