Engenheiro Sénior de Plataforma de Dados

Descrição do Papel

Sobre a empresa: Damia Group é uma agência internacional de recrutamento tecnológico com 3 décadas de experiência. A nossa chegada a Portugal, 7 anos depois, foi estabelecida com a missão de transformar as experiências de recrutamento de TI e, através delas, alcançar melhores resultados. Acreditamos em relações de longo prazo com uma mentalidade transparente e descontraída. Num curto espaço de tempo, chegámos aos corações tanto de scale-ups como de organizações maiores, ao fornecer listas de candidatos selecionados com precisão, aumentando as taxas de aceitação de ofertas de emprego e reduzindo o tempo de preenchimento.

Requisitos Principais

Sobre o papel: Estamos à procura de um talentoso Engenheiro Sénior de Plataforma de Dados, com uma paixão pela infraestrutura, que será responsável pelo desempenho, escala e estabilidade dos seus produtos principais da plataforma de dados. Eles são uma organização orientada por dados, ingerindo dados em altas taxas, com as exigências a aumentarem a cada dia.

Como Engenheiro Sénior de Plataforma de Dados, você fará parte do grupo de Plataforma de Dados e será responsável por uma plataforma de dados de produção em grande escala que serve como a infraestrutura central dos seus produtos. Você desenvolverá ferramentas de autoatendimento que suportam a acessibilidade da sua plataforma para o uso dos seus utilizadores dos departamentos de P&D e Análise. Eles contarão com você para ser um centro de conhecimento, consultar e partilhar a sua experiência com os outros.

O que você fará

- Liderar o desenvolvimento das fundações da plataforma de dados prontas para IA, incluindo qualidade de dados, contratos, observabilidade e ferramentas de autoatendimento que alimentam produtos de machine learning e IA.

- Administrar, provisionar e monitorar os seus diferentes produtos de plataforma.

- Desenvolver, manter e aprimorar a infraestrutura de aplicações que trabalha em estreita colaboração com as suas ferramentas de infraestrutura da Plataforma de Dados.

- Orientar equipas de desenvolvimento e mentorizar outros membros da equipa.

- Usar a sua criatividade para resolver problemas complexos e de grande escala relacionados com dados.

- Pesquisar novas tecnologias, desde o nível POC até sistemas de produção.

Requisitos

- Mais de 6 anos de experiência anterior como Engenheiro de Plataforma de Dados / Engenheiro de Infraestrutura de Big Data ou equivalente.

- Compreensão profunda de sistemas distribuídos, em termos de ingestão, armazenamento e acesso.

- Experiência prática com tecnologias de Data Streaming: Apache Kafka / Apache Pulsar / Spark Streaming / Kstream / Apache Flink.

- Licenciatura em Ciência da Computação (ou equivalente).

- Experiência em projetos de grande escala e grau de produção.

Bons Conhecimentos a Ter

- Experiência com ferramentas como Apache Spark e Databricks.

- Experiência com a pilha Cloud Native (Kubernetes / Prometheus / Istio, etc.).

- Experiência com um provedor de nuvem (AWS, Google, etc.).

- Experiência com ferramentas de infraestrutura (Helm, Ansible, Terraform, etc.).

- Experiência com Scala.

Benefícios