Engenheiro de Plataforma de Dados Sénior – Cloud & Modelação de Dados

Libere soluções de dados transformadoras — molde o futuro da engenharia de dados e cloud! Oportunidade em Lisboa com modelo de trabalho híbrido (até 2 dias remotos por semana).

Como Engenheiro de Plataforma de Dados Sénior, trabalhará para o nosso cliente, um inovador líder em tomada de decisões baseadas em dados. Desempenhará um papel crucial na concepção, implementação e manutenção de soluções de dados escaláveis na Google Cloud Platform (GCP). A sua experiência apoiará insights estratégicos e capacitará as organizações através de modelos de dados robustos, pipelines e governança. Esta é a sua oportunidade para impulsionar a transformação digital e levar a sua carreira a novos patamares num ambiente dinâmico e inovador.

As suas principais responsabilidades:

• Desenvolver e manter modelos de dados usando dbt, focando na arquitetura medallion, incluindo modelos dimensionais.
• Projetar modelos de dados genéricos, extensíveis e prontos para integração, capazes de suportar várias fontes de dados heterogéneas.
• Implementar modelos incrementais e testes de dados automatizados (dbt tests) para garantir a fiabilidade dos dados.
• Fornecer documentação detalhada para modelos de dados, fluxos e processos de transformação.
• Gerir o processamento de dados em lote e em streaming usando Python, Apache Beam e Google Cloud Dataflow.
• Integrar dados de APIs externas e realizar manipulação de dados com pandas e pyarrow.
• Gerir e operar recursos do GCP como BigQuery, Cloud Run, Workflows, Cloud Scheduler, Pub/Sub e IAM.
• Implementar e manter soluções de governança, qualidade e linhagem de dados utilizando Dataplex, Data Catalog e melhores práticas do setor.
• Gerir infraestrutura como código com Terraform, garantindo ambientes organizados e escaláveis em desenvolvimento, teste e produção.
• Aplicar melhores práticas de engenharia de software, incluindo Git, CI/CD, estruturação de projetos e configuração baseada em YAML para pipelines e ambientes.
• Monitorizar, resolver problemas e otimizar pipelines, jobs e workflows, utilizando Cloud Logging e Cloud Monitoring.
• Servir dados a diversos consumidores, incluindo IA, ML, BI e aplicações de negócio, garantindo alta performance e fiabilidade.

É ideal para este cargo se tiver:

• Mais de 4 anos de experiência como Engenheiro de Dados ou em um cargo sénior semelhante.
• Proficiência avançada em SQL, especialmente BigQuery.
• Experiência comprovada com dbt e modelação de dados modernos (camadas Bronze/Silver/Gold).
• Conhecimento profundo de processamento de dados com Python, Apache Beam e Google Cloud Dataflow.
• Familiaridade com integração de APIs e manipulação de dados usando pandas, pyspark e pyarrow.
• Experiência prática com serviços do GCP: BigQuery, Cloud Run, Workflows, Cloud Scheduler, Pub/Sub, Cloud Storage, Dataplex, IAM.
• Forte compreensão de governança de dados, qualidade, catalogação e linhagem.
• Experiência com infraestrutura como código, particularmente Terraform, e gestão de ambientes.
• Domínio de práticas de engenharia de software incluindo Git, CI/CD e organização de projetos.
• Fluente em inglês, com excelentes habilidades de comunicação e documentação.

É uma grande mais-valia se tiver:

• Um diploma de Licenciatura em Engenharia Informática, Ciência de Dados, Sistemas de Informação ou áreas relacionadas.
• Capacidade de comunicar em francês (considerado um bom complemento).

Elegibilidade para o cargo:

Apenas candidatos com direito legal existente a trabalhar na União Europeia serão considerados para este cargo.

#FAÇASuaCarreiraMELHOR Está interessado? Candidate-se agora e inclua o seu CV (preferencialmente em inglês) juntamente com uma declaração confirmando o seu consentimento para o tratamento e armazenamento dos seus dados pessoais.

https://itdsportugal.com/en/it-jobs/8694/?utm_source=itjobs

Contactos e Endereço

Twitter Linkedin Facebook