Engenheiro de dados sénior (híbrido - lisboa)

Sobre a vaga

Como Engenheiro de Dados Sénior na Iterable, vais construir pipelines de dados fiáveis e capacidades de plataforma que alimentam o movimento de dados orientados ao cliente, produtos de análise de dados e fundamentos de aprendizagem automática. Vais liderar projetos de grande alcance ou de alto impacto e tomar decisões técnicas através da ambiguidade para entregar sistemas escaláveis e observáveis.

O que vais fazer

• Ser responsável pela arquitetura e entrega de ponta a ponta de workflows críticos na nossa plataforma de ingestão e ativação de dados de próxima geração, incluindo conectores de origem, workflows de staging e transformação, lógica de diffs e sincronização incremental, e integrações com APIs em massa da Iterable
• Definir e aplicar padrões de alta disponibilidade, tolerância a falhas e recuperação para sistemas intensivos em dados, incluindo degradação graciosa, tentativas, replays, backfills, idempotência e execução de workflows duráveis
• Liderar o design de pipelines de dados baseados em Snowflake e workflows de partilha de dados que melhoram a frescura, correção, escalabilidade e operabilidade para produtos de análise e entrega de dados orientados ao cliente
• Estabelecer padrões técnicos para evolução de esquemas, qualidade de dados, observabilidade, testes e gestão do ciclo de vida para que os sistemas de dados sejam mais fáceis de expandir, depurar e suportar em escala
• Colaborar com engenheiros de ciência de dados e aprendizagem automática para arquitetar uma infraestrutura de dados robusta por trás da geração de características, serve de características, entradas de modelos e workflows de experimentação
• Conduzir decisões técnicas em padrões de batch e streaming, modelagem de dados brutos a curados, latência, desempenho, custo, disponibilidade e manutenção à medida que os sistemas escalam
• Colaborar com parceiros de diferentes áreas através de produto, frontend, plataforma, SRE e equipes orientadas ao cliente para definir interfaces, resolver problemas complexos de produção e alinhar soluções com a direção mais ampla da plataforma
• Identificar lacunas arquitetónicas e riscos operacionais cedo, e transformá-los em roadmaps concretos, propostas de design e planos de execução
• Criar abstrações reutilizáveis, capacidades de plataforma e padrões de engenharia que aumentem a alavancagem da equipe mais ampla além dos sistemas imediatamente próprios
• Fornecer liderança técnica através de revisões de design, orientação de implementação, revisões de incidentes e mentoria para engenheiros séniores e de nível intermédio
• Influenciar discussões de roadmap e priorização conectando investimentos em plataforma a fiabilidade, escalabilidade e eficiência de engenharia a longo prazo

O que é pedido

• Mais de 8 anos de experiência relevante em engenharia de dados, engenharia de software, ou funções adjacentes de plataforma e infraestrutura
• Experiência profunda em projetar e operar pipelines de dados de produção, sistemas ETL/ELT, ou plataformas de dados em grande escala
• Forte proficiência em Python e SQL, além de familiaridade com pelo menos uma linguagem de programação adicional como Scala ou Java
• Experiência com ferramentas de dados modernas e plataformas em nuvem como Snowflake, S3, Databricks, Postgres, Redis, ou sistemas semelhantes
• Forte experiência com conceitos de orquestração e workflows, e com o design de sistemas de dados em batch e/ou streaming
• Compreensão profunda de modelagem de dados, evolução de esquemas, processamento incremental, testes, observabilidade e excelência operacional para produtos de dados fiáveis
• Um histórico de possuir iniciativas técnicas ambíguas e de alto impacto desde a definição do problema até a adoção e maturidade operacional
• Experiência em projetar para alta disponibilidade, resiliência e recuperação em sistemas com expectativas estritas de fiabilidade ou entrega ao cliente
• Experiência em influenciar a direção técnica entre equipes e construir alinhamento sem autoridade direta
• Desejo de trabalhar em um ambiente altamente remoto/distribuído, mas colaborativo
• Disposição para participar no suporte operacional ou em chamada conforme necessário
• Fluência em inglês (verbal e escrita)
• Legitimamente autorizado a trabalhar na UE

Valorizado

• Projeto de plataformas de dados altamente disponíveis e tolerantes a falhas
• Recuperação de desastres, replay, idempotência e padrões de backfill
• Entrega de dados em múltiplos inquilinos ou em escala empresarial
• Padronização da plataforma e design de frameworks reutilizáveis
• Liderar a arquitetura entre várias equipes
• Excelência operacional para workflows críticos para os negócios

O que é oferecido

• Salários competitivos e equity significativa
• Seguro de Saúde Privado
• Seguro de Vida/Risco
• Subsidio de Refeição: 8,55€ por dia
• Dias da Comunidade (dias para retribuirmos à comunidade)
• Férias Anuais Pagas (22 dias)
• Conta de Reembolso de Estilo de Vida Global
• Sabbatical Pago
• Estação de trabalho completa em laptop
• A faixa salarial base para esta posição em Lisboa, Portugal, é de €82,500 – €108,000 por ano (bruto)