Engenheiro de Dados

A SteelEye é uma start-up de RegTech (Tecnologia Regulatória) de rápido crescimento que ajuda empresas financeiras (por exemplo, bancos, empresas de investimento, corretores, fundos de hedge e gestores de ativos) a cumprir as suas obrigações ao abrigo de várias regulamentações financeiras globais.

O nosso trabalho melhora a conformidade financeira, previne abusos de mercado e promove a confiança nos mercados financeiros. As nossas pessoas são apaixonadas por utilizar dados e tecnologia para tornar isso possível.

Como Engenheiro de Integração de Dados, você irá construir e manter ETLs de dados de Comunicações e Transações - transformando dados brutos dos clientes em conjuntos de dados validados e pesquisáveis que alimentam a plataforma SteelEye. Você irá entregar trabalho de integração delimitado com orientação regular, colaborando de perto com as equipas de Engenharia, Produto e partes interessadas internas para garantir que os dados cheguem de forma fiável e cumpram os nossos esquemas e padrões de qualidade.

Principais responsabilidades:

- Construir e manter pipelines ETL/ET+L para conjuntos de dados de comunicações e transações, seguindo padrões e frameworks estabelecidos.

- Transformar e validar os dados recebidos para cumprir os requisitos do cliente e os modelos/esquemas de dados internos da SteelEye.

- Desenvolver em Python, utilizando bibliotecas de dados comuns (por exemplo, Pandas/Numpy) quando apropriado.

- Implementar e evoluir esquemas Pydantic e mapeamentos de dados, garantindo consistência e testabilidade.

- Orquestrar e agendar fluxos de trabalho usando Conductor e Kubernetes. A experiência com outros frameworks de orquestração, como Prefect, Temporal ou Airflow também é valorizada.

- Contribuir para revisões de código, melhorar a qualidade do código e escrever documentação técnica clara.

- Trabalhar de forma cruzada com Produto e outras equipas de engenharia para esclarecer requisitos e resolver problemas de dados.

- Resolver questões de ingestão e problemas de qualidade de dados; propor pequenas melhorias práticas.

- Utilizar Jira/Confluence para gerir o trabalho de forma transparente e comunicar progressos e obstáculos precocemente.

Requisitos

- 2–3+ anos de experiência relevante em um papel de engenharia de Python / engenharia de dados.

- Sólidos fundamentos em Python (código limpo e testável; depuração; trabalho com dados estruturados/não estruturados).

- Confortável a trabalhar com esquemas/validações (Pydantic é ideal).

- Familiaridade com ferramentas de nuvem e contenção (AWS, Docker, Kubernetes).

- Forte comunicação escrita e verbal; capaz de colaborar efetivamente entre equipas.

Processo de Entrevista: O processo de entrevista é estruturado para avaliar os candidatos de forma rigorosa em várias competências e habilidades relevantes para o cargo. Aqui está uma descrição de cada etapa:

- Revisão de CV

- Chamada introdutória com o parceiro de recursos humanos

- Entrevista de visão geral da primeira fase com os nossos Engenheiros de Dados

- Entrevista final com o nosso Chefe de Engenharia de Dados

Candidate-se diretamente via:

https://careers.steel-eye.com/jobs/7278917-data-engineer

Contactos e Endereço

Linkedin

Conformidade com confiança. A SteelEye é a primeira e única solução de vigilância de comunicações e transações verdadeiramente integrada. Nós capacitamos você com as ferramentas baseadas em dados e insights completos que você precisa para se concentrar no que realmente importa, tudo a partir de uma única plataforma.