Data Engineer (Brussels)
Onde
Em resumo IA
Engenheiro de dados para trabalhar com Microsoft Fabric, Spark, SQL e Python, com opção de trabalho 100% remoto e ambiente de equipa colaborativa. Empresa presente em Portugal, Bélgica, Luxemburgo e Dinamarca.
Descrição
- Função
- Conceção e manutenção de fluxos de dados com Spark, PySpark, SQL e Python, incluindo gestão de transaction logs no Fabric Lakehouse, integração com ferramentas não Microsoft via JDBC/ODBC ou REST APIs, otimização de desempenho e implementação de padrões como SCD, Change Data Capture e idempotência em Delta Lake.
- Requisitos
- Experiência avançada em SQL e Python (PySpark)
- Conhecimentos sólidos de Java para processamento backend ou integrações SDK
- Princípios de engenharia de software aplicados a dados (DRY, modularidade, tratamento de erros, logging)
- Experiência com dados estruturados, semiestruturados (JSON/XML) e não estruturados
- Experiência prática com Git, estratégias de branching e CI/CD em Azure DevOps ou GitHub Actions
- Boa compreensão de internals do Apache Spark, gestão de memória e planos de execução
- Certificação DP-700 (Microsoft Certified: Fabric Data Engineer Associate) obrigatória
- Inglês bom (idioma de trabalho)
- Valorizado
- francês, DP-203, certificação Databricks Data Engineer Associate ou AWS
- Condições
- Contrato: não indicado
- Salário: não indicado
- Horário: não indicado
- Local: remoto
- Benefícios
- Seguro de saúde
- Seguro de vida
- Apoio ao visto tecnológico para candidatos fora da União Europeia
KNOWLEDGE AND SKILLS
Following skills and knowledge are required for the performance of the above listed tasks:
• Core Engineering Languages: Expert proficiency in SQL and Python (PySpark); strong working knowledge of Java for backend data processing or SDK integrations.
• Generic Data Engineering: Solid understanding of Software Engineering principles applied to data (DRY code, modularity, error handling, and logging).
• Data Structures: Proficiency in working with structured, semi-structured (JSON/XML), and unstructured data formats.
• DevOps & CI/CD: Practical experience with Git, branching strategies, and automating deployments through Azure DevOps or GitHub Actions.
• Distributed Computing: Strong grasp of Apache Spark internals, memory management, and execution plans.
• Languages: Good knowledge of written/spoken English (working language). Knowledge of French is an asset
SPECIFIC EXPERTISE
• Fabric Delta Lake Management: Expertise in optimizing and managing transaction logs within the Fabric Lakehouse.
• Multi-stack Integration: Proven ability to connect Fabric with non-Microsoft tools, utilizing generic JDBC/ODBC drivers or REST APIs.
• Performance Tuning: Deep experience in identifying bottlenecks in data flows and optimizing code for low-latency processing.
• Data Design Patterns: Practical experience implementing standard patterns like SCD (Slowly Changing Dimensions), Change Data Capture ingestion and idempotency in a Delta Lake environment.
CERTIFICATIONS & STANDARDS:
• Microsoft Focus: DP-700 (Microsoft Certified: Fabric Data Engineer Associate) – required.
• Generic/Cloud Focus: DP-203 (Azure Data Engineer) or equivalent certifications from Databricks (Data Engineer Associate) or AWS – a plus.
What can you expect from us?
Mind-blowing workplace culture. You will be integrated in a professional, dynamic and collaborative team.
100% Remote opportunities
We want you to have the flexibility to work where you feel most comfortable and productive.
International Career
You can expect professional growth and to be connect with the world.
We are represented in Portugal, Belgium, Luxembourg, and Denmark.
And with projects in many other countries: Netherlands, Luxembourg, Singapore and in the United States of America (and a lot more is coming…)
Extra Benefits & Perks
If you wish to work with us and you are outside European Union (good news…) we are a Tech Visa Company, We will help!
As a plus, we provide Health and Life Insurance.
Como me candidatar
Candidatar no anúncio original ↗
Preparar candidatura
Uma carta de apresentação e uma apresentação curta para esta oferta, escritas a partir do teu perfil, e o que aprender a seguir.
Entra e cria o teu perfil a partir do CV. É privado: não o partilhamos com ninguém.
Algo errado ou ilegal neste anúncio? Reportar
Ofertas semelhantes
- Data Engineer (AWS)Bridge 351 · Lisboa,Porto
- Data EngineerDellent Consulting · Porto
- Analytics Engineers| Data Modeling and ArchitectureBridge 351 · Lisboa
- Data Engineer| BI DeveloperBridge 351 · Lisboa
- Databricks EngineerIG&H · Lisboa
- Data Engineer - Group Finance | InternationalMichael Page Portugal
Formação para esta vaga
- DP-750: Implement data engineering solutions using Azure DatabricksGalileuonline · horário laboral · 28 h · 1670 € + IVA · início 14/12/2026Pedido neste anúncio: Engenharia de dados (Spark, Databricks)
- AZ-2006: Automate Azure Load Testing by using GitHub ActionsRumosonline · horário laboral · 7 h · 590 € · início 12/02/2027Pedido neste anúncio: DevOps e CI/CD
- Linguagens de Programação - Programação em JavaServiço de Formação Profissional de Faroonline · horário laboral · 350 h · gratuito · início 07/12/2026Pedido neste anúncio: Java
Idiomas IA
Publicado em (1)
- Bridge351 visto 1 nov – 20 nov
Onde a empresa está ver no mapa →
- Lisboa (Lisboa) 36 oferta(s)
- Loures (Lisboa) 3 oferta(s)
- Porto (Porto) 3 oferta(s)
- Braga (Braga) 2 oferta(s)
- Oeiras (Lisboa) 2 oferta(s)
- Coimbra (Coimbra) 1 oferta(s)
segundo outras ofertas da empresa; consultora: o trabalho é muitas vezes nas instalações de um cliente; estas são as moradas dos escritórios da consultora.
Vista pela primeira vez a 1 nov, 17:53 · última vez a 20 nov, 21:19