Data Engineer | Lisboa
Onde
Entra para ver o tempo de viagem
Em resumo IA
Data Engineer em regime híbrido flexível em Lisboa, contrato a tempo inteiro com consultora tecnológica global, para projeto de modernização de dados em banca e serviços financeiros centrado em Databricks.
Descrição
- Função
- Construir, otimizar e manter pipelines end-to-end em Databricks, com foco em desempenho, fiabilidade e escalabilidade. Aplicar princípios de Medallion Architecture, desenvolver processamento distribuído em PySpark, orquestrar workflows com ADF e Airflow, integrar CI/CD com Azure DevOps e apoiar governança, segurança e documentação. Colaborar com cientistas de dados, arquitetos e stakeholders de negócio.
- Requisitos
- Experiência comprovada com Databricks como plataforma principal de engenharia
- Sólida compreensão de Medallion Architecture e princípios de lakehouse
- Proficiência em PySpark e frameworks de processamento distribuído
- Experiência com Azure Data Factory, Airflow e orquestração de workflows
- Familiaridade com CI/CD em Azure DevOps, workflows Git e deployments automatizados
- À-vontade em ambientes Agile, colaborativos e multiculturais
- Valorizado
- experiência avançada com Azure DevOps para automação de pipelines
- background em testes de dados ou desenvolvimento de frameworks de teste
- experiência em dados de investment banking ou serviços financeiros
- Condições
- Contrato: tempo inteiro, contrato direto com a consultora tecnológica global
- Salário: não indicado
- Horário: não indicado
- Local: Lisboa, regime híbrido flexível
- Benefícios
- não indicados
Join a team where Databricks is at the heart of the engineering strategy and where your work powers large‑scale financial platforms used across global markets
- Location: Flexible Hybrid in Lisbon
- Contract: Full‑time, direct contract with a global technology consulting leader
Our client is a world‑renowned technology consulting company partnering with a major multinational in banking and financial services. This long‑term program is part of a data and cloud modernization journey centred on Databricks, scalable architectures and high‑quality data products. You will join an international engineering environment dedicated to transforming complex data into reliable, governed and business‑critical assets.
Responsibilities
- Build, optimize and maintain end-to-end Databricks pipelines, ensuring performance, reliability and scalability.
- Apply Medallion Architecture principles to design structured, maintainable and production‑ready data layers.
- Develop distributed processing solutions with PySpark, aligned with best engineering practices.
- Design and orchestrate workflows using ADF and Airflow, improving automation and observability.
- Contribute to the evolution of Databricks Lakehouse standards, performance tuning and cluster optimization.
- Integrate CI/CD practices using Azure DevOps, with automated testing and version control.
- Collaborate closely with data scientists, architects and business stakeholders to operationalize data products and ensure alignment with financial‑sector requirements.
- Support governance, security and documentation across the Databricks ecosystem.
Required Skills
- Strong, demonstrable experience with Databricks as the primary engineering platform.
- Solid understanding of Medallion Architecture and modern lakehouse principles.
- Proficiency in PySpark and distributed processing frameworks.
- Experience with Azure Data Factory, Airflow and workflow orchestration.
- Familiarity with Azure DevOps CI/CD, Git workflows and automated deployments.
- Comfortable working in Agile, collaborative and multicultural environments.
Nice to Have
- Advanced experience with Azure DevOps for pipeline automation.
- Background in data testing or test framework development.
- Exposure to investment banking or financial services data landscapes.
Ready to take the next step?
Apply now and join an international Databricks‑driven project shaping the future of digital innovation in financial services.
Algo errado ou ilegal neste anúncio? Reportar
Ofertas semelhantes
- Databricks Data EngineerOlisipo · Lisboa
- Senior Databricks Engineer - AI & Data Platform | LisbonMichael Page Portugal · Lisboa
- Senior Databricks EngineerBridge 351 · Lisboa
- Databricks EngineerIG&H · Lisboa
- Data Engineer – Porto | PortugalKWAN · Porto
- DATA ENGINEER – DATABRICKS (CONSULTANT / SENIOR) - Lisboa / Porto / BragaElevus · Braga,Lisboa,Porto
Espaço para cursos e formação em Analistas de sistemas. Entidades formadoras, universidades e formadores: [email protected]. Dás formação?
Requisitos IA
- Experiência sólida com Databricks
- Conhecimento de Medallion Architecture e Lakehouse
- Experiência com Azure Data Factory e Airflow
- Familiaridade com Azure DevOps CI/CD e Git
Publicado em (1)
- Adecco Portugal visto 30 out – 15 nov · removido
Vista pela primeira vez a 30 out, 04:31