Project Lion - Senior Prompt Engineer - Portugal (Remote, Part-Time)
Onde
Localização provável: a empresa tem presença em Porto.
Em resumo IA
Função remota, a tempo parcial, de engenheiro de prompts para migração de templates para autoraters LLM, com uso de ferramentas internas do cliente (APG, APO) e medição de qualidade contra gold data. Requer residência em Portugal.
Descrição
- Função
- Responsável pelo fluxo técnico de migração de templates para autoraters LLM: criar prompts base com ferramentas APG, supervisionar otimização automática (APO) sinalizando estagnações, redigir e testar prompts manualmente para casos limite, monitorizar execuções do shadowbot e medir accuracy, F1, precision e recall contra gold data. Redige também a documentação de certificação de lançamento.
- Requisitos
- Português nativo e inglês fluente
- Residência em Portugal
- Licenciatura, mestrado ou doutoramento em Ciência da Computação, Data Science, Linguística Computacional, HCI, Ciências Cognitivas ou área analítica afim
- Mínimo de 4 anos como prompt engineer
- Experiência em ajustar LLMs para saídas estruturadas e classificação complexa, com chain-of-thought e few-shot
- Forte análise de padrões de erro e desempenho de modelos, com SQL ou outras ferramentas de dados
- Capacidade de dominar rapidamente ferramentas proprietárias com pouca supervisão
- Excelente comunicação verbal e escrita
- Valorizado
- interface LLM empresarial (Goose API), avaliação de modelos de IA, experiência com sistemas APO, linguística e semântica
- Condições
- Contrato: não indicado
- Salário: não indicado
- Horário: tempo parcial; turnos, fins de semana e número de horas não indicados
- Local: remoto (em Portugal)
- Benefícios
- não indicados
We are seeking a Prompt Engineer to be responsible for the end-to-end technical migration workflow for transitioning templates to LLM autoraters. The role is required to use client’s internal tools to leverage prompt engineering techniques to maximize model performance.
Responsibilities:
Utilize Automatic Prompt Generation (APG) tools to create baseline prompts for complex parent-child template clusters.
Run and supervise Automated Prompt Optimization (APO) tool, review the outputs, and flag when the APO reaches deadlocks or plateaus.
Manually draft, test, and refine prompts to navigate complex template architectures, overcome anti-patterns, and handle edge cases where tooling is lacking or broken. Solve edge-case scenarios by designing and refining manual prompts.
Monitor shadowbot runs to ensure sufficient disagreements (between human and LLM ratings) are registered, generated, and tracked.
Run prompt versions against established gold data to continuously measure autorater quality against the human crowd baseline, calculating accuracy metrics such as F1 scores, precision, and recall.
Draft technical launch readiness justifications (Launch Certification Documentation) for final.
Requirement:
Language Skills: Native fluency in Portuguese and fluent in English.
Location:Must be based in Portugal.
Education: Bachelor’s, Master’s, or Doctorate degree in Computer Science, Data Science, Computational Linguistics, Human-Computer Interaction (HCI), Cognitive Science, or a related analytical field.
Prompt Engineering & AI Expertise: At least 4 years' experience as Prompt Engineer. Proven experience tuning Large Language Models (LLMs) for strict, structured outputs, complex classification tasks, and familiarity with chain-of-thought and few-shot learning.
Data Analysis: Strong proficiency in identifying error patterns, analyzing model performance, and using SQL or other data analytics tools.
Technical Agility: Ability to quickly learn and master proprietary tools with minimal supervision.
Communication: Excellent verbal and written communication skills.
Optional / Preferred Skills:
Familiarity with enterprise-grade LLM interfaces like the Goose API.
Experience in AI model evaluation, data science, computational linguistics, or software engineering.
Hands-on experience with Automated Prompt Optimization (APO) systems or tuning workflows.
Linguistic expertise, including an understanding of semantics and logic.
Originally posted on Himalayas
Como me candidatar
Candidatar no anúncio original ↗
Preparar candidatura
Uma carta de apresentação e uma apresentação curta para esta oferta, escritas a partir do teu perfil, e o que aprender a seguir.
Entra e cria o teu perfil a partir do CV. É privado: não o partilhamos com ninguém.
Algo errado ou ilegal neste anúncio? Reportar
Ofertas semelhantes
- Prompt EngineerCross Border Talents · Lisboa
- Machine Learning Engineer - Model Development & MlopsiTRTech Group · Porto
- Senior Automation Engineer - OeirasTriangle Solutions RH · Oeiras
- AI Engineer (Python/LLM Agents) - Hybrid Porto (2 days/week office)HumanIT Digital Consulting · Porto
- AI Native Software Engineer - Senior LevelAccenture Portugal · Braga
- Application Support Engineer / Application Manageract digital · Lisboa
Formação para esta vaga
- AI-3019: Build AI Apps with Azure Database for PostgreSQLRumosmisto · 7 h · 560 €Pedido neste anúncio: Inteligência artificial e machine learning
- SC-500: Implement end‑to‑end security controls for cloud and AI workloadsGalileuonline · horário laboral · 28 h · 1670 € + IVA · início 08/03/2027Pedido neste anúncio: Inteligência artificial e machine learning
- Inteligência Artificial & Data ScienceCESAE Digitalonline · pós-laboral · 75 h · gratuitoPedido neste anúncio: Inteligência artificial e machine learning
Requisitos IA
- licenciatura ou superior em área analítica afim
- mínimo 4 anos como prompt engineer
- experiência com LLM para saídas estruturadas
Idiomas IA
Publicado em (2)
- Himalayas visto 17 nov
- Welo Global visto 17 nov – 20 nov
Onde a empresa está ver no mapa →
- Porto (Porto) 1 oferta(s)
segundo outras ofertas da empresa; não é necessariamente o local desta oferta.
Vista pela primeira vez a 17 nov, 00:15 · última vez a 17 nov, 01:09