cores
radaremprego

Project Lion - Senior Prompt Engineer - Portugal (Remote, Part-Time)

Welo Global · anuncia como Welo Data, Welo Data (Welocalize), Welo Life Sciences
Regimeremoto
Horáriopart-timeconfirmado no texto
não indicado no anúnciocontrato · salário
publicado 2026-10-01 · anunciado há 51 dias

Onde

não indicado no anúncio

Localização provável: a empresa tem presença em Porto.

Entra para ver o tempo de viagem

Em resumo IA

Função remota, a tempo parcial, de engenheiro de prompts para migração de templates para autoraters LLM, com uso de ferramentas internas do cliente (APG, APO) e medição de qualidade contra gold data. Requer residência em Portugal.

Descrição

Função
Responsável pelo fluxo técnico de migração de templates para autoraters LLM: criar prompts base com ferramentas APG, supervisionar otimização automática (APO) sinalizando estagnações, redigir e testar prompts manualmente para casos limite, monitorizar execuções do shadowbot e medir accuracy, F1, precision e recall contra gold data. Redige também a documentação de certificação de lançamento.
Requisitos
  • Português nativo e inglês fluente
  • Residência em Portugal
  • Licenciatura, mestrado ou doutoramento em Ciência da Computação, Data Science, Linguística Computacional, HCI, Ciências Cognitivas ou área analítica afim
  • Mínimo de 4 anos como prompt engineer
  • Experiência em ajustar LLMs para saídas estruturadas e classificação complexa, com chain-of-thought e few-shot
  • Forte análise de padrões de erro e desempenho de modelos, com SQL ou outras ferramentas de dados
  • Capacidade de dominar rapidamente ferramentas proprietárias com pouca supervisão
  • Excelente comunicação verbal e escrita
Valorizado
  • interface LLM empresarial (Goose API), avaliação de modelos de IA, experiência com sistemas APO, linguística e semântica
Condições
Contrato: não indicado
Salário: não indicado
Horário: tempo parcial; turnos, fins de semana e número de horas não indicados
Local: remoto (em Portugal)
Benefícios
não indicados

 We are seeking a Prompt Engineer to be responsible for the end-to-end technical migration workflow for transitioning templates to LLM autoraters. The role is required to use client’s internal tools to leverage prompt engineering techniques to maximize model performance.

Responsibilities:

    • Utilize Automatic Prompt Generation (APG) tools to create baseline prompts for complex parent-child template clusters.

    • Run and supervise Automated Prompt Optimization (APO) tool, review the outputs, and flag when the APO reaches deadlocks or plateaus.  

    • Manually draft, test, and refine prompts to navigate complex template architectures, overcome anti-patterns, and handle edge cases where tooling is lacking or broken. Solve edge-case scenarios by designing and refining manual prompts.

    • Monitor shadowbot runs to ensure sufficient disagreements (between human and LLM ratings) are registered, generated, and tracked.  

    • Run prompt versions against established gold data to continuously measure autorater quality against the human crowd baseline, calculating accuracy metrics such as F1 scores, precision, and recall.  

    • Draft technical launch readiness justifications (Launch Certification Documentation) for final.

Requirement:

    • Language Skills: Native fluency in Portuguese and fluent in English.

    • Location:Must be based in Portugal.

    • Education: Bachelor’s, Master’s, or Doctorate degree in Computer Science, Data Science, Computational Linguistics, Human-Computer Interaction (HCI), Cognitive Science, or a related analytical field. 

    • Prompt Engineering & AI Expertise: At least 4 years' experience as Prompt Engineer. Proven experience tuning Large Language Models (LLMs) for strict, structured outputs, complex classification tasks, and familiarity with chain-of-thought and few-shot learning. 

    • Data Analysis: Strong proficiency in identifying error patterns, analyzing model performance, and using SQL or other data analytics tools. 

    • Technical Agility: Ability to quickly learn and master proprietary tools with minimal supervision. 

    • Communication: Excellent verbal and written communication skills. 

Optional / Preferred Skills: 

    • Familiarity with enterprise-grade LLM interfaces like the Goose API. 

    • Experience in AI model evaluation, data science, computational linguistics, or software engineering. 

    • Hands-on experience with Automated Prompt Optimization (APO) systems or tuning workflows. 

    • Linguistic expertise, including an understanding of semantics and logic. 

Originally posted on Himalayas

Como me candidatar

Candidatar no anúncio original ↗

Preparar candidatura

Uma carta de apresentação e uma apresentação curta para esta oferta, escritas a partir do teu perfil, e o que aprender a seguir.

Entra e cria o teu perfil a partir do CV. É privado: não o partilhamos com ninguém.

Algo errado ou ilegal neste anúncio? Reportar

Fica visível enquanto analisamos. Decidimos em até 7 dias (o que é claramente ilegal, como uma burla, mais depressa) e dizemos-te o resultado e porquê.

Ofertas semelhantes

Formação para esta vaga

Requisitos IA

  • licenciatura ou superior em área analítica afim
  • mínimo 4 anos como prompt engineer
  • experiência com LLM para saídas estruturadas

Publicado em (2)

Onde a empresa está ver no mapa →

  • Porto (Porto) 1 oferta(s)

segundo outras ofertas da empresa; não é necessariamente o local desta oferta.

Vista pela primeira vez a 17 nov, 00:15 · última vez a 17 nov, 01:09