Expert Talent Pool, Feedback and Alignment (Associate, 0-5 Years)
Em resumo IA
Trabalho remoto e flexível, por projeto, de avaliação de respostas de modelos de IA com rubricas (precisão, utilidade, tom, segurança). Pagamento de 20 a 45 USD à hora, consoante projeto, área e experiência. Projetos de uma semana a vários meses.
Descrição
- Função
- Comparar e ordenar respostas de modelos, avaliar precisão, utilidade, tom e segurança com rubricas detalhadas, rotular passos de raciocínio como corretos ou incorretos com justificações curtas, verificar factos em fontes fiáveis, avaliar conformidade com políticas de conteúdo e guias de estilo, avaliar relevância de resultados de pesquisa e dar feedback em sessões.
- Requisitos
- Zero a cinco anos de experiência profissional relevante
- Inglês escrito nativo ou quase nativo e grande atenção ao detalhe
- Experiência em avaliar, rever, verificar factos, editar, moderar ou classificar trabalho segundo guias escritos
- Formação ou experiência numa área avaliável (escrita, jornalismo, investigação, ensino, confiança e segurança, matemática, ciências, direito, medicina ou finanças)
- Capacidade de aplicar rubricas ou guias de estilo de forma consistente
- Valorizado
- experiência com plataformas de avaliação de dados de IA, avaliação da qualidade de pesquisa ou avaliação de anúncios
- Condições
- Contrato: não indicado
- Salário: 20 a 45 USD à hora, consoante projeto, área e experiência; pago por horas trabalhadas
- Horário: não indicado
- Local: remoto
- Benefícios
- não indicados
About the Role
Join a talent pool supporting AI model evaluation and improvement through careful, structured feedback. This flexible, project-based work helps improve the quality, accuracy, and safety of AI systems.
What You'll Do
Compare and rank model responses to identify which performs better.
Rate answers for accuracy, helpfulness, tone, and safety using detailed rubrics.
Label reasoning steps as correct or incorrect and write concise rationales for your ratings.
Fact-check claims against reliable sources and assess compliance with content policies and style guides.
Evaluate search result relevance and provide live feedback on model outputs during sessions.
What We're Looking For
Zero to five years of relevant professional experience.
Native or near-native written English and meticulous attention to detail.
Experience rating, reviewing, fact-checking, editing, moderating, or grading work against written guidelines.
A degree or work background in a field you can evaluate, such as writing, journalism, research, teaching, trust and safety, mathematics, science, law, medicine, or finance.
Ability to apply rubrics or style guides consistently across many items.
Experience with AI data evaluation platforms, search quality rating, or ads rating is useful but not required.
Compensation & Benefits
Compensation is $20 to $45 per hour, depending on the project, field, and experience. Pay is based on hours worked.
Location
Fully remote. Projects typically run from one week to several months.
Originally posted on Himalayas
Como me candidatar
Candidatar no anúncio original ↗
Preparar candidatura
Uma carta de apresentação e uma apresentação curta para esta oferta, escritas a partir do teu perfil, e o que aprender a seguir.
Entra e cria o teu perfil a partir do CV. É privado: não o partilhamos com ninguém.
Algo errado ou ilegal neste anúncio? Reportar
Ofertas semelhantes
- Expert Talent Pool, Feedback and Alignment AssociateClera
- Expert Talent Pool, Evals and Benchmarks (Associate)Clera
- Expert Talent Pool, Generation and Writing AssociateClera
- Expert Talent Pool, Feedback and Alignment (Senior, 5+ Years)Clera
- Expert Talent Pool, Generation and WritingClera
- Expert Talent Pool, Generation and Writing (Senior)Clera
Salário comparado ⓘ
18 ofertas · Explicadores, formadores e orientadores educativos · Portugal
ver as que pagam mais →Formação para esta vaga
- Comunicar em Inglês e Interagir no Contexto ProfissionalServiço de Formação Profissional de Viana do Casteloonline · horário laboral · 200 h · gratuito · início 04/12/2026Pedido neste anúncio: Inglês
Idiomas IA
Publicado em (1)
- Himalayas visto 18 nov
Vista pela primeira vez a 18 nov, 21:40