Annotation
Anotação estruturada adicionada a um dado.
Exemplo: Marcar uma frase como cancelamento.Consulta rápida
Glossário do trabalho com IA
40 termos explicados em português simples, com exemplos fictícios. A definição da guideline oficial de cada projeto sempre prevalece.
Labeling
Aplicação de rótulos definidos pela tarefa.
Exemplo: Usar os labels positivo e negativo.Guideline
Documento com as regras oficiais da tarefa.
Exemplo: A decisão deve seguir a guideline, não gosto pessoal.Rubric
Conjunto de critérios usados para avaliar.
Exemplo: Correção, clareza e segurança podem formar uma rubrica.Locale
Combinação de idioma, país e contexto regional.
Exemplo: pt-BR e pt-PT são locales diferentes.Query
Texto ou comando enviado a uma busca.
Exemplo: “Farmácia 24 horas” é uma query.Relevance
Grau em que um resultado atende ao pedido.
Exemplo: Uma loja distante pode ser pouco relevante para perto de mim.Intent
Objetivo real por trás da consulta.
Exemplo: Quero cancelar indica intenção de cancelamento.Rater
Pessoa que atribui notas segundo critérios.
Exemplo: Um search rater avalia resultados de busca.Evaluator
Pessoa que julga qualidade ou adequação.
Exemplo: Comparar respostas de IA é avaliação.AI Trainer
Nome amplo para quem produz ou avalia dados de IA.
Exemplo: A função real pode ser anotação, avaliação ou criação.LLM
Modelo de linguagem capaz de gerar e analisar texto.
Exemplo: Você pode avaliar um LLM sem programar.Prompt
Instrução ou pergunta enviada ao modelo.
Exemplo: Resuma em três tópicos é um prompt.Response
Resposta produzida pelo modelo.
Exemplo: O texto devolvido após o prompt.Preference Ranking
Comparação de respostas para escolher a melhor.
Exemplo: A é correta e B contém erro; A fica acima.Factuality
Verificação de que afirmações correspondem aos fatos.
Exemplo: Dizer que Brasília fica no litoral falha em factualidade.Hallucination
Informação inventada apresentada como verdadeira.
Exemplo: Citar um estudo inexistente.Safety
Avaliação de riscos e políticas de segurança.
Exemplo: Classificar uma ameaça explícita.Toxicity
Conteúdo ofensivo ou prejudicial conforme a política.
Exemplo: Uma ameaça pode ter alta toxicidade.Moderation
Revisão de conteúdo segundo políticas.
Exemplo: Marcar assédio conforme as regras.QA
Garantia de qualidade para encontrar inconsistências.
Exemplo: Revisar anotações antes da entrega.QC
Controle de qualidade de itens ou lotes.
Exemplo: Auditar uma amostra antes da aprovação.Gold Task
Item com resposta de referência.
Exemplo: A plataforma compara sua decisão com a resposta conhecida.Benchmark
Conjunto usado para comparar desempenho.
Exemplo: Modelos diferentes podem usar o mesmo benchmark.Calibration
Alinhamento de decisões entre avaliadores.
Exemplo: A equipe compara os mesmos exemplos.Throughput
Quantidade de itens concluídos por período.
Exemplo: Itens por hora sem abandonar precisão.AHT
Tempo médio gasto por tarefa.
Exemplo: Cinco minutos de média não é sempre um limite.TAT
Prazo entre recebimento e entrega.
Exemplo: Um lote pode ter TAT de 24 horas.Onboarding
Etapa inicial de orientação e configuração.
Exemplo: Ler materiais e configurar a ferramenta.Qualification
Teste ou etapa para entrar em um projeto.
Exemplo: Uma prova sobre a guideline.Certification
Avaliação formal anterior à produção.
Exemplo: Passar não garante tarefas contínuas.NDA
Acordo de confidencialidade.
Exemplo: Pode impedir compartilhar tarefas reais.Contractor
Prestador independente sem vínculo tradicional.
Exemplo: Pode receber por hora ou tarefa.Freelance
Trabalho independente por projeto ou demanda.
Exemplo: Não equivale automaticamente a emprego fixo.Task-based pay
Pagamento por item aprovado.
Exemplo: O total depende de preço e volume.Availability
Disponibilidade de tempo ou de tarefas.
Exemplo: Aprovação não significa tarefas agora.Marketplace
Plataforma que reúne vários projetos.
Exemplo: Uma conta pode acessar trabalhos diferentes.Project
Conjunto de tarefas com objetivo e regras próprias.
Exemplo: Cada projeto pode ter guideline específica.Production
Fase de execução de tarefas reais.
Exemplo: Treinamento e produção são etapas diferentes.Audit
Revisão sistemática de qualidade.
Exemplo: Uma auditoria identifica padrões de erro.