AvaliaçãoNo ar
Relay
Evals que rodam sozinhos.
Uma plataforma hospedada de avaliação para aplicações de LLM. Defina uma vez o que significa "bom" e pegue regressões automaticamente a cada mudança de prompt e de modelo.
3,2M — evals executados800+ — times40ms — overhead mediano
Por que construímos
Todo projeto de consultoria terminava do mesmo jeito: a gente construía do zero uma estrutura de avaliação para o cliente. O Relay é essa estrutura, transformada em produto — a ferramenta que pegamos primeiro em todo projeto, agora disponível para todo mundo.
Defina casos de teste e juízes, conecte ao CI e entregue mudanças sabendo na hora quando a qualidade cai. O Relay avalia suítes offline e amostra o tráfego ao vivo, então você fica coberto antes e depois do deploy.