Todo teste do cérebro WikiSecret era verde — com 6 a 20 notas sintéticas. Ingerimos 392 documentos técnicos reais (os nossos) e fizemos 20 perguntas de trabalho de verdade.
O que só o documento real mostrou
O ranking da busca estava morto havia 8 dias. Um conserto de segurança havia deixado os pesos da busca apontando para colunas que não existiam mais — todo resultado saía com nota zero e a ordenação virava loteria (a mesma nota em 1º lugar em 21 de 25 perguntas). Consertado e remedido: de 0/20 para 3/20 em primeiro lugar, de 1/20 para 9/20 no top-5 — melhor, e ainda declaradamente aquém, porque busca lexical tem teto.
O anonimizador come vocabulário técnico quando ingere notas de engenharia (sigla vira "organização"). Para documento jurídico e clínico — o público do produto — o efeito é menor; para notas de TI, está registrado como limite conhecido e alimenta o próximo treino.
Teste verde em dado sintético é hipótese. Documento real é veredito.