Em público
Exatidão
Como EXISTS, SAYS e HOLDS pontuam diante de um banco de citações reais em disputa, começando pelo nosso pior número. Atualizado pela rodada noturna do banco de testes; a parcela que marcamos INSUFFICIENT_EVIDENCE é informada como tal, nunca dobrada dentro de um acerto.
respostas insuficientes para pontuar
no method answered on enough of the benchmark to score it — insufficient evidence on EXISTS 61% of 197, SAYS 62% of 123
Citations in the Wild v0.2 · 13 documentos · 197 afirmações · gerado em 2026-09-11
registro de casos · busca aberta 105 · busca por nome 66 · sem resposta 26
Por nível
| nível | n | exatidão balanceada | parcela de INSUFFICIENT_EVIDENCE | intervalo de 95 % |
|---|---|---|---|---|
| EXISTS | 197 | — | 61% | — |
| SAYS | 123 | — | 62% | — |
| HOLDS | 0 | — | — | — |
parcela de INSUFFICIENT_EVIDENCE neste mês: 100%
Mês a mês
| mês | comprovantes | afirmações | citações | não conferidas | INSUFFICIENT_EVIDENCE (das citações) | falha de EXISTS (das afirmações) | falha de SAYS (das afirmações) |
|---|---|---|---|---|---|---|---|
| 2026-09 | 2 | 2 | 2 | 0 | 100% | 0.0% | 0.0% |
Como ler isto
EXISTS e SAYS são quase determinísticos: uma fonte responde ou não responde; as palavras atribuídas estão nela, em uma posição de caracteres, ou não estão. Os erros deles são erros de download e desvios, não de julgamento.
HOLDS pontua entre 64 % e 77 % nos subconjuntos difíceis. Discorda dos peritos com frequência, devolve INSUFFICIENT_EVIDENCE com frequência e de propósito, vem desligado e nunca entra no registro selado.
Os números de referência externos para essa mesma classe de tarefa ficam na casa dos setenta e poucos.
EXISTS consulta o registro de casos de duas maneiras: pela busca da citação, que tem um limite diário, e passado o limite pela busca aberta do registro, um instrumento mais grosseiro. Como uma rodada se dividiu entre as duas está impresso sob a linha do banco de testes.
atualizado toda noite pela rodada do banco de testes; um desvio de mais de 3 pontos muda esta página automaticamente