Por que um resultado honesto vem com margem de erro

Todo teste erra um pouco

Se você fizesse o mesmo tipo de teste em cinco dias diferentes, com perguntas diferentes, não tiraria cinco vezes o mesmo número. Numa manhã você dormiu mal; noutra, um chute deu certo; numa terceira, o celular tocou no meio de uma questão difícil. A psicometria trata cada resultado como a soma de duas partes: o valor que você teria sem essas oscilações e um erro que ninguém consegue eliminar.

Isso vale para qualquer instrumento, inclusive as baterias completas aplicadas por psicólogos. O que muda de um teste para outro é o tamanho do erro.

O erro-padrão de medida

O tamanho do erro tem nome: erro-padrão de medida. Ele diz quanto os resultados de uma pessoa costumam variar em volta do valor verdadeiro dela e depende de quão consistente o teste é. Numa escala com desvio-padrão 15, um teste com confiabilidade de 0,90 tem erro-padrão perto de 5 pontos. Baterias completas costumam relatar confiabilidade acima de 0,95 na pontuação total, o que dá um erro-padrão de uns 3 pontos ou menos.

Na Teoria de Resposta ao Item, usada pelo IQNorth, o erro não é igual em toda a escala. Ele é menor onde existem muitas questões com dificuldade parecida com a sua e maior nas pontas, onde há menos questões capazes de separar uma pontuação da vizinha. Com as 37 questões que contam, o erro-padrão fica em torno de 5 a 6 pontos no meio da escala.

O intervalo de 95%

Para montar a faixa, soma-se e subtrai-se do resultado cerca de duas vezes o erro-padrão. Com erro de 5 a 6 pontos, isso dá uma faixa de cerca de 10 pontos para cada lado. O nome 95% de confiança descreve o procedimento: faixas construídas desse jeito contêm o valor verdadeiro em cerca de 19 de cada 20 casos.

Como ler “101 a 119”

Tome o exemplo acima, um QI estimado de 110 com faixa de 101 a 119.

• 110 é a melhor estimativa única, o ponto mais provável.
• Um valor verdadeiro de 104 ou de 116 é perfeitamente compatível com esse resultado.
• Duas pessoas com 108 e 112 no mesmo teste não podem ser consideradas diferentes: as faixas delas se sobrepõem quase inteiras.
• A faixa não é uma garantia. Em cerca de 1 caso em 20, o valor verdadeiro fica fora dela.

Por que um teste curto online tem mais erro

Três coisas pesam. A primeira é o tamanho: menos questões significam menos informação, e cada acerto ou erro isolado move mais o resultado. A segunda é o ambiente. Ninguém supervisiona a aplicação, então barulho, notificações e cansaço entram na medida. A terceira é a norma: a do IQNorth ainda é provisória, montada com parâmetros publicados do ICAR corrigidos e com a curva por idade da literatura (Salthouse, 2009), e será recalculada com as respostas reais.

Nenhuma dessas limitações some com um número bonito. Elas aparecem no tamanho da faixa, que é o lugar certo para elas.

Uma parte do erro, porém, depende de você. Responder num lugar calmo, sem interrupções, com o celular em silêncio e sem pressa, reduz o ruído que o teste não tem como corrigir. O tempo não conta pontos, e ler cada questão com calma é a melhor forma de fazer o número refletir o seu raciocínio.

Por que um número sem margem engana

Um número solto sugere uma exatidão que o teste não tem. Ele convida a comparar pessoas por diferenças de dois ou três pontos, que estão dentro do erro, e a ler como progresso uma oscilação normal entre duas tentativas.

É por isso que o reteste do IQNorth só aponta mudança quando a diferença passa da margem, depois de descontar o efeito de prática. Na maioria dos casos o resultado sai estável, e isso é o esperado.

A faixa não enfraquece o resultado. Ela diz o quanto dele dá para afirmar.

Veja também: Por que o resultado vem em faixa.

Leia também: Como saber se um teste de QI online é confiável