Sobre Testes e Testagem

Sobre Testes e Testagem (pp. 117-143 – Cohen, R. J., Swerdlik, M.

E., & Sturman, E. D. (2014). Testagem e avaliação psicológica:
introdução a testes e medidas. Porto Alegre: Artmed.)

Clarissa Pinto Pizarro de Freitas

Professora, Doutora em Psicologia
 Testes e Instrumentos Psicológicos
 Os testes e os instrumentos psicológicos são utilizados
como ferramentas auxiliares no processo de avaliação
psicológica

 Os instrumentos etestes psicológicos podem ser utilizados

como instrumentos de rastreamento, seleção e impactar
na vida dos indivíduos

Testes e instrumentos psicológicos devem ser confiáveis
Pressupostos sobre testagem e avaliação psicológica
 Alguns pressupostos são:

Existem traços e estados psicológicos

Traços e estados psicológicos podem ser quantificados e medidos

Comportamento relacionado ao teste prediz comportamento
não relacionado ao teste

Testes e outras técnicas de mensuração têm pontos fortes e
pontos fracos

Várias fontes de erro são parte do processo de avaliação

A testagem e a avaliação podem ser conduzidas de maneira justa
e imparcial

A testagem e a avaliação beneficiam a sociedade
Existem traços e estados psicológicos
 Há diferenças entre o traço e o estado

Traço pode ser definido como as características estáveis dos
indivíduo

Por exemplo

Inteligência

Estilo cognitivo

Personalidade

Estado são condições que podem ser identificadas, mas menos
duradoras que o traço

Por exemplo

Bem-estar

Ansiedade
Existem traços e estados psicológicos
 Traço psicológico

Características dos indivíduos que apresentam algum tipo de
estabilidade temporal

Traço impacta

Percepções dos indivíduos sobre seu cotidiano

Desenvolvimento de relações interpessoais

Atitudes

Outros


O traço psicológico é algo subjetivo e pode ser acessado por
meio de instrumentos adequados
Existem traços e estados psicológicos
 Traço psicológico

O traço psicológico pode ser compreendido como um construto
que pode ser avaliados por meio de comportamentos
observáveis

Não há uma “representação” física do traço psicológico

Conjunto de comportamentos observáveis permitem que esse
traço seja observado

Instrumento psicológico avalia a frequência e intensidade dos
traço psicológico
Existem traços e estados psicológicos
 Traço psicológico

É relativamente estável

Pode apresentar diferenças e mudanças ao longo do tempo

Pode ser desenvolvido/fortalecido ou reduzido

Está associado a situação em que o indivíduo se encontra

A avaliação do traço está associada ao contexto em que o
indivíduo se encontra


Por exemplo

Níveis de autocontrole em uma situação estressante

Níveis de inteligência em uma situação de pressão
Existem traços e estados psicológicos
 Traço psicológico

É relativamente estável

Pode apresentar diferenças e mudanças ao longo do tempo

Pode ser desenvolvido/fortalecido ou reduzido

Está associado a situação em que o indivíduo se encontra

A avaliação do traço está associada ao contexto em que o
indivíduo se encontra


Por exemplo

Níveis de autocontrole em uma situação estressante

Níveis de inteligência em uma situação de pressão
 Traços e estados psicológicos podem ser
quantificados e medidos
 Compreender que um traço psicológico ou um estado pode ser
mensurado é uma característica essencial para o uso dos
instrumentos e testes psicológicos
 Compreende-se que existe um fenômeno que

Pode ser avaliado

Representa “algo” referente aos aspectos subjetivos do indivíduo

Pode ser apresentado por outras pessoas

O fenômeno é passível de comparação

 Ao avaliar um fenômeno é necessário realizar a definição

operacional deste fenômeno
 Traços e estados psicológicos podem ser
quantificados e medidos
 Ao desenvolver um instrumento ou teste psicológico, todo
fenômeno psicológico deve

Possuir a definição do construto

Características, relações, processos

Possuir uma definição operacional

Quais comportamentos caracterizam este fenômeno?

Como este fenômeno é observado e pode ser mensurado?

Estabelecer de que forma esse construto deve ser investigado

Serão realizadas perguntas?

Serão investigados respostas a estímulos?

Será realizado por meio de tarefas?

Ou outras possibilidades?
 Comportamento relacionado ao teste prediz
comportamento não relacionado ao teste
 As tarefas do teste, de modo geral, não estão “diretamente”
associadas ao comportamento avaliado

Responder perguntas

Resolver problemas lógicos

Descrever o que observa em uma imagem

 Ao desenvolver o teste deve-se desenvolver estratégias para que

as respostas dos itens permitam a avaliação dos construtos que se
busca investigar

Adequação dos itens

Dificuldades das tarefas

Adequação dos estímulos utilizados (e.g., imagens, histórias)
 Testes e outras técnicas de mensuração têm pontos
fortes e pontos fracos
 Todas as estratégias de avaliação têm limitações

Testes psicológicos

Desejabilidade social

Estado de humor do(a) avaliando(a)

Compreensão do teste

Disponibilidade em responder ao instrumento


Entrevistas

Habilidades do entrevistador

Disponibilidade em contribuir com a entrevista
 Várias fontes de erro são parte do processo de
avaliação
 Sempre que utilizamos um teste para avaliar um construto
psicológico estamos investigando

Variância do construto

Níveis em que o construto investigado pode ser mensurado
por meio do teste
Erro Variância

Erro

Todos os fatores que prejudicam a mensuração do construto
psicológico

Desejabilidade social

Humor do(a) avaliando(a)

Dificuldade do item

Situação artificial de testagem
A testagem e a avaliação podem ser conduzidas de
maneira justa e imparcial
 Ao adotar uma prática ética, o processo de testagem e avaliação
pode ser justo e imparcial

Profissionais devem estar atentos a

Possíveis vieses em relação aos instrumentos utilizados?

Como as avaliações são realizadas?

Há fatores que interferem no processo de resposta do teste?
A testagem e a avaliação beneficiam a sociedade
 O processo de avaliação psicológica pode contribuir a sociedade

Permite o rastreamento da gravidade dos transtornos dos
indivíduos

Permite a seleção dos profissionais com base em suas habilidades

Reduz a influência de fatores externos nos processo de decisão
sobre os encaminhamentos dos indivíduos
Qualidade do teste
 A qualidade do teste pode ser investigada por meio das evidências
de validade de um teste

Evidências de Validade

Evidências Evidências Evidências Evidências Evidências

Baseadas Baseadas nos Baseadas na Baseadas baseadas nas
no Processos de Estrutura Interna nas consequências
Conteúdo Resposta Relações da testagem
do Teste com Outras
Variáveis

(AERA, 2014)
 Fidedignidade dos Testes
 Importância dos testes para a ciência psicológica
– Os testes auxiliam a mensurar os construtos propostos na
psicologia
 A Psicologia é uma ciência que tem suas bases ancoradas nas
pesquisas científicas
– Testes psicológicos são ferramentas importantes que
auxiliam o pesquisador ou profissional a avaliar hipóteses
sobre relações entre diferentes fenômenos e a tomar
importantes decisões
 Inferências adequadas requerem instrumentos válidos e
fidedignos
 Fidedignidade dos Testes
 Investiga a consistência geral do instrumento
– Evidencia se o instrumento apresenta estabilidade para
investigar o mesmo fenômeno em diferentes momentos
• Uma medida fidedigna produz resultados consistentes
sobre condições similares
• Evidencia se o instrumento avalia da mesma forma o
mesmo fenômeno todas as vezes que é aplicado
 Fidedignidade dos Testes
 Não investiga se o instrumento avalia o construto ao qual se
propõe investigar
– A conformidade entre os itens e a definição operacional do
instrumento é avaliada por meio da
• Análise de conteúdo dos itens
• Dimensionalidade
• Evidências de relações com variáveis externas

 Fidedignidade refere-se a estabilidade temporal da medida

 Fidedignidade dos Testes
 Diferenças entre Validade e Fidedignidade

Fidedigna mas Fidedigna Não fidedigna

não valida e valida e inválida
 Fidedignidade dos Testes
 Tipos de Fidedignidade
– De acordo com o Delineamento do Estudo
• Transversal
• Longitudinal

– De acordo com o método de análise de dados

• Teoria Clássica dos Testes

• Teoria de Resposta ao Item

 Fidedignidade dos Testes
 Tipos de Fidedignidade
– Indicadores mais utilizados
• Coeficiente de Alfa de Cronbach
• Coeficiente Ômega
• Confiabilidade Composta/Fidedignidade Composta
• Variância Média Extraída
Evidências de Validade
 O grau em que todas as evidências acumuladas
corroboraram a interpretação pretendida dos escores de
um teste

 Julgamento integrado sobre o grau em que as evidências

empíricas e a fundamentação teórica do teste suportam a
adequação das interpretações e ações baseadas nos
escores dos testes
Normas
 Norma
– Refere-se ao comportamento esperado ou típico
 Normas
– No contexto psicométrico referem-se às diretrizes de
como interpretar o desempenho dos participantes

 Nem todo instrumento psicológico apresentar normas

– Todos os testes psicológicos aprovados pelo SATEPSI
devem apresentar uma tabela normativa
Normas
 As normas referem-se ao estabelecimento de normas e
regras para a interpretação do escore

 Permite comparar os resultados do teste entre diferentes

indivíduos

 Possibilita compreender as diferenças e similaridades de

um ou vários indivíduos no construto investigado com
maior precisão
Normas
 O uso de escores normatizados possibilita o
estabelecimento de pontos de corte

– Diferencia os grupos (e.g., aprovados e reprovados)

– Identifica a gravidade do transtorno (e.g., leve,

moderado e grave)
Normas
 Amostra normativa
– Participantes que são analisados para compor as
diretrizes normativas do instrumento
– Devem representar a população analisada
– Amostra diversificada

 Permite o desenvolvimento da tabela normativa

 Normas
Normatização
 Normas → Ponto de corte
Normatização

 Índices
médios

 Índices baixos  Índices altos

Normas
 As normas são obtidas por meio da padronização dos
resultados

 A padronização dos resultados requer o uso de uma

– Amostra normativa
• Participantes que são analisados para compor as
diretrizes normativas do instrumento
• Devem representar a população analisada
• Amostra diversificada
Normas
 A amostra normativa pode ser obtida por meio de
diferentes procedimentos de amostragem

 Amostragem
– Estratégia para seleção de indivíduos da população
geral
Normas
 Tipos de amostra
– Amostra estratificada
• Busca entrevistar a mesma quantidade de pessoas de
diferentes subgrupos
– Estratificada pela idade, escolaridade, e outros

– Amostra estratificada aleatória

• Todos os indivíduos da população geral tem a mesma
chance de ser incluído na amostra
Normas
 Tipos de amostra
– Amostra intencional
• Os participantes são selecionados de forma arbitrária,
por acreditarmos que seja representativa da
população

– Amostra por conveniência ou intencional

• Selecionamos os participantes que temos acesso com
maior facilidade
– Tipo de amostra utilizado com maior frequência
Normas
 Tipos de amostra
– Amostra intencional
• Os participantes são selecionados de forma arbitrária,
por acreditarmos que seja representativa da
população

– Amostra por conveniência ou intencional

• Selecionamos os participantes que temos acesso com
maior facilidade
– Tipo de amostra utilizado com maior frequência
Tipos de Normas
 Ao analisar o teste, podemos utilizar diferentes tipos de normas
– Percentis
– Normas de idade
– Normas de série
– Normas nacionais
– Normas nacionais de ancoragem
– Normas locais
– Normas do grupo de referência fixo
Tipos de Normas
 Normas de percentis
– Refere-se a interpretação dos escores com base nos
percentis
– Os escores são padronizados em uma escala de 0 a 100
– Os percentis representam a distribuição dos escores na
população
– Contribui para compreender a frequência que um
determinado escore será observado em comparação com a
amostra “geral”
 Percentis → Ponto de corte
Normatização

 Índices
médios

 Índices baixos  Índices altos

Tipos de Normas
 Normas de idade
– Refere-se ao padrão de respostas esperados para cada
idade
– As normas para diferentes faixas etária devem ser utilizadas
quando há conhecimento que o fenômeno é influenciado
pela idade

– Por exemplo, construtos que devem ter tabelas normativas

para a idade são
• Inteligência
• Habilidades sociais
• Habilidades motoras
Tipos de Normas
 Normas de série
– Refere-se ao padrão de respostas esperados para cada série
– As normas para diferentes séries devem ser utilizadas
quando há conhecimento que o fenômeno é influenciado
pelo nível de escolaridade dos participantes
– Tem uso limitado para o contexto escolar

– Por exemplo, construtos que devem ter tabelas normativas

para a série são
• Habilidades de leitura e escrita
• Desempenho escolar
• Habilidades aritméticas
Tipos de Normas
 Normas nacionais
– Referem-se às normas desenvolvidas com base em
amostras com representatividade nacional

– Contribuem para compreender as diferenças do fenômeno

investigado nas diferentes regiões
Tipos de Normas
 Normas nacionais de ancoragem
– Referem-se às normas que buscam tornar os escores de
diferentes testes como “equivalentes”
• A equivalência entre as normas é questionável
• Busca evidenciar que o escore 10 no teste A pode ser
considerado equivalente ao escore 15 no teste B

– Utiliza o método equipercentil

• Calcula a equivalência dos escores em diferentes testes
com referência aos escores porcentuais
correspondentes

– Raramente utilizas
Tipos de Normas
 Normas locais
– Referem-se às normas obtidas com uma população
específica de uma localidade

– Pouca utilidade para generalizar os resultados a outros

grupos

– Vantajosa quando são utilizados grupos específicos

Tipos de Normas
 Normas do grupo de referência fixo
– Utiliza as normas obtidas por meio de um grupo
considerado como referência para classificar outros
participantes
• Ao invés de criar normas a cada processo de avaliação e
para cada amostra específica, compara a amostra avaliada
com os escores do grupo de referência
Avaliação referenciada à norma
 As normas de um instrumento psicológico podem contribuir
para a identificação de indivíduos com escores acima ou baixo
da população geral
 As normas contribuem no processo de avaliação de
– Indivíduos com altas habilidades
– Indivíduos com dificuldades de aprendizagem
– Indivíduos com altos níveis de depressão
Avaliação referenciada ao critério
 As avaliações com base no critério tem como base a avaliação
da apresentação de um conjunto de comportamentos e/ou
habilidades que tornam o indivíduo apto ou não para
determinada atividade

 Por exemplo, a avaliação psicológica para carteira de motorista

pode se constituir como uma avaliação psicológica referenciada
ao critério
Valorizar aspectos contextuais
 Ao optar pelo uso de um teste psicológico deve-se estar atento
as influência culturais no processo de respostas dos testes

– As perguntas podem ser compreendidas com diferentes

níveis de escolaridade?

– Há influências culturais nas perguntas utilizadas?

– As perguntas fazem sentido para a faixa etária entrevistada?

Valorizar aspectos contextuais