AULA 04 CONSTRUO DE MEDIDAS PSICOMTRICAS Medidas em

AULA 04 CONSTRUÇÃO DE MEDIDAS PSICOMÉTRICAS Medidas em Psicologia Prof. Igor Menezes

O Processo da Testagem Psicológica De acordo com Pasquali (1999), são os três os procedimentos mais comumente utilizados para a construção de testes psicológicos de aptidão, inventários de personalidade e escalas psicométricas de atitudes e diferencial semântico. Elaboração de um Teste Procedimentos teóricos Medidas em Psicologia Procedimentos empíricos Procedimentos estatísticos Prof. Igor Menezes

O Processo da Testagem Psicológica Procedimentos teóricos O primeiro passo na construção de um teste é voltar-se a um estudo aprofundado da teoria sobre o construto que irá fundamentar a concepção do instrumento. Esse procedimento teórico de elaboração é fundamental para garantir a futura validade do teste e, consequentemente, a sua qualidade psicométrica. Medidas em Psicologia Prof. Igor Menezes

O Processo da Testagem Psicológica Procedimentos empíricos (experimentais) Corresponde à definição das etapas e técnicas de aplicação do instrumento piloto e da coleta válida da informação para proceder à avaliação da qualidade psicométrica da avaliação. Medidas em Psicologia Prof. Igor Menezes

O Processo da Testagem Psicológica Procedimentos analíticos (estatísticos) Estabelece os procedimentos estatísticos a serem efetuados sobre os dados no sentido de garantir a aferição de seus parâmetros psicométricos (validade, fidedignidade e normatização). Medidas em Psicologia Prof. Igor Menezes

O Processo da Testagem Psicológica Procedimentos teóricos Pela TCT, os procedimentos teóricos de elaboração são realizados pela coleta intuitiva e mais ou menos aleatória de uma amostra de itens que parecem cobrir o traço que deverá ser avaliado (face validity). A TRI busca a operacionalização do traço latente, ao definir os tipos e características dos comportamentos que irão constituir a representação empírica dos traços latentes. Medidas em Psicologia Prof. Igor Menezes

O Processo da Testagem Psicológica Procedimentos teóricos A operacionalização, ou seja, o levantamento das definições operacionais de um teoria é a tarefa mais crítica para a garantia do isomorfismo. Além disso, a operacionalização da teoria permite o conhecimento da dimensionalidade do atributo, isto é, da sua estrutura semântica constitutiva. A dimensionalidade de um atributo irá apontar a qualidade e a quantidade de características discerníveis no construto avaliado. Medidas em Psicologia Prof. Igor Menezes

O Processo da Testagem Psicológica Procedimentos teóricos Como a TRI parte de uma concepção dualista do homem, em que os comportamentos são elementos distintos do traço latente, ela assume o pressuposto de que somente uma habilidade é medida pelo modelo, isto é, o conjunto de itens deve estar medindo um único traço latente. Mesmo sabendo que exista uma variedade de habilidades responsáveis pelo processo de execução de uma tarefa, admite-se que haja uma habilidade dominante, responsável pelo conjunto de itens. A esse pressuposto dá-se o nome de unidimensionalidade do construto. Medidas em Psicologia Prof. Igor Menezes

O Processo da Testagem Psicológica De um modo geral, o processo de testagem psicológica ocorre mediante uma série de etapas, como podem ser sintetizadas a seguir. Medidas em Psicologia Prof. Igor Menezes

O Processo da Testagem Psicológica Etapas 1 2 3 Desenho do Teste Análise de Itens Administração Matriz de Especificações Definição de Dimensões Seleção dos itens 1ª Aplicação do instrumento Fatores Descritores Elaboração dos itens Escolha do tipo de item ou escala Medidas em Psicologia Análise dos itens Validação preliminar Seleção final dos itens Adoção dos padrões determinados 2ª Aplicação do instrumento Coleta de dados 4 Análise Tabulação dos dados Cálculo dos resultados 5 7 6 Interpretação Padronização Comunicação Significado dos escores Criação de padrões da testagem Feedback da testagem Contexto para generalização Normatização Elaboração de laudo Fidedignidade Validade Inferências a Normalização curto e longo prazo Construção do manual técnico Variáveis intervenientes Erros de mensuração Prof. Igor Menezes

O Processo da Testagem Psicológica Etapas 1 2 3 Desenho do Teste Análise de Itens Administração Matriz de Especificações Definição de Dimensões Seleção dos itens 1ª Aplicação do instrumento Fatores Descritores Elaboração dos itens Escolha do tipo de item ou escala Medidas em Psicologia Análise dos itens Seleção final dos itens Adoção dos padrões determinados 2ª Aplicação do instrumento Coleta de dados 4 Análise Tabulação dos dados Cálculo dos resultados 5 7 6 Interpretação Padronização Comunicação Significado dos escores Criação de padrões da testagem Feedback da testagem Contexto para generalização Normatização Elaboração de laudo Fidedignidade Validade Inferências a Normalização curto e longo prazo Construção do manual técnico Variáveis intervenientes Erros de mensuração Prof. Igor Menezes

Medidas em Psicologia Prof. Igor Menezes

1 Desenho do Teste Matriz de Especificações Um dos procedimentos mais utilizados para o estudo de uma teoria e conseqüente operacionalização de um construto é o desenvolvimento de uma matriz de especificações de teste (também conhecida como blueprint test ou blueprint construction). O desenvolvimento das especificações de teste é bastante comum quando são examinados construtos como habilidades ou aptidões, embora possam ser utilizadas para vários outros construtos, como personalidade, inteligência e atitudes. Medidas em Psicologia Prof. Igor Menezes

1 Desenho do Teste Matriz de Especificações As especificações do teste indicam quais as dimensões (domínios/strands), fatores (sub-domínios/sub-strands) e descritores (standards) podem ser avaliados no teste e em que proporções. Além disso, as especificações do teste fornecem o número de itens para cada descritor, os tipos de itens a serem incluídos, além de classificar os domínios e descritores em diferentes níveis de complexidade cognitiva. Medidas em Psicologia Prof. Igor Menezes

1 Desenho do Teste Matriz de Especificações As especificações do teste também clarificam, definem e/ou limitam como os itens do teste serão redigidos para cada dimensão, fator e descritor. Não existe um modelo padronizado de especificações de teste. A seguir, é exposto um exemplo de Matriz de Especificações para Exame de Avaliação de Aprendizagem de Produção Textual para a 8ª série. Medidas em Psicologia Prof. Igor Menezes

Matriz de Especificações Exemplo de Matriz de Especificações para Exame de Avaliação de Aprendizagem de Produção Textual para a 8ª série. Medidas em Psicologia Prof. Igor Menezes

1 Desenho do Teste Matriz de Especificações A operacionalização de um conceito subjetivo possibilita a sua mensuração a partir de um conjunto de descritores, os quais representarão futuramente os itens que, por sua vez, servirão como a representação do comportamento que se busca avaliar. Medidas em Psicologia Prof. Igor Menezes

Medidas em Psicologia Prof. Igor Menezes

1 Desenho do Teste Dimensões (Matriz do Teste) - Para a Geometria, é a extensão ou magnitude de um determinado atributo em função do espaço em que ocupa; indica o grau de variabilidade de uma quantidade. - Em Psicometria, as dimensões são os elementos que, em conjunto, constituem o construto psicológico e correspondem igualmente ao percentual de representatividade do traço latente. - Indicam ou constituem os descritores responsáveis pela construção dos itens. Medidas em Psicologia Prof. Igor Menezes

1 Dimensões (Matriz do Teste) Desenho do Teste Multidimensional 1 dimensão 2 dimensões 3 dimensões Unidimensional Bidimensional Tridimensional Atitude Habilidade Favorável Suficiente Síndrome de Burnout Baixa INTENSIDADE Insuficiente Verbal INFLUÊNCIA Suficiente NÍVEL Biológica Nãoverbal Alta Normal Desfavorável Insuficiente Medidas em Psicologia Psicossocial Patológico Prof. Igor Menezes

1 Dimensões (Matriz do Teste) Desenho do Teste Modelo Tridimensional da Estrutura do Intelecto (Guilford, 1988) CONTEÚDO Visual Auditivo Simbólico Semântico Comportamental PRODUTOS Unidades Classes Relações Sistemas Transformações Implicações OPERAÇÕES Avaliação Produção convergente Produção divergente Retenção de memória Registro de memória Cognição Medidas em Psicologia Prof. Igor Menezes

Medidas em Psicologia Prof. Igor Menezes

1 Desenho do Teste Definição de Fatores (componentes ou variáveis latentes) Fatores ou Variáveis Latentes - São variáveis que representam conceitos ou construtos. - Pode haver fatores separados para cada dimensão de um construto e um mínimo de um descritor por fator. - A variável latente pode ser conhecida e mensurada a partir de indicadores e parâmetros. - Os fatores são os elementos que constituem as dimensões, mas, às vezes, podem ser as próprias dimensões, quando a complexidade do construto não permite diferenciar variáveis latentes dentro das dimensões. Medidas em Psicologia Prof. Igor Menezes

1 Desenho do Teste Fatores Modelo Tridimensional da Estrutura do Intelecto (Guilford, 1988) CONTEÚDO Visual Auditivo Simbólico Semântico Comportamental PRODUTOS Unidades Classes Relações Sistemas Transformações Implicações OPERAÇÕES Avaliação Produção convergente Produção divergente Retenção de memória Registro de memória Cognição Medidas em Psicologia Prof. Igor Menezes

Prof. Igor Menezes

1 Desenho do Teste Criação de Descritores - São as características significativas e importantes do construto que fornecem informações condensadas sobre o que deve ser avaliado. - Descritor é a denominação atual para objetivo instrucional. - Um descritor fornece uma frase objetiva e concisa que apresenta um comportamento observável do indivíduo tendo em vista o domínio de um conteúdo de aprendizagem, ou seja, o comportamento que demonstra a performance esperada. Medidas em Psicologia Prof. Igor Menezes

1 Desenho do Teste Criação de Descritores - O descritor deve ser apresentado em termos comportamentais observáveis, indicando as competências necessárias ao domínio do conteúdo ao qual o sujeito foi exposto. - Corresponde a uma variável diretamente associada a uma variável latente, sendo que, uma diferença nos valores da variável latente ocasiona modificações nos valores do descritor. - Ele deve permitir avaliar a magnitude da variável latente de um sujeito ao longo do tempo ou de diferentes sujeitos. Medidas em Psicologia Prof. Igor Menezes

1 Desenho do Teste Criação de Descritores Na área educacional, o descritor deve incluir: 1º) O que é dado para que o aluno demonstre uma competência específica. 2º) Um comportamento observável representado por um verbo de ação que especifique o aprendizado esperado. 3º) A descrição do produto final do ensino em termos de um comportamento diretamente observável. - Estando diretamente associada a um fator, a quantidade de descritores requeridos para representar a totalidade do significado de uma variável latente depende da quantidade de aspectos discerníveis dessa variável, ou seja, da complexidade do fator avaliado. Medidas em Psicologia Prof. Igor Menezes

1 Desenho do Teste Criação de Descritores A quantidade de descritores requeridos para representar a totalidade do significado de uma variável depende da quantidade de aspectos discerníveis dessa variável. Variáveis Teóricas + Marco Teórico + Possibilidades Teóricas de Mensuração Medidas em Psicologia FATORES (variáveis latentes) DESCRITORES (variáveis empíricas) Prof. Igor Menezes

1 Desenho do Teste Criação de Descritores A definição de descritores, que servirão como referência para a avaliação, tem de levar em consideração tudo o que está implícito na teoria sobre o construto sobre a qual o instrumento será desenvolvido. A quantidade de descritores dependerá, finalmente: a) da complexidade conceitual; b) da quantidade de provas empíricas que a validação requer. Medidas em Psicologia Prof. Igor Menezes

1 Desenho do Teste Criação de Descritores Propriedades dos descritores (Camargo, 1996) - Serem representativos e significativos para a mensuração do atributo. - Terem validade, objetividade e consistência. - Serem centrados em aspectos claros, práticos e fáceis de entender. Medidas em Psicologia Prof. Igor Menezes

1 Desenho do Teste Criação de Descritores Propriedades dos descritores (Camargo, 1996) - Permitir enfoques integradores, ou seja, fornecer informações condensadas sobre vários aspectos do problema. - Serem de fácil mensuração, baseado em informações facilmente disponíveis. - Permitirem a relação com outros descritores, facilitando a interação entre eles. - Servirem de referência à construção dos itens. Medidas em Psicologia Prof. Igor Menezes

1 Desenho do Teste Criação de Descritores O traço latente é evidenciada pelo descritor através de um verbo, que expressa um comportamento observável e mensurável. AÇÕES DIRETAMENTE OBSERVAVEIS LISTAR CONSTRUIR ESCREVER DESENHAR MARCAR SUBILHAR DIZER COLOCAR CONTAR NUMERAR NOMEAR RESUMIR Medidas em Psicologia AÇÕES NÃO-OBSERVÁVEIS APRECIAR SABER LER COMPREENDER COMPARAR DAR ESCOLHER SENTIR CRIAR SABER GOSTAR ENTENDER Prof. Igor Menezes

Medidas em Psicologia Prof. Igor Menezes

1 Desenho do Teste Itens Definição - São a unidade elementar do instrumento. - É um mecanismo de avaliação de um construto por meio de um comando ou questão solicitada a um indivíduo. - Busca avaliar as percepções, interesses, opiniões, atitudes, conhecimentos, habilidades e aptidões relacionados ao domínio de conteúdo do teste. - Os itens podem ser analisados qualitativamente, a partir do seu conteúdo, e quantitativamente, por propriedades estatísticas que ditam sua forma e extensão. Medidas em Psicologia Prof. Igor Menezes

1 O Processo de Elaboração de Itens Desenho do Teste Construto Dimensões 1ª CONTEÚDO 2ª INTELECTO PRODUTOS 3ª OPERAÇÕES Medidas em Psicologia Fatores Descritores 1. 1. Visual D 01 D 02 D 03 . . . 2. 1. Classes . . . 3. 1. Avaliação . . . D 01 D 02 D 03 . . . Itens I 01 I 02 I 06 I 07 I 08 I 09 I 10 I 11 I 12 I 13 I 16 I 17 I 18 I 19 I 20 I 21 I 22 I 23 I 24 I 25 I 26 I 03 I 04 I 05 I 14 I 15 I 27 I 28 Prof. Igor Menezes