Validez Bases conceptuales Definicin y tipos de validez

Validez: Bases conceptuales

Definición y tipos de validez Definición de validez Tipos de validez 1. Validez de contenido 2. Validez de constructo 3. Validez convergente Validez consecuencial

Definición de validez

El Inventario de Personalidad… � ¿Qué se supone que mide? � ¿Qué evidencia hay de que mide realmente lo que se supone que mide? � ¿Los puntajes del instrumento están relacionados con la ejecución en el trabajo teóricamente? ¿hay datos que muestren esa relación?

Mi experiencia ha indicado que …

Definición VALIDEZ Quizá el asunto más importante en la medición en psicología. El concepto ha evolucionado.

Definición �Definición tradicional: “Grado en el cual un instrumento mide lo que se supone que debe medir”. (Sobresimplifica) �Definición contemporánea: “Grado en el cual la teoría y la evidencia apoyan las interpretaciones de los puntajes del instrumento implicadas por los usos propuestos” ¿El instrumento es útil y significativo como una medida de…?

Definición 1ª implicación de la definición contemporánea: Una medida en sí misma no es ni válida ni no válida. La cuestión de la validez tiene que ver con las interpretaciones y con los usos propuestos de los puntajes de medición.

Definición Ej. Inventario de Personalidad NEO Factor Eficiencia: Proceso activo de planeación, organización y realización de tareas. ¿Hay buenas razones para creer que los puntajes del instrumento realmente proporcionan información que diferencia potencialmente a los mejores y a los peores empleados?

Definición Su utilidad depende del trabajo de que se trate. ¿El martillo es per se una herramienta útil? ¡No! Depende de aquello para lo que se usará.

Definición Medidas psicológicas Su utilidad depende del trabajo de que se trate. ¿El instrumento de Eficiencia es válido per se? No, depende de la manera en que se interpretará y se usará.

Definición Afirmación incorrecta: “La escala de Eficiencia del IP-NEO es válida”. Debe ser: “Los puntajes de la escala de Eficiencia del NEO son válidamente interpretados como una medida de Eficiencia”.

Definición La validez es una propiedad de las interpretaciones y usos de los puntajes del instrumento; no es una propiedad del propio instrumento.

Definición 2ª implicación de la definición contemporánea: La validez no es un asunto de “todo o nada”, sino de grado. No es: válido versus no válido Sí es: fuerte versus débil

Definición �Un instrumento debería seleccionarse sólo si hay una fuerte evidencia que apoye la interpretación y el uso que se pretende. �Sopesar las fortalezas relativas de las evidencias de los instrumentos que se están considerando.

Definición 3ª implicación de la definición contemporánea: La validez de la interpretación y el uso de un instrumento están basados en la evidencia empírica y en la teoría psicológica defendible. Debe haber evidencia empírica y teoría psicológica que apoyen una interpretación particular de los puntajes del instrumento.

Definición

Definición Ejemplo:

Definición El jefe de recursos humanos que basa sus decisiones de contratación en este test ¿podría defenderlas?

Definición Ej. ¿Hay datos duros (obtenidos de investigación de calidad) que demuestren que quienes puntúan relativamente alto en la escala de Eficiencia son realmente más altos en “Eficiencia” que quienes puntúan relativamente más bajo? Tests and resources: http: //www. annarbor. co. uk/in dex. php

Tipos de validez

Tipos de validez Obtenidos lógicamente • Validez de contenido • Validez de facie Obtenidos empíricamente • Validez de criterio �Validez concurrente �Validez predictiva • Validez de constructo � Validez convergente y discriminante � Validez factorial

Tipos de validez Validez obtenida empíricamente Validez obtenida lógicamente Validez de contenido Validez de facie Validez de criterio Validez concurrente Validez predictiva Validez de constructo Validez convergente y discriminante Validez factorial

Tipos de validez �Validez de contenido

Tipos de validez: Evidencia de validez Contenido del instrumento Correspondencia entre: Lo que debería incluirse en el instrumento y el contenido que en realidad tiene el instrumento

Tipos de validez: Evidencia de validez El contenido del instrumento debe reflejar las facetas o dimensiones importantes del constructo. A juicio de expertos en el constructo

Tipos de validez Amenazas a la validez de contenido: 1ª Contenido irrelevante para el constructo. 2ª Sub-representación del constructo. No más, no menos.

Tipos de validez Amenazas a la validez de contenido: Ej. Examen de una clase de Psicología de la personalidad para medir “Conocimiento de Freud”: • estructura de la personalidad, • etapas del desarrollo de la personalidad y • mecanismos de defensa. Reactivos que muestren sólo los tres temas, no otras cosas, así como el rango total del contenido. No más, no menos.

Tipos de validez Pero: No existe una regla clara de lo que constituye “una muestra adecuada” de reactivos. Razones prácticas (como tiempo, fatiga, atención) restringen la cantidad de contenido que puede incluirse (no es posible incluir reactivos que cubran cada faceta o matiz del constructo).

EVIDENCIA RELACIONADA CON EL CONTENIDO Se determina hasta donde los itemes de un instrumento son representativos de las variables que se desea medir (grado de representatividad). Palella y Martins; 2006 No puede ser expresada cuantitativamente (Ruiz; 2003) Método: Validez de Contenido Técnica: Juicio de Expertos Ítems 1 2 4 5 6 7 8 9 10 11 Congruencia Claridad Tendenciosidad Si No q. q. q. q. q. q. Observaciones ______________________ ______________________ ______________________ ___________

Tipos de validez �Validez de facie

Tipos de validez Validez de Facie: Grado en el cual una medida parece estar relacionada con un constructo específico, a juicio de no expertos. El contenido simplemente parece relevante para la persona que toma el instrumento.

Tipos de validez Implicaciones : Puede influir en la motivación para responder de una manera honesta y seria. Un instrumento con alta validez de facie podría ser mejor recibido por los usuarios potenciales.

Tipos de validez En suma: � Validez de contenido: Grado en el cual el contenido de una medida verdaderamente refleja el dominio total del constructo, ni más ni menos. Evaluada sólo por profundos conocedores del constructo (expertos). � Validez de facie: Grado en el cual los no expertos perciben que un instrumento es relevante para lo que ellos creen que mide.

Tipos de validez 2 o. tipo �Estructura interna del instrumento

Tipos de validez Estructura interna del instrumento Manera en que las partes de un instrumento se relacionan entre sí. Las bases conceptuales de un constructo tienen implicaciones para la estructura interna de una medición del constructo.

Tipos de validez �Estructura interna del instrumento. Correspondencia entre: La estructura interna que el instrumento tiene en realidad y La estructura que el instrumento debería poseer La estructura del instrumento debe reflejar la estructura teórica del constructo

Tipos de validez �Ej. Inventario de Autoestima de Rosenberg Autoestima global Un constructo coherente único: evaluación total del valor de uno mismo. Todos los 10 reactivos están altamente correlacionados entre sí. Forman un apretado racimo. http: //www. psychomatrix. in/

Tipos de validez �Ej. Inventario de Autoestima Multidimensional (O’Brien y Epstein) Autoestima global y ocho componentes de autoestima (basados en investigación previa). Un racimo por cada uno de los componentes

Tipos de validez � Procedimiento para evaluar la estructura interna (dimensionalidad): Análisis factorial Ayuda a identificar la presencia y naturaleza de los factores que existen dentro de un grupo de reactivos. El número de factores es una faceta importante de la evaluación de la estructura interna de una medida.

Tipos de validez El análisis factorial: a) Ayuda a clarificar el número de factores dentro de un grupo de reactivos. Ej. , si el Inventario de Autoestima de Rosenberg sale con 2 factores en lugar de 1, se cuestionaría su validez para medir su autoestima global. b) Revela las asociaciones entre los factores/dimensiones dentro de un instrumento multidimensional.

Tipos de validez c) Identifica qué reactivos están ligados a qué factores. El entendimiento conceptual del constructo llevaría a generar reactivos específicos que reflejaran aspectos particulares del constructo. Y la estructura factorial encontrada debería revelar esta asociación reactivos-factores. Pero los resultados no son perfectos.

Tipos de validez 3 er. tipo �Validez convergente

Tipos de validez Validez convergente Asociaciones con otras variables Según el entendimiento teórico del constructo para el cual se interpretan los puntajes, éstos deberán tener patrones particulares de asociación con otras variables.

Tipos de validez Validez convergente Correspondencia entre: Las asociaciones reales de una medida y Las asociaciones que el instrumento debería tener con otras medidas

Tipos de validez Ej. La teoría sugiere un patrón de asociaciones para la autoestima global con otros constructos. El Inventario de Autoestima se asocia con: Felicidad (+) Depresión (-) Inteligencia (no relación) Motivación social (+) Si se obtiene este patrón con los datos, el instrumento puede interpretarse como una medida de autoestima.

Tipos de validez Evidencia convergente Grado en el cual los puntajes de un instrumento se correlacionan con instrumentos de constructos relacionados. Correlaciones entre diferentes maneras de medir el mismo constructo.

Tipos de validez Evidencia convergente: Puntajes del con instrumento a) instrumentos de constructos relacionados b) instrumentos que midan el mismo constructo c) Evaluaciones de terceros sobre la posesión que la persona tiene del constructo

Tipos de validez Evidencia discriminante Grado en el cual los puntajes de un instrumento no están correlacionados con instrumento de constructos no relacionados. Ej. , autoestima con inteligencia.

Tipos de validez Ej. , : Autoestima y logro académico (promedio de calificaciones). r =. 40. Interpretación: Los estudiantes que tienen alta autoestima tienden a tener alto desempeño académico. Recomendación: La escuela debe dedicar recursos al incremento de la autoestima en los estudiantes.

Tipos de validez Pero: Considerar cuidadosamente los métodos, incluyendo la validez discriminante. ¿El instrumento posee validez discriminante como una medida de autoestima? Toma de decisiones incorrecta y desperdicio de recursos.

Tipos de validez Variedades de la validez convergente: Validez concurrente y validez predictiva

Tipos de validez Validez concurrente Grado en el cual los puntajes del instrumento se correlacionan con otras variables relevantes medidas al mismo tiempo que el instrumento de interés.

Tipos de validez Ej. , instrumento de Razonamiento en preparatorianos con promedio de calificaciones en preparatoria.

Tipos de validez Validez predictiva Grado en el cual los puntajes del instrumento se correlacionan con otras variables relevantes en un momento futuro en el tiempo que el instrumento de interés.

Tipos de validez Ej. , instrumento de Razonamiento en preparatorianos con promedio de calificaciones en universitarios.

Validez consecuencial

Tipos de validez Validez consecuencial Diferencia entre enfoque tradicional y contemporáneo: consideración de las consecuencias reales y potenciales de medir. Obligación de evitar consecuencias adversas del significado de los puntajes

Tipos de validez Posibilidad de que la medición afecte injusta y adversamente a algunas personas más que a otras.

Tipos de validez Ej. Constructo: Flexibilidad versus Rigidez Adaptación de tendencias cognitivas y conductuales en respuesta a circunstancias cambiantes. Retención de estabilidad cognitiva y conductual. Confusión versus Consistencia

Tipos de validez Ej. Constructo: Sensibilidad emocional Inteligencia emocional

Tipos de validez Los juicios de valor tienen sutiles influencias potenciales sobre el proceso científico, que deben ser reconocidas y evaluadas lo más claramente posible.

Tipos de validez Ej. : Las mujeres obtienen puntajes más altos que los hombres en “Eficiencia”. Por tanto, menos hombres que mujeres son contratados.

Tipos de validez ¿Por qué el instrumento diferencia entre H y M? 1ª posibilidad: El instrumento está sesgado (no mide igual a todos; no es igualmente válido para todos). 2ª posibilidad: El instrumento no está sesgado (mide igualmente bien a todos, pero un grupo posee una mayor proporción del constructo que el otro).

Resumen

Resumen 1 er tipo: Validez de contenido Correspondencia entre: el contenido real del instrumento lo que debería incluirse en el instrumento El contenido del instrumento debe reflejar las facetas importantes del constructo y

Resumen �Validez de contenido: Evaluada sólo por profundos conocedores del constructo (expertos). �Validez de facie: Percepción de los no expertos de que un instrumento es relevante para lo que ellos creen que mide.

Resumen 2º tipo: Validez de constructo Correspondencia entre: La estructura interna real del instrumento y La estructura que el instrumento debería poseer La estructura real del instrumento debe reflejar la estructura teórica del constructo

Tipos de validez �Constructo único: multidimensional: Todos los reactivos están altamente correlacionados entre sí. Varios factores con reactivos correlacionados

Resumen 3 er. tipo: Validez convergente Correspondencia entre: Las asociaciones reales de una medida y Las asociaciones que el instrumento debería tener con otras medidas Según el entendimiento teórico del constructo para el cual se interpretan los puntajes, éstos deberán tener patrones particulares de asociación con otras variables.

Resumen Validez convergente: validez concurrente y Validez predictiva

Resumen Validez consecuencial Consideración de las consecuencias reales y potenciales de medir. Obligación de evitar consecuencias adversas del significado de los puntajes Posibilidad de que la medición afecte injusta y adversamente a algunas personas más que a otras.