Modulo 0 PDF

Preview

Summary

primer modulo...

Description

Psicometría PID_00241075

Julio Meneses Maite Barrios Albert Bonillo Antoni Cosculluela Luis Manuel Lozano Jaume Turbany Sergi Valero

GNUFDL• PID_00241075

Julio Meneses Profesor de los Estudios de Psicología y Ciencias de la Educación de la Universitat Oberta de Catalunya (UOC) e investigador del Internet Interdisciplinary Institute (IN3). Licenciado en Psicología por la Universidad de Oviedo, se doctoró en el programa de Sociedad de la Información y el Conocimiento de la UOC y, actualmente, trabaja como responsable de la metodología en diversos proyectos de investigación en las ciencias sociales. Su investigación se orienta a la aplicación de los métodos de investigación cuantitativa y al uso de técnicas de análisis multivariante, particularmente en las áreas de la introducción de las TIC a los sistemas educativos, la relación de los niños y jóvenes con la tecnología y el abandono y el reingreso de los estudiantes universitarios.

Luis Manuel Lozano Profesor contratado doctor del Área de Metodología de las Ciencias del Comportamiento de la Universidad de Granada, miembro del CIMCYC y consultor de los Estudios de Psicología de la Universitat Oberta de Catalunya (UOC). Doctor en Psicología por la Universidad de Oviedo. Desarrolla su docencia en el área de metodología, y concretamente imparte las asignaturas de Descripción y exploración de datos en psicología y Técnicas de análisis en investigaciones psicológicas. Sus campos de investigación están relacionados con el análisis frecuentista y bayesiano de datos, la elaboración de cuestionarios y modelos de teoría de la respuesta a los ítems.

Psicometría

Maite Barrios Profesora agregada del Departamento de Metodología de las Ciencias del Comportamiento de la Universidad de Barcelona (UB) y consultora de los Estudios de Psicología y Ciencias de la Educación de la Universitat Oberta de Catalunya (UOC). Doctora en Psicología por la UB. Desarrolla su docencia en el ámbito de la metodología impartiendo, entre otras, las asignaturas de Psicometría y Estadística aplicada a la psicología y a la información y documentación. Coautora de varios libros y textos sobre estadística y técnicas de investigación. Su ámbito de trabajo se centra, principalmente, en la infometría, el sesgo de género en ciencia y los estudios bibliométricos.

Jaume Turbany Profesor titular de universidad del Departamento de Metodología de las Ciencias del Comportamiento de la Facultad de Psicología de la Universidad de Barcelona (UB) y consultor de los Estudios de Psicología y Ciencias de la Educación de la Universitat Oberta de Catalunya (UOC). Doctor en Psicología por la UB. Su tarea docente se ha desarrollado en el ámbito de la metodología y la estadística aplicadas a la psicología y a la información y documentación. Actualmente su investigación se orienta, entre otros campos, a los estudios bibliométricos en diferentes áreas de conocimiento, y a la investigación en innovación docente.

Albert Bonillo

Antoni Cosculluela

Profesor lector en el Área de Metodología de las Ciencias del Comportamiento de la Facultad de Psicología de la Universidad Autónoma de Barcelona (UAB) y consultor de los Estudios de Psicología y Ciencias de la Educación de la Universitat Oberta de Catalunya (UOC). Doctor en Psicología por la UAB, máster en Diseño y estadística en ciencias de la salud. En su tesis doctoral propone un conjunto de algoritmos para depurar datos ya registrados. Su investigación se orienta, entre otros ámbitos, a la depuración de datos, la detección de plagio académico, así como a los factores explicativos y las consecuencias de los déficits en la función ejecutiva de los niños.

Profesor titular de universidad del Departamento de Metodología de las Ciencias del Comportamiento de la Facultad de Psicología de la Universidad de Barcelona (UB) y consultor de los Estudios de Psicología y Ciencias de la Educación de la Universitat Oberta de Catalunya (UOC). Doctor en Psicología por la UB. Su tarea docente se ha desarrollado en el ámbito de la metodología y los diseños de investigación, y del análisis de datos en psicología y en información y documentación. Autor y coautor de diferentes libros de estadística aplicada. Actualmente su investigación se orienta, entre otros campos, a los estudios bibliométricos en diferentes áreas de conocimiento.

Sergi Valero Psicólogo del Servicio de Psiquiatría del Hospital Universitario Vall d’Hebrón de Barcelona y consultor de los Estudios de Psicología y Ciencias de la Educación de la UOC. Doctor en Psicología por la Universidad Autónoma de Barcelona (UAB). Su tarea científica está enmarcada en la investigación básica y aplicada en el ámbito de la psicología, la psicopatología y las demencias. Sus publicaciones incluyen espacios diversos de investigación, desde el estudio de las dimensiones de personalidad normal hasta la genética, pasando por los ensayos clínicos, la construcción y adaptación de instrumentos de medida psicológica, la epidemiología, las drogodependencias o la neuropsicología.

Segunda edición: septiembre 2016 © Julio Meneses, Maite Barrios, Albert Bonillo, Antoni Cosculluela, Luis Manuel Lozano, Jaume Turbany, Sergi Valero El encargo y lareservados creación de este recurso de aprendizaje UOC han sido Todos los derechos © de el estaprofesor: edición, FUOC, 2016 por Julio Meneses Naranjo (2016) Av. Tibidabo, 39-43, 08035 Barcelona Diseño: Manel Andreu Realización editorial: Oberta UOC Publishing, SL Depósito legal: B-15.979-2016

coordinados

Se garantiza permiso para copiar, distribuir y modificar este documento según los términos de la GNU Free Documentation License, Version 1.3 o cualquiera posterior publicada por la Free Software Foundation, sin secciones invariantes ni textos de cubierta delantera o trasera. Pueden consultarse los términos de la licencia en http://www.gnu.org/licenses/fdl-1.3.html.

GNUFDL• PID_00241075

Psicometría

“Mide lo que es medible y haz medible lo que no lo es”. Atribuido a Galileo Galilei

GNUFDL• PID_00241075

5

Introducción

Los tests forman parte de la práctica habitual de los profesionales, docentes e investigadores interesados por la medida indirecta de los fenómenos psicológicos. Al servicio de la evaluación psicológica, y en conjunción con otros instrumentos, como la observación o la entrevista, los tests tienen como propósito principal proporcionar las evidencias necesarias que permitan a los psicólogos y a otros profesionales vinculados con las ciencias sociales y del comportamiento tomar decisiones u orientar sus intervenciones en los diferentes contextos en los que desarrollan su actividad. Los tests cumplen, pues, una importante función en relación con la evaluación y la intervención psicológicas y por ello requieren una atención específica en los programas de formación de los futuros psicólogos. Conocer su funcionamiento, sus propiedades y las condiciones en las que los tests deben ser utilizados de manera adecuada y responsable son algunos de los retos importantes a los que nos enfrentaremos en este texto. Para hacerlo, a lo largo de los próximos módulos nos adentraremos en los aspectos teóricos y prácticos involucrados en la medida indirecta de los fenómenos psicológicos mediante tests que la psicometría ha propuesto y sistematizado en las últimas décadas. Como rama de la psicología, la psicometría es la disciplina encargada del desarrollo de teorías, métodos y técnicas que dan apoyo a los procesos de construcción y administración de tests. Su objetivo último, como veremos más adelante, es proporcionar las garantías científicas necesarias para la medida objetiva y estandarizada de los fenómenos psicológicos no observables a partir de una muestra de comportamientos. Este no es un objetivo menor y ha supuesto una importante contribución de la psicología a la teoría de la medida desarrollada en otras disciplinas como la física. Es decir, de acuerdo con las palabras atribuidas a Galileo Galilei en relación con la medida científica: la manera en que la psicometría hace medibles unos fenómenos psicológicos que, por definición y en oposición a los atributos físicos, no son directamente observables ni manipulables. Empezaremos este viaje en el módulo “Aproximación histórica y conceptos básicos de la psicometría”, donde situaremos esta disciplina en el contexto general de la psicología, revisando sus antecedentes remotos y más recientes, presentando las aportaciones más relevantes que han contribuido a su establecimiento como disciplina científica y ofreciendo una definición formal que incorpore el papel de los tests en el marco de la evaluación y la intervención psicológicas. A continuación, desarrollaremos los fundamentos de la psicometría, partiendo de una definición y clasificación de los tests, progresando por los diferentes modelos de medida psicométrica desarrollados en las diferentes teorías de los tests, introduciendo brevemente la teoría clásica de los tests y, finalmente, recapitulando estos fundamentos con la revisión del proceso de

Psicometría

GNUFDL• PID_00241075

6

inferencia psicométrica. Concluiremos el módulo con una discusión de los procesos de construcción y administración de tests, presentando las principales fases en las que podemos estructurar el diseño y la construcción de un nuevo test, ofreciendo algunos criterios importantes para la evaluación de las características y la valoración de la conveniencia de los tests disponibles en la literatura y, finalmente, abordando los aspectos éticos y deontológicos vinculados al uso de tests en la práctica profesional de la psicología. En el módulo “Fiabilidad” trataremos de manera específica un aspecto fundamental para la medida de los fenómenos psicológicos mediante tests: la obtención de puntuaciones consistentes y precisas. Como sucede con cualquier proceso de medida, el desarrollo y la administración de tests requieren el conocimiento del error que se puede cometer. Si este error de medida es grande, de modo que las puntuaciones obtenidas no reflejen adecuadamente los fenómenos psicológicos objeto de interés, los tests no proporcionan la confianza necesaria para cumplir con su objetivo principal al servicio de la evaluación psicológica. Así, en este segundo módulo abordaremos la fiabilidad a partir de la perspectiva de la teoría clásica de los tests, empezando con una descripción del modelo lineal clásico, derivando el coeficiente de fiabilidad y prestando una especial atención tanto a su interpretación como a las diferentes estrategias que se han ido desarrollando para calcularlo. A continuación, se tratarán tres factores importantes que influyen en la fiabilidad de los tests y se presentarán dos procedimientos para estimar las puntuaciones verdaderas de los sujetos a partir de las puntuaciones obtenidas. Finalmente, nos ocuparemos de la fiabilidad de los tests referidos a criterio, discutiendo primero sus rasgos principales y presentando, a continuación, los procedimientos clásicos disponibles para evaluar su fiabilidad. Concluiremos el módulo con una discusión de los métodos más habituales en la determinación de los puntos de corte que permiten la correcta clasificación de los individuos en referencia al criterio. El módulo “Validez” abordará otro aspecto clave para la medida indirecta de los fenómenos psicológicos mediante tests: su adecuación a los objetivos para los cuales han sido construidos y son utilizados en la práctica. Partiendo de una revisión histórica, en este módulo abordaremos las diferentes aproximaciones que la psicometría ha ido proponiendo y definiremos la validez de los tests como el grado en el que la evidencia empírica y la teoría apoyan la interpretación de las puntuaciones en relación con su uso específico. Como veremos a continuación, en la actualidad no se considera la validez como una propiedad intrínseca de los tests, sino que es más bien producto del análisis de su adecuación al propósito específico al que sirven. Para hacerlo, los profesionales interesados por el desarrollo y la administración de tests deben recoger y acumular las evidencias científicas necesarias siguiendo diferentes estrategias. Así, en este módulo estructuraremos los indicios de validez de los tests en cinco grandes grupos: evidencias basadas en la validez de contenido, basadas en el proceso de respuesta, basadas en la estructura interna del test, basadas en la relación con otras medidas y, finalmente, basadas en las consecuencias de la evaluación. Empezaremos definiendo cada uno de estos indicios de validez y a

Psicometría

GNUFDL• PID_00241075

7

continuación trataremos en detalle las diferentes estrategias disponibles para obtener las evidencias necesarias. Finalmente, recapitularemos esta discusión tratando los factores que afectan a la validez de los tests teniendo en cuenta su influencia en estas estrategias para obtener los diferentes indicios. A continuación, en el módulo “Transformación e interpretación de las puntuaciones” nos ocuparemos de los aspectos metodológicos implicados en el tratamiento de la medida indirecta de los fenómenos psicológicos mediante tests. Más allá de algunas cuestiones teóricas importantes vinculadas al proceso de construcción de tests, en este módulo discutiremos las operaciones que los profesionales llevan a cabo para hacer interpretables las puntuaciones obtenidas. Como veremos más adelante, estas puntuaciones no son, per se, informativas y han de ser siempre interpretadas para hacerlas útiles de acuerdo con el propósito con el que los tests han sido desarrollados. Así, empezaremos presentando el marco general de interpretación de las medidas obtenidas mediante tests y abordaremos algunas estrategias importantes para la transformación de puntuaciones, como son la construcción de percentiles o de puntuaciones estandarizadas y la utilización de normas cronológicas. Estas estrategias, que trataremos en detalle teniendo en cuenta sus características, la manera de calcularlas y sus limitaciones, sirven para recodificar las puntuaciones obtenidas en un nuevo sistema de valores que facilite su interpretación sin afectar a la distinta posición de los sujetos en relación con las magnitudes de las puntuaciones originales. A continuación trataremos el proceso de baremación o escalamiento de la medida, que tiene por objetivo establecer una conexión entre la puntuación del individuo y la ejecución observada en un grupo de referencia. Finalmente, concluiremos el módulo con una exposición de las diferentes estrategias disponibles para hacer equiparables las puntuaciones que proporcionan tests diferentes que tienen por objetivo la medida de los mismos fenómenos psicológicos. En el módulo “Análisis de los ítems” introduciremos brevemente un último aspecto importante para la medida indirecta de los fenómenos psicológicos mediante tests: el análisis del funcionamiento de los ítems que conforman los propios tests. A pesar de que es una cuestión muy relevante para la psicometría, especialmente en el diseño y la construcción de nuevos instrumentos, no siempre forma parte de los programas de formación de los futuros psicólogos. En este módulo abordaremos el análisis de las propiedades de los ítems en el caso específico de las pruebas de ejecución máxima –también denominadas tests de habilidad o de potencia–, que tienen por objetivo evaluar la competencia, la aptitud o los conocimientos de los individuos a partir del acierto o la calidad de sus respuestas. Como veremos, a diferencia de las pruebas de ejecución típica, este tipo de pruebas discriminan respuestas correctas e incorrectas y es esta la base empleada para puntuar las ejecuciones individuales. Partiendo de una definición de estos dos tipos de pruebas, empezaremos discutiendo algunas directivas importantes para la construcción de los ítems, al tiempo que presentaremos una prueba de ejecución máxima ficticia que nos servirá para ilustrar esta exposición. Así, abordaremos las propiedades de los ítems de

Psicometría

GNUFDL• PID_00241075

8

acuerdo con la formulación de la teoría clásica de los tests y discutiremos los diferentes procedimientos disponibles para evaluar la dificultad y la discriminación de los ítems. Finalmente, apuntaremos la lógica propuesta por la teoría de la respuesta al ítem y concluiremos presentando el desarrollo de los cálculos necesarios para evaluar las propiedades de los ítems que conforman la prueba ficticia que hemos utilizado para ilustrar los diferentes procedimientos. Finalmente, cerraremos esta aproximación a la psicometría con una selección de actividades prácticas que permitirán poner en juego los contenidos desarrollados en los diferentes módulos. Partiendo de una exposición de tres casos ficticios basados en el uso de tests, se plantearán diferentes ejercicios vinculados a la fiabilidad, la validez, la transformación e interpretación de las puntuaciones y el análisis de los ítems. Estos ejercicios, junto con su desarrollo y sus soluciones correspondientes, tienen por objetivo facilitar el logro de los objetivos planteados a lo largo del texto. También se puede encontrar un anexo con las tablas de distribuciones necesarias para llevar a cabo estas actividades prácticas.

Psicometría

GNUFDL• PID_00241075

9

Objetivos

Esta asignatura tiene como objetivo general:

1. Conocer los fundamentos de la psicometría como disciplina científica encargada de la medida indirecta de los fenómenos psicológicos mediante el desarrollo y la administración de tests. Además del objetivo general, tiene como objetivos específicos:

1.

Situar la psicometría en el contexto general de la psicología al servicio de la evaluación y la intervención psicológicas.

2.

Saber definir y clasificar los diferentes tipos de tests disponibles.

3.

Conocer los diferentes modelos de medida desarrollados por la psicometría en las diferentes teorías de los tests.

4.

Entender el proceso de inferencia psicométrica y conocer los retos específicos que la medida mediante tests debe afrontar en el contexto del método científico.

5.

Conocer las implicaciones prácticas de los procesos de construcción y administración de tests, haciendo un énfasis especial en los aspectos éticos y deontológicos vinculados con su uso.

6.

Entender el concepto de fiabilidad desde la perspectiva psicométrica.

7.

Saber calcular e interpretar los coeficientes de fiabilidad desde la perspectiva de la teoría clásica de los tests.

8.

Conocer los factores que afectan a la fiabilidad de una medida.

9.

Saber estimar las puntuaciones verdaderas de los sujetos a partir de sus puntuaciones empíricas.

10. Conocer los procedimientos para abordar la fiabilidad de los tests referidos a criterio. 11. Conocer los métodos disponibles para determinar el punto de corte para clasificar a los individuos.

Psicometría

GNUFDL• PID_00241075

10

12. Conocer los procesos de validación de los tests que permiten inferir su adecuación a los objetivos para los cuales han sido construidos y son utilizados en la práctica. 13. Saber definir y clasificar los tipos de validez en función de los diferentes indicios que se pueden recoger como evidencias. 14. Conocer de manera práctica las diferentes formas de validez para saber si las conclusiones que se extraen a partir de la aplicación de los tests resultan adecuadas. 15. Conocer los factores que afectan a los diferentes tipos de indicios de validez. 16. Saber elegir el test más adecuado en función de los indicios disponibles de su validez. 17. Desarrollar un punto de vista crítico en la interpretación de las puntuaciones obtenidas mediante tests. 18. Conocer las distintas estrategias disponibles para transformar e interpretar las puntuaciones de los tests. 19. Conocer las diversas estrat...