TEMA 6. Técnicas Psicométricas PDF

Preview

Summary

Download TEMA 6. Técnicas Psicométricas PDF

Description

TEMA 6: TÉCNICAS PSICOMÉTRICAS

TEMA 6: TÉCNICAS PSICOMÉTRICAS 1. INTRODUCCIÓN: DEFINICIÓN DE TEST PSICOMÉTRICO Los tests psicométricos son instrumentos de evaluación que utilizan el concepto de medición y tienen su fundamento en la Psicometría. Se utilizan para medir los atributos o las características del ser humano. La utilización de estas técnicas en el ámbito concreto de la evaluación de la personalidad encuentra su fundamento teórico en el modelo de los rasgos. Así pues, los test creados desde esta perspectiva pretenden evaluar distintas categorías de rasgos cuna interrelación determina la estructura de la personalidad. Según la SEPT (Standards for Educational and Psychological Testing de la APA) “Un test es un instrumento evaluativo o procedimiento en el que se obtiene una muestra de la conducta de los examinados en un dominio específico y posteriormente es evaluada y puntuada usando un procedimiento estandarizado”. En general, los test constituyen medidas de muestras de conductas objetivas y tipificadas que permiten: a) establecer descripciones y comparaciones de unas personas con otras, o de una misma persona en diferentes momentos de su vida; y/o b) establecer el nivel que posee el sujeto en una conducta observada. Hay diferentes términos para referirnos a un test, entre otros, escala, cuestionario, inventario o batería. Para que un instrumento de evaluación sea considerado un test psicométrico ha de tener las siguientes características: a) constituir una técnica estructurada, en función del estímulo y del grado de restricción de la respuesta elicitada; b) ser objetivo y encontrarse estandarizado, en cuanto que propone un procedimiento de aplicación, materiales y sistemas constantes independientes del evaluado y evaluador y; c) estar tipificado, es decir, permite la comparación de un sujeto con el grupo normativo a partir del cual se ha construido la medida. Para ello, los test psicométricos deben cumplir los siguientes requisitos: 1. La prueba debe haber seguido de forma rigurosa un proceso de construcción previamente establecido. 2. El contenido y la dificultad de los ítems han de estar sistemáticamente controlados. 3. La situación de aplicación del test, esto es, el ambiente en cual se aplica la prueba, el material del test y el procedimiento de administración han de estar perfectamente definidos y deben ser reproducidos idénticamente para todos los sujetos examinados por el test. 4. El registro de las conductas o respuestas provocadas por el sujeto examinado debe ser tan objetivo y preciso como resulte posible. Las condiciones de cómo hacer ese registro han de estar bien definidas y deben ser cumplidas rigurosamente. 5. El comportamiento observado, conducta o respuesta deben ser evaluado estadísticamente respecto al de un grupo de individuos llamado grupo de referencia o grupo normativo o en relación con unos criterios de rendimiento. 6. Los sujetos examinados son clasificados en función de normas resultantes del examen previo del grupo de referencia o normativo (baremos, lo que permite situar cada una de las respuestas, totales o parciales, en una distribución estadística. 1

TEMA 6: TÉCNICAS PSICOMÉTRICAS 7. Las respuestas a las cuestiones planteadas ofrecen una medida correcta del comportamiento que es evaluador para el test (validez adecuada). 8. Si las condiciones no cambian, la repetición del examen debe conducir siempre al mismo resultado, o a otro muy próximo (fiabilidad adecuada). Para que un instrumento de evaluación cumpla la función para la que ha sido originado debe haber sido construido de una manera rigurosa. El uso de las técnicas psicométricas ofrece importantes ventajas: hacen posible evaluar a un gran número de sujeto al mismo tiempo y permiten su comparación; posibilitan la contrastación empírica de un diagnóstico clínico en contextos clínicos; y facilitan la elaboración de perfiles aptitudinales y de personalidad para ayudar las tareas de orientación.

2. CLASIFICACIÓN DE LOS TEST Según Martínez-Arias, Hernández-Lloreda y Hernández-Lloreda (2006) los test se pueden clasificar en función de los siguientes aspectos: 

Consecuencias para el sujeto

Se pueden diferenciar los test situándolos a lo largo de un continuo, desde los test de altas consecuencias hasta los test de bajas consecuencias. 

Planteamiento del problema y tipo de respuesta

Los test se construyen a partir de una muestra de conductas que requiere por parte del sujeto una determinada forma de planteamiento y resolución del problema. Se puede hablar de test de respuesta cerrada y test de respuesta abierta o libre. 

Área de comportamiento acotada

Se establecen distinciones frecuentes entre test cognitivos y no cognitivos. A veces, son conocidos como test de ejecución o rendimiento máximo frente a test de ejecución típica. 

Modalidad de aplicación

Pueden utilizarse diferentes etiquetas para los test, tales como individual/colectivo/autoinformado, papel y lápiz/ordenador, adaptativo/no adaptativo, instrucciones orales/instrucciones escritas, corrección manual/corrección informatizada¸ etc. 

Demandas temporales

Permite clasificar los test en un continuo que va desde rapidez o velocidad (speedy test) a potencia (power test). 

Grado de aculturación/cultura o demandas específicas

De una cultura o grupo requeridas en la resolución del test. También permite situar a los tests a lo largo de un continuo. 

Modelo estadístico

En el que se basan las puntuaciones del test. Los modelos se clasifican en dos grandes grupos: a) Teoría Clásica de los Test (TCT) y sus extensiones como la Teoría de la Generalizabilidad o los Tests Referidos a Criterio, basados en el modelo lineal general y en las puntuaciones totales de los tests. 2

TEMA 6: TÉCNICAS PSICOMÉTRICAS b) Teoría de Repuesta al Ítem (TRI), que modeliza las probabilidades de respuesta a un ítem para diferentes niveles del rasgo latente mediante un modelo no lineal.  Tipo de interpretación de las puntuaciones Se establece una distinción entre los Tests Referidos a la Norma y los Tests Referidos al Criterio: a) Tests Referidos a la Norma (TRN). Evalúan la actuación de un sujeto concreto comparándola con la de otro grupo bien definido en el mismo test. Su resultado explica la mayor o menor semejanza de la actuación de cada individuo con la actuación del grupo normativo. Estos tests proporcionan dos tipos de puntuaciones: la puntuación directa y la puntuación baremada. La puntuación directa indica el número de ítems que el sujeto ha contestado correctamente, y la puntuación baremada permite la comparación entre un sujeto determinado y otros sujetos. b) Tests Referidos al Criterio (TRC). Miden la puntuación de un sujeto en relación con un determinado nivel o criterio de actuación definido de antemano. Los tests referidos a criterio son mucho más específicos que los referidos a la norma. El test referido a un criterio indica un nivel de dominio de competencias muy específico, mientras el referido a la norma indica una categoría de comprensión más general. Además, hay otras clasificaciones como: a) en función del tipo de material de la prueba: a) lápiz y papel, verbal únicamente, de ejecución manual o visomotor, de aparatos especiales o combinación de las anteriores; y b) en función de las edades límites de aplicación: pruebas para bebés, para niños de infantil, para niños escolares, para adultos o específicos para tercera edad.

3. DIFERENTES USOS DE LOS TESTS PSICOLÓGICOS Una vez obtenidas las puntuaciones de un test se pueden tomar diferentes decisiones: 

Determinar el nivel de instrucción o habilidad

El objetivo es establecer si los sujetos poseen dominio de ciertos conocimientos o destrezas predeterminadas de antemano. Conllevan decisiones propias de los test referidos a criterio. 

Diagnóstico

Tienen como objetivo la identificación de fallos o deficiencias en el comportamiento para llevar a cabo algún tipo de intervención o tratamiento. Aunque las puntuaciones obtenidas suelen compararse con datos normativos, las decisiones diagnósticas también son propias de los test referidos a criterio. 

Selección

El objetivo es la selección de los sujetos más capaces en algún sentido o materia. Las puntuaciones de los sujetos en el test se usan para admitir o excluir, emplear o rechazar. 

Asignación

El objetivo es determinar en qué lugar debe colocarse un sujeto dentro de una categoría. La jerarquía puede ser de carácter profesional, de carácter formativo, etc. 

Clasificación

El objetivo es asignar a los sujetos a categorías por tipo, no por nivel.  3

Orientación o consejo

TEMA 6: TÉCNICAS PSICOMÉTRICAS El objetivo es orientar al sujeto con respecto a algún aspecto de su comportamiento futuro, abarcando una gran cantidad de decisiones que el sujeto toma con ayuda de un profesional. 

“Sreening” o cribado

Tiene como finalidad la detección rápida de algún tipo de trastorno, deficiencia o anomalía. Se utilizan como criba antes de la aplicación de pruebas más exhaustivas. Hay otras clasificaciones como que el uso de los test puede agruparse en tres grandes categorías: a) la primera categoría incluye el proceso pragmático de toma de decisiones sobre personas tanto consideradas individualmente como en grupo; b) la segunda recoge los test dedicados a la investigación científica sobre los fenómenos científicos y diferencias individuales y; c) la tercera se refiere al uso relacionado con el proceso terapéutico de favorecer la autocomprensión y el ajuste psicológico, más reciente y menos desarrollado.

4. FASES EN LA ELABORACIÓN DE UN TEST La construcción de un test psicométrico constituye un proceso complejo; no obstante, para conseguir un instrumento que contenga unas garantías de calidad apropiadas hay que seguir una serie de pasos establecidos previamente. No existe unanimidad sobre el número concreto de fases. En los últimos estándares de la AERA, APA y NCME se ha definido un procedimiento a seguir para la construcción y valoración de un test constituido por ochos pasos. Justificación teórica y definición El desarrollo de un test comienza con una justificación detallada y precisa de cuáles son las causas que motivan su construcción, cuál es el objetivo del test y el constructo o dominio que se quiere medir. Se trata de determinar: a) Qué se quiere medir o variable objeto de estudio. El problema surge cuando se quiere medir una variable no observable de forma directa o “constructo”. No obstante, los constructos se manifiestan a través de una serie de conductas observables de forma directa y susceptibles de medición. b) A quién se quiere medir o población a la que va dirigida la prueba y/o contexto de aplicación. Se trata de delimitar las características de la población a la que se dirige. c) Para qué se quiere medir, o uso/utilidad que se le quiere dar al test. Concretamente, se trata de establecer parra qué se va a utilizar. Definición operativa de la variable constructo que se quiere medir El constructo evaluado debe definirse en términos operativos para que pueda ser medido de forma empírica. Para ello, se debe realizar una revisión exhaustiva de la literatura a partir de la cual se delimita la variable objeto de medición, así como todas las dimensiones relevantes de la misma. También se han de identificar los comportamientos más representativos de la variable de medición, así como la relación con otros constructos o variables relevantes y, la identificación de los comportamientos indicadores del constructo a través de diferentes estrategias. Requerimientos para la aplicación del instrumento de medida El desarrollo de un test estará condicionado por las restricciones de su aplicación. Pueden destacarse el tiempo de aplicación, la modalidad de aplicación, el soporte de administración y

4

TEMA 6: TÉCNICAS PSICOMÉTRICAS cuándo y en qué lugar se va a administrar el instrumento de medida. Igualmente se deben especificar los requerimientos cognitivos, de vocabulario y de accesibilidad de los participantes. En relación con los ítems, se ha de indicar el tipo, número, la longitud, el contenido y el orden, así como el formato de respuesta o el tipo de alternativas que se van a utilizar. Construcción y evaluación cualitativa de los ítems El objetivo de esta fase es conseguir una muestra de ítems relevantes para cada uno de los componentes del constructo. Los principios básicos que deben regir la construcción de cualquier banco de ítems son: representatividad, relevancia, diversidad, claridad, sencillez y comprensibilidad. También es importane sleccionar el tipo de formato de respuesta dependiendo de nuestro objetivo e interés. De forma práctica, han de cuidarse los siguientes aspectos: a) claridad de los enunciados; b) evitar la redundancia; y c) considerar la conveniencia de la presencia de ítems positivos y negativos. En muchas ocasiones, la construcción de ítems se realiza mediante la traducción de los ítems de una prueba en otro idioma. Pueden adoptarse dos estrategias de las que el adaptador debe dar completa información: a) hacia adelante o traducción directa, donde un grupo de traductores traduce los ítems de la escala original al nuevo idioma, para que otro grupo de traductores juzgue su equivalencia; o b) hacia atrás o traducción inversa, donde un grupo de traductores traduce los ítems al idioma requerido, y otro grupo de traductores lo vuelve a traducir a la lengua original, comparándose esta nueva versión con la original. Estudio piloto cualitativo y cuantitativo El objetivo en esta fase es observar el funcionamiento del instrumento de medida en una población con características similares a la población objetivo de interés. En el estudio piloto se llevarán a cabo dos tipos de análisis: a) Cualitativo. Se trata de aplicar los ítems a una pequeña muestra de sujetos con el fin de detectar: los ítems más problemáticos, las dificultades para comprender las instrucciones, los errores en el formato del instrumento o los errores de tipo semántico o comprensión de las instrucciones. b) Cuantitativo. Una vez administrados lo ítems a la muestra de estudio piloto, se examinan las propiedades métricas de los mismo para ver su funcionamiento y, a partir de aquí se seleccionan aquellos que mejor se adapten al objetivo del test. Los cálculos estadísticos que se llevan a cabo son aquellos que peritan determinar qué ítems son capaces de detectar las diferencias existentes entre los sujetos. Selección de otros instrumentos de medida convergentes Se trata de seleccionar otros instrumentos de medida que evalúen constructos relacionados, con el objetivo de recoger evidencias a favor de la validez de las puntuaciones de los participantes. Algunas recomendaciones son: a) que se encuentren validados para la población objeto de interés y se conozcan sus propiedades métricas; b) que sean sencillos y de rápida administración; y c) que tengan “coherencia sustantiva” de cara a establecer relaciones entre las variables. Estudio de campo y estimación de las propiedades médicas del instrumento

5

TEMA 6: TÉCNICAS PSICOMÉTRICAS En esta fase se incluye la selección de una muestra representativa de la población que recibe el nombre de grupo normativo y que servirá de grupo de referencia para interpretar las puntuaciones de los sujetos. Elegir una muestra adecuada en cuanto a representatividad y tamaño es fundamental. El muestreo probabilístico siempre es preferible al no probabilístico. Es recomendable que por cada ítem administrado tengamos al menos 5 ó 10 personas, si bien determinadas técnicas pueden requerir incluso más. En el caso de los test referidos al criterio, la importancia de la muestra es relativa. La muestra servirá para la calibración del test o estimación de las propiedades de los ítems. Una vez aplicado el test a los sujetos, se estimarán los datos estadísticos del test. A partir de los datos se obtendrá las escalas de puntuación en las que están basadas las normas. En los res referidos a las normas, se obtendrá las normas o baremos, y en el caso de los test referidos al criterio, se determinará los puntos de corte que establecen los distintos niveles. Los análisis estadísticos que se lleven a cabo en cada caso van a depender de una serie de factores: tipo de test que construyamos tipo del modelo sobre el que construyamos el test, o elección del analizador en función de las diferentes alternativas existentes. Construcción del manual del test y sus revisiones El manual debe recoger de manera exhaustiva todas las características relevantes de la prueba y es imprescindible cuanto el test ha sido construido para su comercialización. El manual debe incluir los siguientes aspectos: a) Exposición de los objetivos de la prueba y fundamentación teórica del constructo. Generalmente empieza con un resumen mostrado en la ficha técnica. b) Descripción de las características estructurales del test (sus partes y componentes). c) Usos a los que puede destinarse el test. d) Población o poblaciones a las que va dirigido. e) Descripción del material e instrucciones detalladas para la aplicación del test y/o cada uno de los subtest que lo componen. f) Información acerca del proceso de baremación o estandarización. g) Normas de interpretación de las puntuaciones e instrucciones para las valoraciones de las respuestas obtenidas en el test y/o en los subtest. h) Información estadística y psicométrica acerca de las propiedades de la prueba como instrumento de medida. i) Tabla de normas o baremos con las puntuaciones directas y transformadas para los diferentes grupos de edades y poblaciones. El test debe ser revisado de cara al surgimiento de nuevos hallazgos científicos cobre el constructo que estamos estudiando, asimismo las normas de interpretación, en el caso de los test normativos y/o baremos deben ir siendo actualizadas de manera periódica.

5. ALGUNOS CRITERIOS PARA LA VALORACIÓN DE UN TEST Según las recomendaciones de los Estándares para los Test Educativos y Psicológicos (SEPT) debemos plantearnos las siguientes cuestiones: -

6

¿Está bien definido el marco teórico y las especificaciones del constructo o dominio? ¿Refleja el manual la bibliografía utilizada en relación al atributo que mide el test? ¿Existen instrucciones estandarizadas y adecuadas a la población a la que va dirigido e incluye ejemplos?

TEMA 6: TÉCNICAS PSICOMÉTRICAS -

Si el test contiene elementos o ítems de distinta dificultad, ¿están ordenados por dificultad creciente? ¿Se especifican los procedimientos usados en el muestreo de ítems? ¿Contiene instrucciones adecuadas para el tratamiento de la adivinación o el azar? ¿Tiene una acogida favorable entre los sujetos a los que va dirigido? ¿Incluye el manual suficiente información sobre las propiedades estadísticas del instrumento? ¿Está especificado el tiempo límite de aplicación de la prueba? ¿Es sencilla y fiable la forma de corrección y puntuación? ¿Es suficientemente clara la hoja de respuestas? ¿Especifica el tipo de muestreo para la selección de la muestra en su tipificación?

6. DEINFICIÓN Y CLASIFICACIÓN DE LOS ÍTEMS Los ítems o reactivos son los elementos básicos que constituyen un instrumento de evaluación específico, y tiene como objetivo provocar o identificar la manifestación de algún comportamiento o respuesta. Los ítems difieren en contenido y en formato, en el soporte en el que se aplican, en la forma e corregirlos y obtener las puntuaciones, y en el tipo de procesamiento que se le exige al individuo. Desde el tipo de respuesta que se le exige al individuo se pueden agrupar en dos grandes categorías: a) Ítems de respuesta cerrada, en los que tras el enunciado del ítem aparecen una serie de respuestas entre las que el sujeto debe seleccionar la/s más adecuada/s; y b) Ítems de respuesta abierta, en las que el individuo elabora su propia respuesta. A su vez, estas grandes categorías incluyen diferentes tipos de formato y pueden contener uno u otro tipo de formato en función de la finalidad del mismo.