Evaluación del test 16-PF RESUMEN DE LA VALORACIÓN DEL TEST Descripción general Características Descripción Nombre del test 16PF-5 Autor Autor de la adaptación española Raymond B. Cattell, A. Karen S. Cattell y Heather E.P. Cattell Nicolás Seisdedos Cubero Editor de la adaptación española TEA Ediciones Fecha de la última revisión del test en su adaptación española Constructo evaluado 2011 Área de aplicación Psicología Clínica Psicología Educativa Psicología Forense Psicología del Trabajo y de las organizaciones Psicología del Deporte Papel y lápiz Informatizado Soporte Personalidad Aspectos generales Características Calidad de los Materiales y documentación Fundamentación teórica Adaptación Española Análisis de los ítems Validez de contenido Validez de constructo Análisis del sesgo Validez predictiva Fiabilidad: equivalencia Fiabilidad: consistencia interna Fiabilidad: estabilidad Baremos 2 Valoración Puntuación Excelente 4,5 Excelente Buena Buena Buena Buena No se aporta No se aporta No se aporta Buena No se aporta Excelente 4,5 4 4 4 4 4 4,5 Comentarios generales El 16PF-5 es uno de los cuestionarios de personalidad más utilizados desde diferentes ramas de la Psicología. Desde sus primeras versiones en la década de los años 40 del siglo XX, la construcción de este instrumento se ha basado en procedimientos empíricos, fundamentalmente el análisis factorial, convirtiéndose en un referente de la construcción psicométrica de instrumentos de evaluación. Tal y como señalan Aluja y Blanch (2003), esta quinta edición del 16PF presenta buenas propiedades psicométricas, donde ha mejorado sensiblemente su validez y fiabilidad respecto a versiones anteriores. Aluja, A. y Blanch, A. (2003). Replicabilidad de los factores de segundo orden del 16PF-5 en muestras americanas y españolas. Psicothema, 15(2), 309-314. Los 16 rasgos de primer orden dan una información rica y detallada de la personalidad del sujeto. Estos factores utilizan una terminología actual y son fácilmente entendibles a través de la descripción mediante adjetivos de las polaridades altas y bajas. Las dimensiones globales, por su parte, se asemejan a los factores resultantes del modelo de los “Big Five”, por lo que la comparación con otras pruebas y la comprensión de estas dimensiones de segundo orden se hace muy sencilla, incluso para profesionales con poca experiencia en el campo de la evaluación de la personalidad. Por último, las escalas sobre estilos de respuesta pueden servir como filtro para aquellas situaciones en las que la deseabilidad social o ciertas tendencias en las respuestas puedan estar sesgando los resultados en el test. Se recomienda interpretar el cuestionario empezando por los estilos de respuesta, siguiendo por las dimensiones globales para acabar con los 16 rasgos de primer orden. Este instrumento se ha utilizado en diversas situaciones de evaluación en las que obtener un perfil de personalidad del sujeto sea necesario. Las aplicaciones en el ámbito de Psicología Clínica van desde la detección de ciertos rasgos indicadores de trastornos psicológicos a través del perfil del sujeto hasta la evaluación de la eficacia del tratamiento mediante cambios en las respuestas pre y post intervención, pasando por la individualización de determinados componentes terapéuticos en función de las características de personalidad del paciente. El 16PF-5 permite interpretar ciertas combinaciones específicas de escalas que pueden resultar muy útiles en la práctica clínica (tendencia al suicidio, tendencias paranoides, sociopatía, etc.). En el ámbito de la Psicología del trabajo o selección de personal, el 16PF 3 tiene una larga historia de estudios destinados a descubrir los perfiles más adecuados para diferentes perfiles profesionales (pilotos, policías, docentes o vendedores), así como para el estudio de otros factores como el “potencial de liderazgo”. El 16PF-5 también resulta útil para la orientación escolar mediante el análisis de ciertos rasgos de personalidad relacionados con rasgos comportamentales o volitivos determinantes en la elección de futuro profesional. Por último, este instrumento puede resultar muy útil en la investigación de cualquier rama de la Psicología en la que la personalidad sea una variable implicada. Existen, no obstante, algunos puntos débiles que conviene reseñar:  Al eliminar la posibilidad de corrección manual del test, no es posible saber qué ítems forman parte de cada uno de los rasgos de primer orden ni cómo éstos se combinan para formar las cinco dimensiones globales de personalidad. La automatización de todo este proceso hace que se pierda información interesante para el evaluador al no conocer cuáles son los ítems concretos que conforman cada factor, impidiendo, en ocasiones, analizar o comprender los resultados de  forma más profunda que con el mero resultado electrónico. Si bien se ofrecen evidencias de validez relativas a la versión original del instrumento, es aconsejable ir incorporando en el manual información adicional acerca de las evidencias de validez de la versión española, a medida que éstas vayan estando disponibles.  En la adaptación de tests y cuestionarios son necesarios diseños adecuados de investigación que garanticen tanto la calidad de la traducción como la “comparabilidad métrica” de las mediciones obtenidas entre las diferentes versiones (Hambleton, Merenda y Spielberg, 2005; Muñiz y Hambleton, 1996, 2000). En la versión española del 16PF-5 no se ofrece información sobre el diseño de traducción empleado siendo necesario aportar evidencias del nivel de equivalencia lingüística alcanzado entre la versión original y la versión adaptada. Hambleton, R. K., Merenda, P.F., y Spielberger, C.D. (Eds.) (2005). Adapting Educational and Psychological Tests for Cross-Cultural Assessment. Mahwah, NJ, Lawrence Erlbaum Associates. Muñiz, J. y Hambleton, R.K. (1996). Directrices para la traducción y adaptación de los tests. Papeles del Psicólogo, 66, 63-70. 4 Muñiz, J. y Hambleton, R.K. (2000). Adaptación de los tests de unas culturas a otras. Metodología de las Ciencias del Comportamiento, 2, 129-149. ANÁLISIS DETALLADO DE LA PRUEBA 1. DESCRIPCIÓN GENERAL DEL TEST 1.1. Nombre del test 16PF-5 1.2. Nombre del test en su versión original 16PF Fifth edition 1.3. Autor Raymond B. Cattell, A. Karen S. Cattell y Heather E.P. Cattell 1.4. Autor de la adaptación española Nicolás Seisdedos Cubero 1.5. Editor del test en su versión original IPAT, Institute for Personality and Ability Testing, Champaign, Illinois 1.6. Editor de la adaptación española TEA Ediciones 1.7. Fecha de publicación del test original 1993 1.8. Fecha de la publicación del test en su adaptación española 1995 1.9. Fecha de la última revisión del test en su adaptación española 5 2011 1.10. Área general de la variable que pretende medir el test Personalidad 1.11. Breve descripción de la variable que pretende medir el test El Cuestionario Factorial de Personalidad, 16PF-5, es un instrumento de medida de espectro amplio de personalidad para adolescentes mayores de 16 años y adultos que tiene como finalidad la apreciación de dieciséis rasgos de primer orden (o escalas primarias de personalidad) y cinco dimensiones globales de personalidad (antes factores de segundo orden). Las dimensiones globales resumen la interrelación entre los rasgos primarios y permiten una perspectiva de la personalidad más amplia que encaja bien con el modelo de los “Big Five”. Los dieciséis rasgos primarios que evalúa son: Afabilidad (A), Razonamiento (B), Estabilidad (C), Dominancia (E), Animación (F), Atención a las normas (G), Atrevimiento (H), Sensibilidad, (I), Vigilancia (L), Abstracción (M), Privacidad (N), Aprensión (O), Apertura al cambio (Q1), Autosuficiencia (Q2), Perfeccionismo (Q3) y Tensión (Q4). Las cinco dimensiones globales de personalidad son: Extraversión (Ext), Ansiedad (Ans), Dureza (Dur), Independencia (Ind) y Auto-control (AuC). La comprensión de los constructos se facilita mediante una descripción a través de adjetivos de los polos o decatipos altos (+) o bajos (-). Incluye además tres medidas para evaluar estilos de respuesta para controlar los sesgos en las respuestas: Manipulación de la imagen (MI), Infrecuencia (IN) y Aquiescencia (AQ). El instrumento consta de 185 ítems con tres alternativas de respuesta (dos extremos y una alternativa intermedia señalada siempre con un interrogante”?”) con las que se obtienen las puntuaciones de las 16 escalas primarias, los tres índices de estilos de respuesta y las dimensiones globales. La aplicación puede ser individual o colectiva con una duración de entre 40 y 45 minutos. 6 RASGOS DESCRIPCIÓN PRIMARIOS Afabilidad Se refiere a la tendencia que va desde ser una persona social e interpersonalmente reservada hasta estar cálidamente implicada. Capacidad del individuo para resolver problemas. Esta escala no es un Razonamiento rasgo de personalidad, sin embargo se conoce que el estilo cognitivo es una variable moduladora de las variables de personalidad. Estabilidad Dominancia Animación Atención a las normas Se refiere al estilo de afrontamiento de los problemas cotidianos de la vida y sus retos Se refiere a la tendencia a ejercer la voluntad de uno mismo sobre la de los demás Evalúa el grado de espontaneidad y sociabilidad del individuo frente a la seriedad y la inhibición de la espontaneidad. La escala pretende medir el grado en que las normas culturales de lo correcto/incorrecto se han interiorizado y se emplean para gobernar la conducta humana (Cattell, 1970). Evalúa el grado de atrevimiento, seguridad en las relaciones sociales y Atrevimiento carácter emprendedor del individuo frente a la timidez y retraimiento social. Sensibilidad Vigilancia Abstracción Evalúa el grado de empatía, sentimentalismo y gusto por lo estético Evalúa el grado de suspicacia, escepticismo, desconfianza frente al polo contrario. Evalúa si el individuo está más orientado a los procesos mentales e ideas que a los aspectos pragmáticos y realistas. En esta escala se pretende medir la tendencia a la naturalidad y Privacidad apertura del individuo frente a la tendencia a la privacidad de las emociones. Los ítems de la escala pretenden medir el grado de seguridad y Aprensión despreocupación del individuo frente a la inseguridad, preocupación y aprensión. Apertura al cambio Autosuficiencia Los ítems de esta escala pretenden diferenciar a individuos tradicionales y apegados a lo familiar frente a aquellos de mentalidad abierta y analítica, innovadores Se refiere al mantenimiento del contacto o proximidad de los otros 7 frente al individualismo. Perfeccionismo Tensión En esta escala se pretende medir la flexibilidad y tolerancia con el desorden y las faltas frente a la organización y la disciplina. Esta escala está asociada con la tensión nerviosa, impaciencia e intranquilidad. 1.12. Áreas de aplicación  Todas aquellas áreas en la que se precise Personalidad 1.13. Formato de los ítems  Tres opciones de respuesta 1.14. Número de ítems  185 Rasgos primarios Nº ítems Afabilidad 11 ítems Razonamiento 15 ítems Estabilidad 10 ítems Dominancia 10 ítems Animación 11 ítems Atención a las normas 11 ítems Atrevimiento 10 ítems Sensibilidad 11 ítems Vigilancia 10 ítems Abstracción 11 ítems Privacidad 10 ítems Aprensión 10 ítems Apertura al cambio 14 ítems Autosuficiencia 10 ítems Perfeccionismo 10 ítems Tensión 10 ítems 1.15. Soporte  Papel y lápiz 8  Informatizado 1.16. Cualificación requerida para el uso del test de acuerdo con la documentación aportada  Nivel B 1.17. Descripción de las poblaciones a las que el test es aplicable Población a partir de 16 años con baremos conjuntos y separados para hombres y mujeres. Se requiere una capacidad lectora de nivel de enseñanza primaria o nivel de 2º de la ESO, información que no queda clara en el Manual. 1.18. Existencia o no de diferentes formas del test y sus características El 16 PF-5 está disponible en dos formatos de aplicación: a) tradicional (papel y lápiz), para el cual el profesional realiza la corrección de manera automática mediante TEAcorrige, y b) aplicación on-line o por Internet, en la cual los ítems se presentan directamente en pantalla a la persona evaluada y la corrección también se realiza de manera automática. 1.19. Procedimiento de corrección   El usuario realiza la corrección de manera automática por medio de una plataforma de corrección por Internet accesible a los profesionales Los profesionales que realicen evaluaciones colectivas pueden solicitar el servicio de corrección mecanizada, que evita el tener que realizar la introducción de las respuestas de forma manual 1.20. Procedimiento de obtención de las puntuaciones directas La versión actual del 16PF-5 no permite la corrección manual para la obtención de las puntuaciones directas. Las respuestas del sujeto se introducen en la aplicación e-perfil de TEA Ediciones, obteniendo así las puntuaciones directas, decatipos y perfil. La aplicación para la corrección del test es sencilla: se dispone de una plantilla mecanizada donde cada casilla se refiere a una de las preguntas del test y el usuario debe introducir la respuesta que el sujeto ha dado (1 si la respuesta ha sido a la opción A, 2 si la respuesta ha sido a la opción B y 3 si la respuesta ha sido a la opción C, por último se introduce un 0 cuando el sujeto ha dejado el ítem en blanco). Una vez 9 introducidas las respuestas la corrección se realiza de forma automática por el sistema. 1.21. Transformación de las puntuaciones  Normalizada 1.22. Escalas utilizadas  Decatipos 1.23. Posibilidad de obtener informes automatizados  Sí El informe automatizado recoge tanto la información cuantitativa del cuestionario (decatipos tanto en los rasgos de primer orden como en las dimensiones globales de personalidad y estilos de respuesta) como la interpretación cualitativa de dichas puntuaciones. La estructura es clara, con una breve descripción de qué constructo mide cada uno de los rasgos, dimensiones y estilos, así como un análisis de las puntuaciones del sujeto basado en los descriptores mediante adjetivos de las polaridades altas y bajas en las distintas escalas. Teniendo en cuenta que se trata de un informe automático, la claridad, el estilo y tono son adecuados. No obstante, deberá complementarse con la experiencia del profesional y con otras guías de interpretación del 16PF-5 como la de Karson, Karson y O’Dell (2002)1, que proporciona la empresa suministradora con el juego completo de materiales del 16PF-5. 1 Karson, M., Karson, S., & O’Dell, J. (2002). 16PF-5. Una guía para su interpretación en la práctica clínica. Madrid: TEA ediciones. 1.24. Oferta por parte del editor de un servicio para la corrección y/o elaboración de informes  Sí 1.25. Tiempo estimado para la aplicación del test   En aplicación individual: 40-45 minutos En aplicación colectiva: 40-45 minutos 1.26. Documentación aportada por el editor 10   Manual Libros o artículos complementarios 1.27. Precio de un juego completo de la prueba 1.28. Precio y número de ejemplares del paquete de cuadernillos 1.29. Precio y número de ejemplares del paquete de hojas de respuesta 1.30. Precio de la corrección y/o elaboración de informes por parte del editor Para obtener los precios actualizados consultar la página web de la compañía editora: http://web.teaediciones.com 1.31. Bibliografía básica acerca del test aportada en la documentación  Se incluyen alrededor de 75 referencias relacionadas con distintos aspectos de la prueba 11 2. VALORACIÓN DE LAS CARACTERÍSTICAS DEL TEST Aspectos generales Contenido Valoración Puntuación 2.1. Calidad de los materiales del test Excelente 5 Buena 4 2.2. Calidad de la documentación aportada 2.3. Fundamentación teórica Excelente 4,5 2.4. Adaptación del test Buena 4 Excelente 5 Excelente 5 Buena 4 Buena 4 Buena 4 2.5. Calidad de las instrucciones 2.6. Facilidad para comprender la tarea 2.7. Facilidad para registrar las respuestas 2.8. Calidad de los ítems (aspectos formales) 2.9. Datos sobre el análisis de los ítems 12 Validez de contenido Contenido 2.10. 2.11. Calidad de la representación del contenido o dominio Consultas a expertos Valoración Puntuación Buena 4 No se aporta Comentarios sobre la validez de contenido  A pesar de que los datos sobre validez de contenido son escasos en el manual, dado que se trata de uno de los test con una trayectoria de más de cuatro décadas y basado en una de las teorías de la personalidad con mayor aceptación, se puede considerar que la fundamentación y justificación teórica es más que suficiente. Por lo tanto sería aconsejable que en futuras ediciones del manual se documenten las evidencias de validez de contenido 13 Validez de constructo Contenido Valoración  Análisis Factorial Exploratorio y Confirmatorio  Diferencias entre grupos 2.12. Diseños empleados 2.13. Tamaño de las muestras 2.14. Procedimiento de selección de las muestras Correlaciones del test con otros test similares 2.15. 2.16. 2.17.  Puntuación Calidad de los test empleados como criterio o marcador Datos sobre el sesgo de los ítems Excelente  Incidental 4,5 No se aporta No se aporta No se aporta Procedimiento de selección de las muestras: Para la edición experimental, se trabajó con una muestra extraída al azar del banco de datos españoles del 16PF-A, una versión anterior del 16PF-5 de 600 sujetos, en los que se seleccionaron 15 elementos más a los 185 originales. Esta versión se aplicó a una muestra pequeña con el objetivo de depurar el borrador. La muestra actual de tipificación está formada por 115.712 personas evaluadas en numerosos procesos y situaciones entre los años 2006 y 2010. El 54,4% de la muestra está formada por varones. Las edades de la muestra oscilan entre los 16 y los 69 años, con una media de 31,21 años y una desviación típica de 8,85.  En el manual se incluye información sobre otras evidencias de validez de constructo obtenidas en otras poblaciones. En concreto los resultados de las investigaciones realizadas por Conn y Rieke (1994) con población norteamericana y los resultados de la adaptación argentina obtenidos por Petkevicius. En cuanto a los resultados de Conn y Rieke (1994) se encontraron correlaciones moderadas y en el sentido esperado, entre las dimensiones primarias y globales del 16PF-5 con las escalas de diferentes tests de personalidad (Personality Research Form (PRF), Inventario Psicológico de California (CPI), NEO-PIR y el MBTI). Si bien estos datos 14 constituyen evidencias de la validez de constructo del test, es conveniente ir ampliando esta información, incorporando datos obtenidos a partir de la versión española de la prueba. 15 Validez predictiva Contenido Contenido Puntuación 2.18. Diseño de selección del criterio 2.19. Tamaño de las muestras 2.20. Procedimiento de selección de las muestras No se aporta Correlaciones del test con los criterios No se aporta 2.21. No se aporta No se aporta Comentarios sobre la validez predictiva  Los datos que se presentan acerca de la validez predictiva son numerosos y basados en diversos estudios publicados en revistas científicas de calidad. Los estudios que se presentan han sido realizados con la versión original del cuestionario, por lo que sería aconsejable ir complementando estos datos con los que se vayan obteniendo mediante la versión española de la prueba. Se han relacionado las puntuaciones obtenidas en el 16PF-5 con las siguientes variables: autoestima, ajuste, habilidad social, empatía, potencial creativo, y potencial de liderazgo. A pesar de los buenos resultados, se insiste en que al tratarse de un test de personalidad de amplio espectro, el valor predictivo es limitado y no debería ser la única base para tomar decisiones de selección o evaluación. Los procedimientos de selección de las muestras en estos estudios son diversos. No obstante, prevalece la selección incidental con muestras amplias de militares, estudiantes, jubilados o en situaciones de orientación o selección de personal. Comentarios sobre validez en general  Sería recomendable que en futuras ediciones del manual se incluyeran evidencias de validez en la versión española de la prueba 16 Fiabilidad Contenido 2.22. Valoración  Datos aportados sobre fiabilidad Puntuación Un único coeficiente de fiabilidad Equivalencia formas paralelas Contenido Valoración 2.23. Tamaño de las muestras No se aporta 2.24. Coeficientes de equivalencia No se aporta Puntuación Consistencia interna Contenido 2.25. Tamaño de las muestras 2.26. Coeficientes de consistencia Valoración Puntuación Buena 4 Adecuada 3 Estabilidad (test-retest) Contenido Valoración 2.27. Tamaño de las muestras No se aporta 2.28. Coeficientes de estabilidad No se aporta Puntuación Comentarios generales sobre fiabilidad  Los datos presentados sobre fiabilidad hacen referencia a estudios tanto con la versión original, en inglés, como con la versión española. Los estudios originales (dos sobre estabilidad y uno sobre consistencia interna) contaron con muestras grandes y con índices entre adecuados y buenos. En los estudios de fiabilidad españoles se proporcionan tres indicadores de fiabilidad calculados con una muestra grande: la correlación entre la mitad par e impar, el coeficiente alfa, y el índice de homogeneidad de las puntuaciones. La consistencia interna resultó adecuada (0,76). Sería conveniente complementar esta información con datos sobre la estabilidad temporal de la versión española del instrumento. 17 Baremación Contenido  2.29. Calidad de las normas 2.30. Tamaño de las muestras 2.31. Procedimiento de selección de las muestras Valoración Puntuación Buena 4 Excelente 5  Incidental Procedimiento de selección de las muestras: Incidental. La muestra actual de tipificación está formada por 115.712 personas evaluadas en numerosos procesos y situaciones entre los años 2006 y 2010. El 54,4% de la muestra está formada por varones. Las edades de la muestra oscilan entre los 16 y los 69 años, con una media de 31,21 años y una desviación típica de 8,85. Comentarios generales sobre baremación  La muestra de tipificación es muy amplia y representativa, cubriendo de forma satisfactoria ambos sexos y los rangos de edad a los que se dirige el instrumento. Sería aconsejable incluir más información acerca de los datos sociodemográficos de esta muestra. 18