Serie Cuadernos Metodológicos

El uso de pruebas estandarizadas de alto impacto implica un proceso de construcción y validación guiado científicamente, utilizando los más altos estándares de calidad para garantizar la confiabilidad y validez de las inferencias que se realicen a partir de sus puntuaciones. Debido a que se trata de exámenes de grandes consecuencias para la vida y el desarrollo de las personas, las pruebas deben ser construidas, adaptadas y aplicadas utilizando la tradición científica en psicometría y medición educativa, que brinda un cuerpo de teorías y métodos para construir y validar este tipo de instrumentos y permite recolectar información empírica y evidencia sólida acerca de la confiabilidad y validez de los mismos. En este contexto de la evaluación de alto impacto, el presente documento tiene como propósito orientar la labor y los planes de mejoramiento de las instituciones y organizaciones comprometidas con la validez, equidad y ética en la aplicación de pruebas estandarizadas de alto impacto en contextos académicos y profesionales.

El presente documento ofrece una guía sintetizada para la elaboración de pruebas estandarizadas en el ámbito educativo. Su objetivo primordial consiste en ofrecer a investigadores, docentes y estudiantes algunas estrategias para desarrollar pruebas educativas estandarizadas de acuerdo con los estándares actuales en materia de medición y psicometría. Además, se brindan diversas referencias bibliográficas para quienes deseen profundizar en los tópicos esbozados.

Este cuaderno se divide en tres apartados. En el primero se exponen algunos conceptos fundamentales sobre  los temas de validez y confiabilidad. En el segundo, se brindan algunas recomendaciones sobre como construir pruebas estandarizadas en el ámbito educativo, incluidas algunas recomendaciones para la provisión de adecuaciones para aplicación de las mismas. En el tercer apartado se ofrecen algunos comentarios finales que sintetizan los principales aportes realizados con este trabajo.

La investigación sobre la cognición humana está en pleno crecimiento en la Universidad de Costa Rica. En particular representa una de las líneas en desarrollo del proyecto científico del IIP. Esto genera la necesidad de contar con y emplear métodos adaptados a este tema de investigación. El presente cuaderno metodológico es el resultado del proyecto 723-B1-340 de IIP inscrito en la Vicerrectoría de Investigación de la UCR y coordinado por el M.Sc. Thomas Castelain. Contiene tres grandes apartados: un apartado de introducción, otro de consideraciones para el uso de los materiales y, finalmente, las fichas de cada uno de los protocolos. Los temas abordados en el cuaderno son: atención, velocidad de procesamiento, memoria de trabajo, control inhibitorio, asociaciones implícitas y estrés psicosocial.

Los instrumentos de medición representan una herramienta fundamental para recopilar observaciones numéricas, ya sea mediante el autoreporte o la ejecución de actividades específicas por parte de las personas; o bien mediante el registro de terceros, encuestadores, jueces, evaluadores, observadores. El presente cuaderno metodológico es una compilación de 51 instrumentos de medición (escalas, inventarios, índices y pruebas) que han sido adaptados a nuestro contexto o han sido construidos por los y las investigadoras del IIP para medir diferentes constructos de gran relevancia para nuestra labor en psicología.

Mucha de la investigación que hacemos en las Ciencias Sociales, se construye a partir de información obtenida a través de métodos de auto reporte, y una de las principales formas de hacerlo es mediante cuestionarios de papel y lápiz. No obstante, hasta los más experimentados investigadores e investigadoras se han tenido que enfrentar con el hecho de que sus ítems no fueron comprendidos tal y como ellos y ellas esperaban. El objetivo del presente cuaderno metodológico, es ofrecer una herramienta para analizar los mecanismos cognitivos involucrados en el proceso de contestar las preguntas de un cuestionario y así detectar problemas en los distintos momentos de este proceso, antes de pasar a estimar las propiedades psicométricas del instrumento en el estudio piloto. Esta herramienta se conoce como Entrevista Cognitiva.

Este Cuaderno Metodológico pretende reflexionar sobre la utilidad del método de comparación constante para la psicología como conjunto de procedimientos analíticos que buscan mantener una consistencia lógica con el fin de generar teoría, principalmente a partir de estrategias inductivas, describir y ejemplificar sus principales procesos técnicos: parafraseo; codificaciones abierta, axial y selectiva; redacción de memoranda y muestreo teórico. Además, desde un punto de vista metodológico, se buscará aportar y desarrollar el modo en el cual se ha entendido y aplicado el método a partir de experiencias de investigación recientes. Luego se procederá a ejemplificar los principales procedimientos a partir de dos ejemplos que utilizan material producto de protocolos de observaciones y entrevistas. Finalmente, se expondrá una reflexión sobre los criterios de validez que propone el método y se sugieren lineamientos para la presentación de trabajos de investigación.

Este es un manual de entrevista de apego hacia los pares que tiene como objetivo ofrecer un instrumento alternativo para la exploración de las relaciones afectivas en el trabajo con población adolescente, ya sea en el campo de la investigación, como de la intervención clínica psicológica. Está dirigido a los adolescentes costarricenses, e incluye aspectos culturales y lingüísticos adecuados a esta población. En su mayoría las preguntas, el protocolo y el sistema de codificación y puntuación son una propuesta de la autora, basada en la teoría de las investigaciones sobre el apego realizadas desde la tradición Bowlby-Ainsworth y otros estudios más recientes tales como los de Bartholomew y Horowitz. Se hace un recorrido por los antecedentes de recientes investigaciones sobre el apego, así como por los principales fundamentos teóricos relacionados al apego y la adolescencia. Propone un protocolo de entrevista con su respectivo sistema de codificación y puntuación de los estilos de apego, ilustrando en la mayoría de los casos con ejemplos derivados de las aplicaciones realizadas. También ofrece una serie de recursos de apoyo, que permiten al investigador o la investigadora transitar desde el momento inicial de la entrevista para la recolección de información hasta la identificación de la tendencia predominante en el estilo de apego, apoyándose en tablas y preguntas que guían el análisis y la sistematización de la información.

Este documento realiza una introducción general a la metodología de los modelos de ecuaciones lineales estructurales (MLE) abreviado en ingles como SEM (Structural Equation Modelling) y su implementación con el software gratuito LISREL. Va dirigido a principiantes y estudiantes no familiarizados con estos modelos y su implementación con dicho software. Por ende se incluye un marco conceptual general para el modelo de ecuaciones lineales estructurales donde se describen las bases para graficarlo y las variables que lo constituyen, el significado de la simbología Griega, la definición, el modelo de regresión (o estructural), el modelo factorial (o de medición), los submodelos que constituyen un MLE, las matrices que lo conforman y el asunto de la identificación y los métodos de estimación. Luego se introduce al programa LISREL partiendo de aspectos generales, la notación básica, las variables, las matrices. Se incluyen ejemplos de análisis de factores confirmatorio de primer orden y de una estructura casual sencilla compuesta por tres variables latentes. Finalmente un diagrama de flujo a manera de resumen y se recomiendan varios sitios de internet sobre el tema.

Los modelos jerárquicos lineales, constituyen una emergente metodología de análisis estadístico que estudia aquellos problemas de investigación con gran cantidad de variables individuales y contextuales ordenadas jerárquicamente. Los fenómenos sociales se conciben anidados o multinivel cuyo análisis puede darse de manera individual, colectiva o cruzada. Este documento pretende brindar una visión sintética de los elementos fundamentales sobre los cuales se estructuran los modelos jerárquicos lineales, a fin de proveer herramientas necesarias para ingresar sin dificultad a este apasionante mundo del análisis. Se presentan los conceptos básicos, usos, campos de aplicación de los modelos jerárquicos lineales, además de la propuesta empírica de dos modelos, uno de dos niveles y otro de tres con muchas variables contextuales e individuales. Se ofrece al lector una guía para bajar y comenzar los estudios con el programa MLwin para hacer una estimación.