¿Qué predice el éxito en los programas de posgrado en psicología?

Este es el año 13 de pasar decenas de aplicaciones para determinar el pequeño número de personas que serán entrevistadas por un puesto en el doctorado de Psicología Clínica. programa en la Universidad George Mason. En este momento, los profesores de todo Estados Unidos están haciendo lo mismo para los programas sociales, de desarrollo, industriales / de organización, de psicología de asesoramiento y de factores humanos (entre otros).

Algunas tendencias notables en los últimos años.

En primer lugar, los solicitantes están pasando varios años en múltiples laboratorios de investigación para obtener experiencia en investigación. Fantástico. He estado defendiendo esto por años.

Segundo, ha habido una explosión de publicaciones y presentaciones en conferencias científicas. Este año, tuve un alumno con 9 publicaciones (loco) y tres estudiantes con más de 15 presentaciones en conferencia (¡santo bejeez!).

En tercer lugar, ha habido un aumento en el número de solicitantes que desarrollaron su propio proyecto de investigación desde el desarrollo de las preguntas hasta la diseminación a través de papel o manuscrito. Ha habido un aumento en el número de solicitantes que sirvieron como coordinadores del proyecto para un proyecto financiado por un mentor de la facultad. Esto es enorme Los solicitantes conocen los matices de cómo realizar investigaciones y lidiar con las verrugas anales de no presentarse, el mal funcionamiento de la grabación de video, las respuestas descuidadas de los datos de la encuesta y los participantes que informan ideas suicidas. Un aprendizaje asegura que el solicitante sepa en qué se está metiendo como científico.

Howard Kalin, used with permission
Fuente: Howard Kalin, usado con permiso

A pesar de estas tendencias, he descubierto que los profesores, a quienes me niego a nombrar, confían en estrategias de hace décadas para seleccionar a los solicitantes. A saber, ¿alguien tiene un puntaje GPA y GRE suficiente? Mis propios alumnos son rechazados regularmente por los programas de posgrado a pesar de que fungen como mi coordinador de proyectos en sofisticados estudios financiados por subvenciones, presentan charlas y pósters de primer autor en conferencias científicas (que obtuvieron) y son coautores de manuscritos enviados a la cima. revistas de nivel – estudios que involucraron el muestreo de experiencias y el modelado jerárquico lineal (habilidades que aprendieron durante meses de capacitación).

Escribo esta publicación de blog para señalar la investigación olvidada de hace 20 años.

¿Sabes lo que predicen los puntajes GRE? Calificaciones de primer año en cursos requeridos en un Ph.D. programa. ¿Sabes lo que a nadie le importa a los investigadores, profesores y médicos independientes? Calificaciones de primer año; que están inflados con casi ninguna variabilidad. Y si desea explorar los resultados metaanalíticos, sepa que los puntajes GRE predicen un promedio de 6.3% de la varianza en las calificaciones de nivel de posgrado en los cursos. Los puntajes de GRE no predicen nada que sea útil para la escuela de posgrado.

Las reglas cambian de pregrado a escuela de posgrado. Los estudiantes pasan del pensamiento convergente y la toma de pruebas al pensamiento divergente, donde deben idear sus propios intereses y preguntas de investigación, y adquieren el diseño metodológico, el diseño de investigación, la evaluación del programa y las habilidades estadísticas para evaluar estas preguntas e interpretar los datos. Los puntajes GRE no predicen ninguna de estas habilidades.

Ahora, si le interesa el promedio de calificaciones de los estudiantes de posgrado en cursos específicos requeridos para un doctorado, y está menos interesado en sus habilidades de investigación, perspicacia clínica y capacidad de liderazgo, por supuesto, continúe evaluando a los estudiantes según los puntajes cuantitativos. en su transcripción Pero les estoy hablando: la facultad que tiene el destino de los estudiantes vive en sus manos. Si no le interesan los grados de la escuela de posgrado, no sea hipócrita y utilice los datos para guiarlo.

Sé valiente.

Lee su CV Si obtuvieron un GPA superior a 3.0, sigan adelante. ¿Cuál es la calidad de su experiencia de investigación? ¿Saben cómo comenzar a trabajar para contribuir a su laboratorio de investigación? ¿Serán buenos colegas contigo y con tus otros estudiantes graduados? ¿Hay al menos una carta persuasiva que acredite las fortalezas de los personajes que los distinguen del resto?

Sé un inconformista.

No descarte a los grandes psicólogos potenciales porque no conocen el antónimo de bailía o el coseno de 30 °. Simplemente no importa. No descartes a los estudiantes porque su promedio de calificaciones (GPA, por sus siglas en inglés) fue una lástima en su primer año de universidad, antes de desarrollar un interés en la psicología.

Es poco probable que haya una marcha nacional contra el proceso de admisión para Ph.D. programas. Así que esto es todo. Resista la tentación de dejar que los puntajes arbitrarios influyan demasiado en usted. Sospecho que serás recompensado con estudiantes que son más reflexivos, imaginativos e impactantes.

Morrison, T., y Morrison, M. (1995). Una evaluación meta-analítica de la validez predictiva de los componentes cuantitativos y verbales del Examen de Graduados de Graduados con promedio de calificaciones de posgrado que representa el criterio del éxito de los graduados. Educational and Psychological Measurement, 55 (2), 309-316.

Nuevas adiciones a partir del 9/9/16: algunos lectores se quejaron de que los datos de hace 20 años eran irrelevantes en la era moderna. Sigo siendo escéptico acerca de esta crítica, pero aquí están las últimas investigaciones sobre el tema que continúan mostrando que el GRE es un mal predictor de todo lo que importa excepto las calificaciones.

open source, used with permission
Fuente: código abierto, usado con permiso

1.

Moneta-Koehler, L., Brown, AM, Petrie, KA, Evans, BJ, y Chalkley, R. (2017). Las limitaciones del GRE para predecir el éxito en la escuela de posgrado biomédica. PloS uno, 12 (1), e0166742.

Otros lectores han estado argumentando sobre la primacía de los puntajes GRE sobre cualquier otro indicador en el proceso de admisión. Un profesor sugirió que cite su trabajo sobre el tema.

En uno de sus estudios (Kuncel & Hezlett, 2007), encuentra una correlación de .20 entre las puntuaciones de los exámenes estandarizados y la productividad de la investigación durante la escuela de postgrado. Veo esto como evidencia del problema con la primacía de los puntajes GRE. Claramente, algo más es necesario más allá de los puntajes GRE. Esto se remonta a mi sugerencia de un punto de partida necesario, como un GPA de 3.0 o un puntaje percentil 60 en los subtests GRE antes de pasar a las habilidades adquiridas para comenzar a trabajar en un laboratorio de investigación. Curiosamente, el predictor más fuerte de la productividad de la investigación fue el puntaje de la asignatura de psicología GRE. Una prueba que rara vez se requiere y rara vez se considera en admisiones. Voy a ser sincero. Leer acerca de estos datos ha cambiado mi punto de vista sobre la prueba y la estaré viendo con más cuidado en el futuro. Es una instantánea de si alguien ha adquirido y retenido conocimiento sobre el campo. Es más difícil formular preguntas de investigación útiles si ignora lo que se exploró en el pasado. Una base básica ofrece una ventaja.

Tal vez es hora de que los departamentos de psicología y los miembros de la facultad individual sean transparentes sobre su proceso de filtrado. ¿Cuáles son los límites exactos utilizados para reducir el número de aplicaciones a un nivel razonable? Puntaje promedio de más de 3.5? Puntajes GRE por encima del percentil 80? Si tiene menos de dos presentaciones de investigación, ¿está fuera de la mezcla? Si tiene una publicación de primer autor, ¿puede compensar un GPA de 3.1? ¿Cómo se toman en consideración los datos demográficos de raza, sexo, orientación sexual, edad y estado económico social? En el registro, los miembros de la facultad afirman que se adhiere a la verdadera naturaleza de la acción afirmativa: si todo lo demás es igual, entonces los estudiantes no blancos y no heterosexuales reciben la ventaja. Fuera de registro, a menudo hay un impulso para obtener estudiantes no blancos, no heterosexuales cada año, independientemente ya menudo a expensas de la experiencia de investigación, productividad de la investigación, experiencia clínica, GPA, GRE, etc. Diversidad que no es visible, tales como estado económico social, se ve como mucho menos importante. La transparencia asegura un proceso justo. Expone el sexismo, el racismo y el clasismo tanto para los grupos minoritarios como para los grupos mayoritarios (y ningún candidato debe ser considerado representante ambulante de ningún grupo).

Al final, le pregunté a docenas de personas cómo eligen estudiantes de posgrado estelares. La respuesta más común es: no tengo ninguna pista maldita. Por eso escribí esta publicación en el blog. Nadie sabe qué es lo que hace que los investigadores y practicantes sean excelentes y, sin embargo, cada programa descarta prematuramente a las personas con un algoritmo que se basa en puntajes y calificaciones de exámenes estandarizados.

Vale la pena hacer una pausa, recopilar datos internos, hacer preguntas y ser transparente para los solicitantes. Si los solicitantes saben que sus 5 presentaciones de la conferencia nunca anularán su puntaje general de 3.1 GPA y 70 percentil GRE, solo dígales. No hay necesidad de desviarlos. Esté centrado en el estudiante.

Kuncel, NR, y Hezlett, SA (2007). Evaluación. Las pruebas estandarizadas predicen el éxito de los estudiantes de posgrado. Science, 315 (5815), 1080.

Kuncel, NR, Hezlett, SA, y unos, DS (2001). Un metaanálisis exhaustivo de la validez predictiva de los exámenes de posgrado: implicaciones para la selección y el rendimiento de los estudiantes de posgrado. Psychological Bulletin, 127 (1), 162-181.

El Dr. Todd B. Kashdan es orador público, psicólogo, profesor de psicología y científico principal en el Centro para el Avance del Bienestar de la Universidad George Mason. Su último libro es El lado positivo de su lado oscuro: ¿Por qué ser todo su ser, no solo su "buen" auto-impulso de éxito y satisfacción? Si está interesado en organizar un taller o participación oral, visite toddkashdan.com