Mendive. Revista de Educación, octubre-diciembre 2019; 17(4): 497-511

General Point Average as a predictor of student´s performance in Higher Technical and Vocational Education

Claudia Patricia Ovalle Ramirez

Centro de Justicia Educacional Pontificia Universidad Católica de Chile. Chile. Correo electrónico: covallera@gmail.com

Recibido: 01 de abril 2019.
Aprobado: 10 de septiembre 2019.

RESUMEN

En el contexto actual donde se busca establecer mecanismos de admisión y selección a la educación superior en Chile se ha propuesto que las medidas de tipo académico puedan servir el propósito de seleccionar estudiantes para los estudios técnicos superiores. El objetivo de este estudio fue identificar si las notas de la Enseñanza Media (NEM) están relacionadas con el rendimiento académico de los estudiantes en el primer año de Educación Superior Técnica. Se emplearon correlaciones bivariadas y modelos de regresión por mínimos cuadrados (OLS) controlando por variables del individuo y de la escuela para establecer el impacto de las NEM en los resultados de las asignaturas del primer año de Educación Superior Técnica. Se usaron los datos de estudiantes de una institución profesional (IP) de educación técnica superior de Chile con una matrícula de aproximadamente 101.000 estudiantes, la cual es una de las mayores proveedoras de este tipo de formación en Chile. La muestra incluyó estudiantes que se matricularon en el año 2018. Los resultados mostraron que las NEM son una variable que tiene una alta correlación con notas de educación superior técnica y los modelos de regresión confirman una relación positiva y significativa. Sin embargo, la magnitud de los coeficientes puede ser indicativa de que las NEM no son un predictor fuerte del desempeño futuro en todas las carreras técnicas.

Palabras clave: validez predictiva; notas de enseñanza media NEM; educación superior técnica.

ABSTRACT

In the current context, which seeks to establish the mechanisms of admission and selection in higher education in Chile, academic measures have been proposed for selection purposes. The objective of this study is to identify if middle school grades (NEM) are related to the academic performance of students in the first year of technical higher education. Bivariate correlations and least squares regression models (OLS) were used, controlling for variables of the individual and the school to establish the impact of the NEM on the results of the subjects of the first year of technical higher education. Student data from a professional institution (IP) of higher education in Chile was used with an enrollment of approximately 101,000 students, which is one of the largest providers of this type of training in Chile. The sample included students who enrolled in 2018. The results indicated that NEM is a variable that has a high correlation with the higher technical education grades and the regression models confirm a positive and significant relationship. However, the magnitude of the coefficients may be indicative that NEM is not a strong predictor of future performance in all technical careers.

Keywords: predictive validity; middle education notes NEM; professional technical education.

INTRODUCCIÓN

Uno de los temas relevantes en la actualidad de la educación superior técnico profesional chilena es el mandato legal de instaurar un sistema de admisión y selección para los aspirantes a estudios técnicos de nivel superior (Ministerio de Educación, 2017). Entre los posibles sistemas de selección se ha sugerido incluir una medida del rendimiento previo escolar que no se relacione con variables socio-demográficas para hacer más justa la selección de los estudiantes (Sevilla, 2015). Sin embargo, la educación técnica media forma en competencias y habilidades que superan la enseñanza académica, y que pueden no ser reflejadas con medidas del rendimiento escolar académico como las notas. Esto implica que la selección de los estudiantes técnicos para ingresar al nivel superior puede estar sesgada y verse afectada por el uso de medidas sin validez para establecer sus competencias previas al ingreso a la educación superior.

Estudios previos en el contexto chileno han demostrado que la selección de estudiantes para la educación superior con pruebas de rendimiento estandarizadas no es justa en términos del sesgo que presentan los ítems desfavoreciendo a los estudiantes que provienen de colegios técnicos (Ovalle-Ramírez & Alvares, 2019). En el contexto de la formación técnica de nivel superior, es necesario producir evidencia sobre la conveniencia de emplear una medida de desempeño académico, como las notas de la enseñanza media, para la selección a la educación superior técnica. Esta evidencia debería demostrar si las notas de rendimiento escolar tienen valor predictivo del desempeño futuro en el contexto de la educación superior. Esta medición puede verse afectada por variables del individuo, de la familia y de las instituciones de educación media y superior.

En el presente estudio se intenta controlar por estas características (del individuo y de las instituciones) y se emplea una muestra de primer año de estudiantes matriculados en una IP (Instituto profesional) para establecer evidencia de la validez predictiva de las notas de la enseñanza media.

Revisión de la Literatura

En Chile la enseñanza media son los últimos 4 años de educación escolar y las notas obtenidas en esos cursos son consideradas, por muchas instituciones de la educación superior, como un criterio para su admisión.

La literatura se ha referido a las NEM (notas de enseñanza media) en términos de la capacidad predictiva que estos resultados tienen sobre el rendimiento futuro del estudiante. Mientras, algunos estudios indican que las NEM tienen gran capacidad predictiva (Betts & Morell, 1999; Comité Técnico Asesor del Consejo de Rectores de las Universidades Chilenas-CRUCH, 2006;Geiser & Studley, 2001)otros autores afirman que el aporte de las NEM al rendimiento académico en la educación superior es limitado (Medina, Abu, & Luengo, 2014).

La evidencia de la capacidad predictiva de las notas de media en la educación superior, proviene de la literatura y estudios sobre instituciones universitarias Bastías, Villaroel, Zuñiga, Marshall, Velasco & Beltrán (2000), en un modelo de predicción del desempeño del primer año en la carrera de Medicina de 724 estudiantes,encontraron que las NEM predicen significativamente el promedio ponderado de notas al tercer año, aunque por lo general, se reporta en una escala de 1,0 (mínimo) a 7,0 (máximo). Según el estudio, aproximadamente 27 puntos de diferencia en el puntaje de las NEM producen una décima de diferencia en el promedio ponderado de notas al término de 3 años de estudio. Para obtener un resultado similar en el promedio ponderado de notas se necesita una diferencia de 53 puntos en el puntaje de la Prueba de conocimientos en Biología para el ingreso a la carrera. Se concluye que las NEM son un mejor predictor que las pruebas de selección en Biología, Aptitud Verbal, o Aptitud Matemática.

El Comité Técnico Asesor Consejo de Rectores de las Universidades Chilenas-CRUCH (2006) reporta que las NEM son un factor que no experimentó cambios entre 2006 a 2015. No obstante, llama la atención que en un contexto donde las notas mantienen una capacidad predictiva estable (típicamente en el rango 0.15 a 0.30), en una de las universidades selectivas incluidas en el estudio este factor de selección sí posee una validez predictiva casi nula en todos los años estudiados.

Otros estudios que soportan la validez predictiva del las NEM incluyen el de Reyes Elgueta & Torres Pavez (2009) quienes concluyen que las notas de enseñanza media (NEM) y las Pruebas de Selección Universitaria (PSU), tienen el mayor peso en la predicción del desempeño académico, incluso por encima de las variables del entorno (región de procedencia, tipo de pago de la educación y género). En su estudio las NEM, junto a ambas pruebas de selección (PSU Matemáticas y PSU Lenguaje), muestran una relación menor con respecto a variables como la probabilidad de terminar la carrera, comparado con las notas por sí solas, las que tienen un impacto en la probabilidad de terminar la carrera de casi un 5,7%.

En la literatura varios estudios indican que las NEM no son un buen predictor de desempeño futuro. Pérez, Ortiz & Parra (2011) con una muestra de 117 estudiantes de Medicina relacionaron las NEM y la prueba de ingreso a la universidad, PSU, con variables cognitivas y afectivas que se asocian con el éxito académico (autoeficacia, autoestima, estilos de aprendizaje y perfil valórico). Los resultados indican que el puntaje en la PSU de Matemáticas, se relaciona negativamente con los otros puntajes PSU y con el NEM. Esto, según los autores, se explicaría porque el NEM no predice en sí mismo el desempeño futuro, sino que evalúa otros aspectos que impactan el desempeño y con los que se relaciona de manera significativa. Entre otros aspectos impacta el estilo de aprendizaje de estudio metódico (rho = 0,311; p < 0,001), un perfil valórico que enfatiza la benevolencia (r (108) = 0,303; p < 0,01) y el universalismo (r (108) = 0,326; p < 0,01).

Por su parte, Medina, Abu & Luengo (2014) determinaron la capacidad predictiva de las notas de enseñanza media comparándolas según dependencia del colegio para una muestra de 551 estudiantes de pregrado de Odontología cuyas NEM promedio alcanzan 6.59 (0,20 SD), en una escala de 1 a 7. Se concluye que, en promedio, el porcentaje de aporte de las notas de enseñanza media a la explicación del rendimiento académico universitario correspondió a un 10,8%. El mayor porcentaje de aporte fue para las NEM de los colegios particulares, 15,0%; seguidas por las notas de enseñanza media de los establecimientos municipalizados y subvencionados con 9,6 % y 8,6% respectivamente. Se concluye que la capacidad predictiva de las NEM fue limitada y que existe un sesgo de predicción que desfavorece a los colegios municipalizados y los subvencionados.

Betts & Morell (1999) observaron en una muestra de estudiantes universitarios que un aumento de un punto en NEM escolar se traduce en un aumento del GPA universitario (promedio de notas) de solo 0.53 puntos en modelos de regresión que dan cuenta del 10% de la variación del GPA. Estos modelos incluyen las notas de media, pero también variables socio-demográficas y de recursos de la escuela (ej. Nivel educativo de los docentes). En la investigación se enfatiza en la importancia de la variabilidad que proviene de las diferencias entre escuelas, la cual puede afectar la variable respuesta y en la forma como las variables socio-demográficas afectan el GPA en el nivel universitario (estudiantes de menores recursos económicos tienden a tener peores resultados).

Ya que en la literatura no se encuentran estudios que relacionen las NEM con el desempeño en la educación superior técnica, el presente estudio aporta evidencia de la validez predictiva de las notas de enseñanza media (NEM) en el rendimiento en la formación técnico profesional de nivel superior. Se emplearon datos de desempeño de estudiantes que cursaron su primer año en programas técnicos (duración de 2 años y medio y conducente al título de Técnico Superior) y profesionales sin Licenciatura (duración de 4 años) de una Institución Profesional (IP) con mayor matrícula en Chile (alrededor de 101.000 estudiantes para 2018). El presente estudio de tipo cuantitativo pretende contribuir con evidencia empírica sobre el potencial de las NEM para la selección y clasificación de estudiantes que ingresan a los estudios técnicos superiores en Chile.

MATERIALES Y MÉTODO

Datos

Notas de Enseñanza Media (NEM). Las notas de enseñanza media son el promedio del promedio de notas por cada año (1° a 4°) de la Enseñanza Media, aproximadas al segundo decimal. Tienen una escala de 1 a 7 puntos. El promedio de las NEM es transformado a un puntaje estándar, mediante tablas de conversión, constituyendo así el puntaje de las NEM, uno de los factores de selección para el ingreso a las universidades selectivas o Universidades del Consejo de Rectores CRUCH- y aquellas privadas adscritas al Sistema. Su mínimo es de 150 puntos y su máximo es de 850.

Notas Total Promedio. Es el promedio de las notas de las asignaturas de Carrera y las notas de las asignaturas de Escuela, que obtiene un estudiante al completar el primer año de estudios en una carrera técnica o una carrera profesional sin licenciatura. Las notas de Carrera corresponden a asignaturas propias de cada currículum y las asignaturas de Escuela corresponden a las asignaturas que se comparten entre varios currículos o carreras de una misma escuela técnica (Salud, Turismo, Administración, Informática, Diseño, Comunicaciones, Diseño, Recursos Naturales, Ingeniería).

Universo y Muestra

El universo del presente estudio comprende a los estudiantes de la educación superior técnica profesional en Chile, alrededor de 510.000 estudiantes (43% del total de la matrícula en la educación superior). En el presente estudio se incluyeron los datos de 40.550 estudiantes de la educación técnica superior, una muestra seleccionada por conveniencia de los estudiantes matrículados en el primer año en 2018. Estos estudiantes estaban distribuidos en 9 escuelas técnicas y 79 carreras técnicas y profesionales y cursaron 1° y 2° semestre de estudios Técnicos y Profesionales sin Licenciatura en el año 2018.

Procedimiento

Se calcularon correlaciones bivariadas entre los puntajes NEM de los estudiantes y sus notas de primer año de formación técnico profesional. Para cada valor de la correlación se establecieron valores estandarizados (conversiones a puntajes Z) para poder hacer la comparación de los coeficientes entre las escuelas y entre las carreras. Las puntuaciones Z son desviaciones estándar que pueden tomar valores negativos y positivos y que permiten establecer comparaciones entre las correlaciones obtenidas para las diferentes escuelas y carreras técnicas.

Así mismo, se desarrollaron regresiones por cada una de las carreras técnicas y profesionales sin licenciatura, controlando por el sexo, la edad, la educación de la madre, el quintil de ingreso, el año de egreso de la educación media, la dependencia del colegio (municipal, privado subvencionado, privado) y el tipo de licencia de enseñanza media del estudiante (técnico o científico-humanista). Para las regresiones se presentan 3 modelos en la tabla del anexo 2. El primer modelo de regresión está dado por la ecuación 1:

Ecuación 1

La ecuación 1 indica que el promedio de notas de la educación superior técnica se puede predecir a partir de las notas de enseñanza media y un término de error. Este modelo es el modelo nulo que servirá para hacer la comparación del coeficiente con el coeficiente para las NEM en los modelos 2 y 3, que también se presentan en la tabla del anexo 2. Las ecuaciones 2 y 3 definen los modelos de regresión empleados:

Ecuación 2

La ecuación 2 incluye un vector de características del individuo (educación de la madre, quintil de ingreso, edad, género). La ecuación 3 incluye el mismo vector de características del individuo e introduce un vector de variables del establecimiento educativo (dependencia, modalidad, año de egreso de la educación media).

Ecuación 3

RESULTADOS

La tabla 1 presenta los resultados de las correlaciones entre las notas de enseñanza media con las notas de primer año de los estudiantes considerando la escuela de estudios técnicos y profesionales sin licenciatura. Estas correlaciones indicaron que existen relaciones positivas y significativas entre las variables. Sin embargo, existe variabilidad en la capacidad predictiva de las notas de enseñanza media por escuela como lo muestran las puntuaciones Z de transformación de las correlaciones que permite las comparaciones entre escuelas en la Tabla 1.

Los resultados muestran que mientras el coeficiente de correlación entre las NEM y notas de desempeño fue más alto y significativo para la escuela de Recursos Naturales, Informática y Comunicaciones, el coeficiente fue más bajo para Salud y Administración y Negocios.

Tabla 1- Correlaciones entre las NEM y la Escuela