Mendive. Revista de Educación, octubre-diciembre, 2022; 20(4): 1160-1175

Artículo original

Indicadores para evaluar el impacto de estrategia de recuperación posCOVID. Universidad de Pinar del Río "Hermanos Saíz Montes de Oca"

Indicators to evaluate the impact of the post-COVID recovery strategy. University of Pinar del Río "Hermanos Saíz Montes de Oca"

Indicadores para avaliar o impacto da estratégia de recuperação pós-COVID. Universidade de Pinar del Río "Hermanos Saíz Montes de Oca"

Benito Bravo Echevarría¹ http://orcid.org/0000-0002-1395-1855
Carlos Luis Fernández Peña¹ http://orcid.org/0000-0001-6833-0055

¹Universidad de Pinar del Río Hermanos Saíz Montes de Oca. Cuba. benito.bravo@upr.edu.cu; carlosl.fernandez@upr.edu.cu

Recibido: 04 de mayo 2022.
Aceptado: 01 de julio 2022.

RESUMEN

La pandemia de la COVID-19, desde marzo de 2020, produjo una fuerte influencia en el sistema educativo cubano en general y en el subsistema de la Educación Superior, en particular. En la Universidad de Pinar del Río "Hermanos Saíz Montes de Oca" se produjeron importantes transformaciones en todos sus procesos sustantivos, lo cual planteó la necesidad de trazar una estrategia de recuperación posCOVID. El propósito del presente trabajo es el de validar los indicadores diseñados para evaluar el impacto de dicha estrategia. Para la validación, desde el punto de vista empírico, se trabajó con la consulta a expertos, para lo cual se tomó una muestra de 32 expertos a los que se les aplicó una encuesta inicial, seleccionados mediante el cálculo del Coeficiente de Competencia experta. Sus respuestas fueron analizadas a través del Coeficiente de Validez de Contenido de Hernández-Nieto (2002), por medio del cual fue posible establecer el grado de concordancia y validez de los indicadores entre los expertos. Luego del análisis de los expertos, se obtuvo un Coeficiente de Validez de Contenido "aceptable" para todos los indicadores. Según los datos obtenidos, se demuestra que todos los indicadores resultan válidos para evaluar el impacto de la estrategia posCOVID diseñada.

Palabras clave: Coeficiente de Competencia Experta; Coeficiente de Validez de Contenido; evaluación de impacto; impacto; indicadores.

ABSTRACT

The COVID-19 pandemic, since March 2020, had a strong influence on the Cuban educational system in general and on the higher education subsystem, in particular. At the University of Pinar del Río "Hermanos Saíz Montes de Oca" there were important transformations in all its substantive processes, which raised the need to draw up a POSCOVID recovery strategy. The purpose of this work is to validate the indicators designed to evaluate the impact of said strategy. For the validation, from the empirical point of view, experts were consulted, for which a sample of 32 experts was taken, to whom an initial survey was applied, selected by calculating the Expert Competence Coefficient. Their answers were analyzed through the Content Validity Coefficient of Hernández-Nieto (2002), through which it was possible to establish the degree of agreement and validity of the indicators among the experts. After the analysis of the experts, an "acceptable" Content Validity Coefficient was obtained for all the indicators. According to the data obtained, it is shown that all the indicators are valid to evaluate the impact of the designed POSCOVID strategy.

Keywords: Expert Competence Coefficient; Content Validity Coefficient; impact evaluation; impact; indicators.

RESUMO

A pandemia de COVID-19, desde março de 2020, teve uma forte influência no sistema educacional cubano em geral e no subsistema de ensino superior, em particular. Na Universidade "Hermanos Saíz Montes de Oca" de Pinar del Río, ocorreram importantes transformações em todos os seus processos substantivos, o que levantou a necessidade de traçar uma estratégia de recuperação pós-COVID. O objetivo deste trabalho é validar os indicadores desenhados para avaliar o impacto dessa estratégia. Para a validação, do ponto de vista empírico, foram consultados especialistas, para os quais foi retirada uma amostra de 32 especialistas, aos quais foi aplicado um questionário inicial, selecionado pelo cálculo do Coeficiente de Competência do Especialista. Suas respostas foram analisadas por meio do Coeficiente de Validade de Conteúdo de Hernández-Nieto (2002), por meio do qual foi possível estabelecer o grau de concordância e validade dos indicadores entre os especialistas. Após a análise dos especialistas, obteve-se um Coeficiente de Validade de Conteúdo "aceitável" para todos os indicadores. De acordo com os dados obtidos, mostra-se que todos os indicadores são válidos para avaliar o impacto da estratégia pós-COVID desenhada.

Palavras-chave: Coeficiente de Competência do Especialista; Coeficiente de Validade de Conteúdo; Avaliação de impacto; impacto; indicadores.

INTRODUCCIÓN

Importantes transformaciones en los procesos sustantivos universitarios provocaron la pandemia de COVID-19, fundamentalmente en el proceso docente educativo. Situación que llevó al cierre total de las actividades presenciales en nuestras instituciones de Educación Superior y a conferir un papel protagónico a las actividades online y al trabajo a distancia para poder dar continuidad a la formación de los profesionales.

Por tales razones, a solicitud de la dirección de la Universidad de Pinar del Río "Hermanos Saíz Montes de Oca", el Centro de Estudios de Ciencias de la Educación de Pinar del Río (CECE-PRI) elaboró una estrategia de recuperación posCOVID, para dar continuidad a la formación de los profesionales; esto tuvo entre sus ideas centrales potenciar el uso de las Tecnologías de la Información y las Comunicaciones (TIC) como alternativa al distanciamiento social, que al decir de Cuello y Solano (2021) "…hacen que el aprendizaje de los estudiantes sea personalizado y en poco tiempo, (…) haciendo que se le facilite la realización de las actividades" (p. 40). Las TIC amplían las posibilidades de comunicación y de trabajo entre personas distantes.

Igualmente, se tuvo presente el papel activo que debe jugar el estudiante en la gestión del conocimiento, ya que como indica Jiménez (2019):

      La gestión del conocimiento orienta al descubrimiento de la capacidad de actuar para producir resultados positivos permanentes mediante un conjunto de actividades que se establecen para ser desplegadas con el objetivo de utilizar, desarrollar y administrar los conocimientos de los actores disponibles en la organización (p. 1).

La estrategia tomó como base los principios de flexibilidad y contextualización, accesibilidad y equidad y la relación Universidad-Centro Universitario Municipal-Entidades Laborales y como premisas la capacitación a profesores principales de Año Académico, líderes pedagógicos, personal de apoyo y reconoce tres escenarios de conectividad.

Ante esta realidad, en el 2020 un equipo de investigadores y colaboradores del CECE-PRI se dio a la tarea de elaborar las dimensiones e indicadores para evaluar el impacto de la estrategia de recuperación posCOVID (ver anexo A). Antes de la elaboración y aplicación de los instrumentos, fue necesario determinar si eran válidos y confiables. Solans-Domenech et al. (2019) sugieren buscar la variante más pertinente para demostrar la validez de su propuesta investigativa, lo cual asegurará que la información que se obtenga sea la que se quiere obtener.

Para demostrar la validez de los indicadores se recurrió al método del Coeficiente de Validez de Contenido (CVC) de Hernández-Nieto (2002), el cual se utiliza para evaluar los juicios de expertos, especialistas o usuarios y, al decir de González et al. (2018), "… constituye un método heurístico de alto rigor científico que permite la búsqueda del consenso a partir de aproximaciones cualitativas derivadas de la experiencia y el conocimiento de un grupo de personas" (p. 100).

Antes de dar este paso, es fundamental la selección de los expertos que participarán en la determinación de dicha validez, para lo cual es necesario calcular el Coeficiente de Competencia Experta, que según Cabero y Barroso (2013), "…se efectúa a partir de la opinión mostrada por el experto sobre su nivel de conocimiento acerca del problema de investigación..." (p. 29).

El juicio de expertos es una estrategia con amplias ventajas para demostrar la validez de la investigación y cobra especial relevancia, pues son ellos quienes deben eliminar los ítems irrelevantes y modificar los que lo requieran. Cabero y Llorente (2013) la consideran: "…de gran utilidad para determinar el conocimiento sobre contenidos y temáticas difíciles, complejas y novedosas o poco estudiadas (…)" (p. 14).

Es necesario tener en cuenta el nivel de conocimiento, el manejo de información, la experiencia profesional, la voluntad y disposición para la participación en el proceso, la disponibilidad de tiempo, el compromiso a la intervención en todas las rondas de aplicación previstas y años de experiencia en la temática concreta. Someter un instrumento de cotejo a la consulta y al juicio de expertos debe hacerse sobre la base de criterios de validez y fiabilidad. En tal sentido, González et al. (2018) plantean que "la consulta a expertos constituye un método heurístico de alto rigor científico que permite la búsqueda del consenso a partir de aproximaciones cualitativas derivadas de la experiencia y el conocimiento de un grupo de personas" (p. 100).

Para Juárez-Hernández y Tobón (2018) existen tres aspectos fundamentales a considerar en el juicio de expertos: el concepto de experto, determinación del grado de conocimiento en el área o constructo y el número de expertos necesarios para efectuar la evaluación del instrumento. En tanto, Quezada et al. (2020) exponen que el mismo permite la valoración de instrumentos de recogida y análisis de información, metodologías empleadas, materiales de enseñanza, opinión respecto a un aspecto concreto, valoraciones conclusivas sobre un problema o sus soluciones, entre otros.

Pero, ¿qué es experto? Debe ser un individuo o persona capaz de proveer valoraciones fiables sobre un problema en cuestión, con conocimiento y experiencia en la temática, experiencia profesional y años de experiencia en dicha temática y acumulado suficiente conocimiento sobre la materia que se considera. Para García et al. (2020), un experto debe poseer conocimiento amplio y profundo de la actividad objeto de análisis y estar familiarizado con el sistema donde se contextualiza el objeto de estudio.

La calidad del proceso y sus resultados puede estar condicionada por la adecuada selección de los expertos (López-Gómez, 2018; Cabero-Almenara et al., 2020), además de la cantidad de expertos necesarios para participar en el proceso, aunque no existe un criterio uniforme entre los autores. Zartha-Sossa et al. (2017), por ejemplo, refieren de 9 a 24 expertos. Para efectos del presente estudio se trabajó con 38 personas.

El objetivo del presente trabajo es exponer los resultados del proceso de validación de los indicadores diseñados para evaluar el impacto de la estrategia de recuperación posCOVID.

MATERIALES Y MÉTODOS

Desde el punto de vista estadístico, para la validación de los indicadores para evaluar el impacto de la estrategia de recuperación posCOVID se recurrió al cálculo del Coeficiente de Validez de Contenido (CVC) de Hernández-Nieto (2002), el cual se utilizó para evaluar el juicio de los expertos seleccionados, valorando el grado de acuerdo por ítems de cada uno de ellos. Aunque Hernández-Nieto (2002) recomienda la participación de entre tres y cinco expertos respecto a cada uno de los diferentes ítems y al instrumento en general, en este estudio fueron seleccionados 32.

El procedimiento seguido para garantizar la calidad de la selección de los expertos en esta investigación se basó en el cálculo del Coeficiente de Competencia Experta, para que con su opinión y autovaloración indicaran el grado de conocimiento que tenían acerca del objeto de investigación. En la selección de los mismos se tuvieron en cuenta los siguientes criterios: profesor con amplio conocimiento y experiencia en esta área particular del conocimiento, categoría docente de Asistente, Auxiliar o Titular, con título de Máster como mínimo y al menos 15 años de experiencia en la Educación Superior.

Los requisitos descritos se midieron en una encuesta inicial enviada por email a los 32 que se consideraron podían cumplir con esos criterios. Con anterioridad se había realizado un estudio de la labor docente e investigativa de 38 candidatos. Se tuvo en cuenta también la disposición de participar en el estudio por parte de los posibles expertos, a los cuales se les explicaron los objetivos que se pretendían alcanzar con la investigación.

Caracterización de los Expertos

Categoría docente: 11 Titulares (34,4 %), 17 Auxiliares (53,1 %) y 4 Asistentes (12,5 %).

Título académico: 21 MSc (65,6 %).

Grado científico: 11 Dr. C. (34,4 %).

Años de experiencia en Educación Superior (promedio): 16 años promedio.

Experiencia en el área del conocimiento: 100 %.

Subsiguientemente, se evaluó el Coeficiente de competencia de los posibles expertos (K), a partir de la fórmula K= (Kc+Ka)/2 donde Kc es el coeficiente de conocimiento y Ka el coeficiente de argumentación. Para determinar el Kc se les pidió que marcaran con una cruz en una escala creciente del 1 al 10, lo cual se multiplicó por 0,1. El valor se corresponde con el grado de conocimiento o información general que tienen sobre el tema de estudio, siguiendo la estructura de la tabla 1,donde aparece la respuesta dada por cada experto. En base a esos resultados se calculó el coeficiente de conocimiento Kc, como se muestra en la tabla 2.

Posteriormente, a cada experto se le indicó realizar una autoevaluación de sus niveles de argumentación o fundamentación, según se ilustra en la tabla 3; es decir, el grado de influencia que tuvo cada fuente sobre los conocimientos que posee sobre el tema propuesto, marcando igualmente con una X las opciones Alto, Medio y Bajo para cada opción.

Seguidamente, se procedió a calcular el Coeficiente de argumentación (Ka), teniendo en cuenta el patrón definido en la tabla 4. En este sentido se realizó una adaptación de la tabla propuesta por Dobrov y Smirnov (1972). Este cálculo se realizó sobre la base de las opciones señaladas por los expertos según su autovaloración de las fuentes de argumentación de la tabla 3 y confrontadas con el patrón de la tabla 4, de la siguiente manera: Experto No. 1: Ka = 0,2 + 0,5 + 0,05 + 0,05 + 0,05 + 0,05 = 0,90.

Con los valores finales obtenidos se clasificaron los expertos en tres grupos:

1) Si K es mayor a 0,8, mayor o menor o igual a 1 (influencia alta);

2) Si K es mayor o igual que 0,7, menor o igual a 0,8 (influencia media);

3) Si K es mayor o igual a 0,5, mayor o menor o igual a 0,7 (influencia baja).

La interpretación se realizó evaluando los indicadores sobre la base de que aquellos con un CVC superior a 0,80 son los que permiten evaluar con mayor confiablidad el impacto de la estrategia de recuperación posCOVID, aunque se han considerado también como aceptables aquellos indicadores con un CVC superior a 0,70, siendo este considerado el valor crítico de aceptación del indicador (ver tabla 5).

A continuación, se calculó el Coeficiente de Validez de Contenido de Hernández-Nieto (2002) para valorar el grado de acuerdo de los expertos mediante la aplicación de una escala numérica tipo Likert de 11 alternativas.

El cálculo del RVC se realizó mediante la fórmula siguiente: donde Mx representa la media de la puntuación dada por los expertos a cada uno de los indicadores y Vmáx la puntuación máxima que el indicador podría alcanzar.

Seguidamente, se realizó el cálculo del error asignado a cada indicador (Pei), de este modo se redujo el posible sesgo introducido por alguno de los jueces, siendo j el número de expertos participantes.

Finalmente, el CVC final se calculó aplicando la fórmula CVC = CVCi Pei.

RESULTADOS

En la siguiente tabla 1 se muestran los resultados de las respuestas dadas por cada uno de los expertos, en relación con el grado de conocimiento o información general que tienen sobre el tema de estudio.

Tabla 1- Resultados de las respuestas dadas por cada experto

Sobre la base de los resultados anteriores, se calculó el coeficiente de conocimiento Kc que se muestra en la tabla 2.

Tabla 2- Resultados del cálculo del Coeficiente de Conocimiento (Kc)

En la tabla 3 se ilustran los resultados de la autoevaluación realizada por uno de los expertos acerca de sus niveles de argumentación o fundamentación; es decir, el grado de influencia que tuvo cada fuente sobre los conocimientos que posee del tema propuesto.

Tabla 3- Ejemplo de la valoración de las fuentes de argumentación teórica del experto 1

Los resultados del cálculo del Coeficiente de argumentación (Ka) se muestran a continuación en la tabla 4:

Tabla 4- Patrón de factores para el cálculo del Coeficiente de argumentación (Ka). Se resaltan los resultados del experto 1

Aun cuando Hernández-Nieto (2002) establece como criterio que los ítems que obtengan un CVC superior a 0,80 son los que permiten en una mayor medida que el instrumento mida el constructo definido, se establecieron como criterios de medida que aquellos ítems con un CVC superior a 0,80 son los que permiten evaluar con mayor confiablidad el impacto de la estrategia de recuperación posCOVID, aunque se consideraron también como aceptables aquellos indicadores con un CVC superior a 0,70, siendo este el valor crítico de aceptación del indicador (ver tabla 5).

Tabla 5- Escala de interpretación del Coeficiente Validez de Contenido (CVC) obtenido en cada uno de los indicadores

Sobre la base de los criterios establecidos, no se consideran indicadores inaceptables o deficientes y tampoco indicadores considerados de excelentes. Todos los indicadores estuvieron entre las categorías de aceptable y buena, con valores superiores al valor crítico de inclusión 0,70 y correspondientes con el consenso de evaluación "aceptable".

Análisis por dimensiones e indicadores

El CVC para el criterio validez para la Dimensión I "Reducción de riesgos epidemiológicos" osciló entre 0,75313 y 0,79375, lo que puede considerarse como de una validez aceptable en todos sus indicadores (tabla 6).

Tabla 6- Dimensión I "Reducción de riesgos epidemiológicos"

Para la Dimensión II "Indicadores de impacto de la estrategia docente", el CVC para el criterio validez osciló entre 0,74063 y 0,80313. Todos los indicadores alcanzaron un CVC superior a 0,7, siendo el indicador "Efectividad del programa de capacitación a líderes académicos de los diferentes niveles" el de más alto CVC con una validez buena y el indicador "Efectividad en la determinación de los métodos de enseñanza-aprendizaje en las condiciones de escenario de crisis prolongada", el de más bajo CVC (tabla 7).

Tabla 7- Dimensión II "Indicadores de impacto de la estrategia docente"

En el caso de la dimensión III "Indicadores sobre el impacto del vínculo con las entidades laborales para la potenciación del proceso formativo", obtuvo un CVC para el criterio de validez entre 0,72500 y 0,78750; es decir una validez aceptable, aunque dos de los indicadores: "Efectividad de las acciones formativas desarrolladas en el entorno laboral", el más bajo de todos, y "Efectividad de los cambios que se producen en las entidades empleadoras…", presentan valores por debajo de la media (tabla 8).

Tabla 8- Dimensión III "Impacto del vínculo con las entidades laborales para la potenciación del proceso formativo"

El CVC para el criterio de validez de la Dimensión IV "Indicadores sobre el logro de la esencialidad de los contenidos en la adecuación curricular", osciló entre 0,74688 y 0,79063, considerado de aceptable, donde estuvo más afectado el indicador "Efectividad del proceso de identificación de fortalezas y oportunidades que ofrece el contexto para diseñar las estrategias de recuperación", con un CVC para el criterio de validez de 0,74688 (tabla 9).

Tabla 9- Dimensión IV "Logro de la esencialidad de los contenidos en la adecuación curricular"

En la Dimensión V "Indicadores de impacto logrados por la flexibilidad de las adecuaciones curriculares", todos los indicadores presentan un CVC para el criterio de validez superior a 0,74688, considerado de validez aceptable (tabla 10).

Tabla 10- Dimensión V "Impactos logrados por la flexibilidad de las adecuaciones curriculares"

En la Dimensión VI "Efectividad de las acciones formativas realizadas en cada etapa", todos los indicadores tienen un CVC para el criterio de validez de aceptable, solo dos: "Efectividad de las adecuaciones del sistema de actividades de aprendizaje" y "Efectividad de las acciones para garantizar la continuidad en el siguiente curso" están por debajo de la media (tabla 11).

Tabla 11- Dimensión VI "Efectividad de las acciones formativas realizadas en cada etapa"

Y para la Dimensión VII "Indicadores de satisfacción de los participantes en el proceso formativo", todos los indicadores superan el CVC para el criterio de validez de aceptable, aunque dos: "Satisfacción de los docentes con la flexibilidad lograda con las adecuaciones curriculares" y "Satisfacción de la familia de los estudiantes con el proceso de formación durante la etapa de recuperación", presentan una afectación notable respecto a los demás (tabla 12).

Tabla 12- Dimensión VII "Satisfacción de los participantes en el proceso formativo"

DISCUSIÓN

De acuerdo con Hernández y Robaina (2017): "Para la selección de expertos se pueden considerar diferentes vías de acuerdo al tipo de estudio definido por el investigador. Además, puede ser adaptado según las necesidades o comodidades de quienes ejecutan la comprobación" (p. 5).

Siendo así, el cálculo del Coeficiente de Competencia Experta se realizó para que los expertos, como revelan Robles y Rojas (2015), "(…) con su opinión y autovaloración indiquen el grado de conocimiento acerca del objeto de investigación, así como las fuentes que les permiten argumentar y justificar dicho nivel" (p. 2). Dicha técnica nos permitió discriminar de forma adecuada la selección de los expertos, sobre la base de la autovaloración que realizaron respecto al conocimiento que tienen sobre la temática. La totalidad de los expertos consideraron tener altos niveles de argumentación al respecto. El uso de dicha técnica resultó efectivo "(…) mostrando altos niveles de eficacia" (Cabero y Llorente, 2013, p. 12).

En este sentido, conocer la opinión de los expertos seleccionados para autovalorar e indicar el grado de conocimiento que tenían acerca del objeto de investigación, garantizó la calidad de la selección de los mismos, al ser tenidos en cuenta criterios como el ser un profesor con amplio conocimiento y experiencia en esta área particular del conocimiento, con categoría docente de Asistente o superior, con título de Máster como mínimo y con al menos 15 años de experiencia en la Educación Superior, lo cual permitió probar el grado de cohesión de los criterios emitidos por ellos y evidenció que las opiniones emitidas por los expertos con relación al diseño de red propuesto son consistentes.

La categoría docente predominante de los expertos que participaron en el estudio fue la de Auxiliar (53,1 %), mientras que la mayoría tenía el título académico de Máster (65,6 %), el 34,4 % son Doctores en Ciencias, el promedio de años de experiencia en la Educación Superior es de 16 y el 100 % tienen experiencia en el área del conocimiento.

Sobre la base de los criterios de Hernández-Nieto (2002), que establecen que los ítems que obtengan un CVC superior a 0.80 son los que permiten en mayor medida que el instrumento mida el constructo definido, se consideran aceptables aquellos indicadores con un CVC superior a 0.70, siendo este el valor crítico de aceptación del indicador; no se consideraron indicadores inaceptables o deficientes, aunque tampoco indicadores de excelentes, dado que todos estuvieron entre las categorías de aceptable y buena.

El Coeficiente de Validez de Contenido de Hernández-Nieto (2002) permitió evaluar cuantitativamente la Validez de Contenido, utilizando la Técnica de Juicio de Expertos, al mostrar un grado de concordancia y validez significativa de los 32 jueces que participaron en la evaluación de los indicadores y las dimensiones para valorar el impacto de la estrategia de recuperación posCOVID de la Universidad de Pinar del Río "Hermanos Saíz Montes de Oca".

Se comprobó que todos los indicadores elaborados poseen la suficiente validez y confiabilidad, el estar por encima de los valores mínimos, lo que respalda adecuadamente la consistencia interna y la validez de los indicadores. El sistema de indicadores propuesto fue enriquecido con las opiniones de los participantes. Por

todo lo antes expresado, se puede considerar validado el sistema de indicadores para evaluar impacto de estrategia de recuperación posCOVID de la Universidad de Pinar del Río "Hermanos Saíz Montes de Oca".

En conclusión, y según los resultados obtenidos, se presenta una herramienta válida y fiable, que permitirá evaluar el impacto de estrategia de recuperación posCOVID. Universidad de Pinar del Río "Hermanos Saíz Montes de Oca".

Con relación al juicio de expertos, la selección de los expertos, así como el enfoque cualicuantitativo del mismo, se consideran como elementos de alta relevancia para la evaluación y validación de un instrumento (Juárez-Hernández y Tobón, 2018). Por lo anterior, se buscaron expertos con experiencia, suficiente calificación académica y científica y con amplio conocimiento y experiencia en esta área particular del conocimiento.

REFERENCIAS BIBLIOGRÁFICAS

Cabero-Almenara, J., & Barroso-Osuna, J. (2013) "La utilización del juicio de experto para la evaluación de TIC: el coeficiente de competencia experta", Bordón. Revista de Pedagogía, 65(2), pp. 25-38, Recuperado de: https://idus.us.es/xmlui/handle/11441/24562

Cabero-Almenara, J. y Llorente-Cejudo, M.C. (2013). La aplicación del juicio de experto como técnica de evaluación de las tecnologías de la información (TIC). Revista de Tecnología de Información y Comunicación En Educación, 7(2), 1122. https://www.researchgate.net/profile/Julio_Ponce2/publication/272686564_Reingeniería_de_una_Ontología_de_Estilos_de_Aprendizaje_para_la_Creación_de_Objetos_de_Aprendizaje/links/5643a8a308ae9f9c13e05f3a.pdf# page=13

Dobrov, G. M., & Smirnov, L. P. (1972) "Forecasting as a means for scientific and technological policy control", Technological Forecasting and Social Change, 4(1), pp. 5-18. http://dx.doi.org/10.1016/0040-1625(72)90043-1

García, N., Carreño, A., y Doumet, N. (2020). Validación del Modelo de Gestión Sostenible para el Desarrollo Turístico en Vinculación Universidad - Comunidades Manabitas. Ecuador. Investigación y Negocios, 13(21), https://doi:10.38147/inv&neg.v13i21.82

Hernández-Nieto, R. A. (2002). Contribuciones al análisis estadístico Facultad de Ciencias Jurídicas y Políticas, Universidad de Los Andes. Instituto de Estudios en Informática (IESINFO), Mérida, 2002. 119 p.

Hernández, F. y Robaina, J. I. (2017). Guía para la utilización de la metodología Delphi en las etapas de comprobación de productos terminados tipo software educativo. Revista 16 de Abril, 56(263):26-31. http://www.rev16deabril. sld.cu/index.php/16_04/article/view/429/220

Jiménez Chaves, V. E. (2019). Gestión del conocimiento en la educación a distancia. Ciencia Latina. Revista multidisciplinar, 3(1). 156-165. https://ciencialatina.org/index.php/cienciala/article/view/16/9

Juárez-Hernández, L. G. y Tobón, S. (2018). Análisis de los elementos implícitos en la validación de contenido de un instrumento de investigación. Revista Espacios, 39(53), pp. 23-30.

López-Gómez, E. (2018) "El método Delphi en la investigación actual en educación: una revisión teórica y metodológica". Educación XX1, 21(1), pp. 17-40. http://dx.doi.org/10.5944/educXX1.15536

Quezada, G., Castro-Arellano, M., Oliva, J., Gallo, C., y Quesada-Castro, M. (2020). Método Delphi como Estrategia Didáctica en la Formación de Semilleros de Investigación. Revista Innova Educación, 2(1), 78-90. https://doi:10.35622/j.rie.2020.01.005.

Robles Garrote, P. y Rojas, M. D. C. (2015). La validación por juicio de expertos: dos investigaciones cualitativas en Lingüística aplicada. Revista Nebrija de Lingüística Aplicada a La Enseñanza De Lenguas, 9(18), pp. 124-139. https://revistas.nebrija.com/revista-linguistica/article/view/259/227

Solans-Domenech, M., Pons, J. M. V., Adam, P., Grau, J. y Aymerich, M. (2019). Development and Validation of a Questionnaire to Measure Research Impact, Research Evaluation, 28(3), 253-262. https://doi:10.1093/reseval/rvz007

Zartha-Sossa, J. W., Montes-Hincapié, J. M., Toro-Jaramillo, I. D., Hernández-Zarta, R., Villada-Castillo, H. S., & Hoyos-Concha, J. L. (2017). "Método Delphi en estudios de prospectiva tecnológica: una aproximación para calcular el número de expertos y aplicación del coeficiente de competencia experta k", Biotecnología en el Sector Agropecuario y Agroindustrial, 15(1), pp. 105-115. http://dx.doi.org/10.18684/BSAA(15)105-115

Anexo A- Dimensiones e indicadores para evaluar el impacto de la estrategia de recuperación posCOVID de la UPR.

Dimensión I. Reducción de riesgos epidemiológicos

Indicadores

1. Efectividad de las acciones de distanciamiento físico en el desarrollo de las actividades docentes y no docentes.
2. Efectividad de las acciones para la protección y el mantenimiento de la higiene en las residencias.
3. Efectividad de las acciones para la protección y el mantenimiento de la higiene en la cocina-comedor.
4. Efectividad de las acciones de protección de la salud durante la estancia en la Universidad.
5. Efectividad de las acciones de comunicación establecidas con respecto a la COVID-19.
6. Cambio que se produce en la percepción del riesgo epidemiológico que se corre.

Dimensión II. Indicadores de impacto de la estrategia docente

1. Efectividad del programa de capacitación a líderes académicos de los diferentes niveles en la Universidad de Pinar del Río "Hermanos Saíz Montes de Oca".
2. Efectividad del uso de la plataforma Moodle en el pregrado (incluye los espacios para consulta y asesoría metodológica a los docentes).
3. Efectividad del uso de la plataforma Moodle en el posgrado (incluye los espacios para consulta y asesoría metodológica a los docentes).
4. Efectividad del uso de los locales disponibles en correspondencia con las matrículas.
5. Efectividad en la determinación de las invariantes de formación (problemas profesionales) que guían la adecuación de los programas en cada disciplina, en el año y la carrera.
6. Efectividad en la determinación de las invariantes de contenido que guían la adecuación de los programas en cada asignatura, en el año y la carrera.
7. Efectividad en la determinación de los métodos de enseñanza-aprendizaje en las condiciones de escenario de crisis prolongada (mayor autogestión del aprendizaje, ajustes que no impliquen inequidad por diferencias de acceso a la información o a las tecnologías).
8. Efectividad del uso del sistema de evaluación en las condiciones de rediseño de los programas (incluye la potenciación de la evaluación integradora apoyada en las nuevas tecnologías).
9. Efectividad en los ajustes para el cumplimiento de la categoría pedagógica educación en los nuevos escenarios posCOVID (saludo con distanciamiento, niveles de expresión del afecto y la solidaridad restringidos).
10. Efectividad de la sensibilización real con el cumplimiento de la estrategia por alumnos y profesores.
11. Efectividad del proceso comunicacional establecido entre la universidad y las entidades laborales.

Dimensión III. Indicadores sobre el impacto del vínculo con las entidades laborales para la potenciación del proceso formativo

1. Efectividad de la participación de los organismos empleadores en la determinación de las invariantes de formación y de contenido en correspondencia con su esencialidad para el empleo.
2. Efectividad en el uso de las potencialidades de los CUM para el desarrollo del proceso formativo.
3. Efectividad en el uso de las potencialidades de los CUM como ente articulador entre los organismos empleadores y la Universidad de Pinar del Río "Hermanos Saíz Montes de Oca" para el desarrollo del proceso formativo.
4. Efectividad de las acciones formativas desarrolladas en el entorno laboral.
5. Efectividad de las tutorías y asesorías en función del proceso formativo desarrolladas por los especialistas del mundo laboral.
6. Efectividad de los cambios que se producen en las entidades empleadoras en condiciones de crisis prolongada, que potencien el proceso formativo de los estudiantes para enfrentar la referida crisis.

Dimensión IV. Indicadores sobre el logro de la esencialidad de los contenidos en la adecuación curricular

1. Efectividad en la selección de los contenidos que son fundamentales para el logro de los objetivos previstos en el Modelo del Profesional de la carrera.
2. Efectividad en la determinación por disciplinas y asignaturas del enfoque y alcance en el abordaje de los contenidos que tributan a la solución de problemas profesionales esenciales (invariantes de formación) para el contexto laboral específico de cada carrera.
3. Concepción adecuada en la dirección del proceso de enseñanza-aprendizaje del aporte de cada asignatura del año y la carrera al desarrollo de habilidades esenciales.
4. Adecuada secuencia lógica y pedagógica de los contenidos.
5. Apropiada unidad de la lógica de la ciencia entre la disciplina y la asignatura.
6. Logro de un enfoque intra, inter y transdisciplinarios en la estructuración de las asignaturas sobre la base de las invariantes de formación y de contenido.
7. Efectividad en la planificación de actividades con fines formativos que refuercen la identificación y solución de problemas propios de la profesión.

Dimensión V. Indicadores de impacto logrados por la flexibilidad de las adecuaciones curriculares

1. Efectividad de la contextualización del Plan de Estudio de la carrera a las necesidades del territorio, al desarrollo del claustro y a los intereses de los estudiantes.
2. Medida en que se favorecen los tiempos de formación en las adecuaciones, en correspondencia con las particularidades de los estudiantes, los claustros y los contextos.
3. Efectividad del proceso de identificación de fortalezas y oportunidades que ofrece el contexto para diseñar las estrategias de recuperación.
4. Efectividad de la variante de flexibilización utilizada (coherencia entre las etapas de la formación continua y los tipos de contenidos curriculares durante la actualización permanente del Plan de Estudio).

Dimensión VI. Efectividad de las acciones formativas realizadas en cada etapa

1. Efectividad del diagnóstico integral de las condiciones existentes para desarrollar un proceso de formación, en función del objeto de la profesión y del logro de los modos de actuación profesional.
2. Efectividad de la determinación de las invariantes de formación más generales y frecuentes inherentes al objeto de la profesión en la carrera.
3. Efectividad de las adecuaciones, en función de desarrollar el proceso de formación de los modos de actuación profesional.
4. Efectividad de la estructuración de los contenidos esenciales del programa de cada disciplina en relación con los problemas profesionales determinados en la carrera.
5. Efectividad de las adecuaciones del sistema de actividades de aprendizaje (se incluyen las respuestas a la esencialidad de los contenidos del programa).
6. Efectividad del trabajo del colectivo de año en la puesta en práctica de las adecuaciones.
7. Efectividad de las acciones para garantizar la continuidad en el siguiente curso.
8. Efectividad de la entrega pedagógica en la continuidad de estudio.
9. Efectividad de los cambios que se producen en los estudiantes como consecuencia de las acciones formativas desarrolladas

Dimensión VII. Indicadores de satisfacción de los participantes en el proceso formativo

1. Satisfacción de los estudiantes con la combinación de la presencialidad y la semipresencialidad para el desarrollo de las actividades docentes.
2. Satisfacción de los estudiantes con la adecuación curricular.
3. Satisfacción de los estudiantes con los contextos de formación.
4. Satisfacción de los estudiantes con la flexibilidad lograda con las adecuaciones curriculares.
5. Satisfacción de los docentes con la flexibilidad lograda con las adecuaciones curriculares.
6. Satisfacción de los organismos empleadores con las acciones desarrollas.
7. Satisfacción de la familia de los estudiantes con el proceso de formación durante la etapa de recuperación.

Conflicto de intereses:

Los autores declaran no tener conflictos de intereses.

Contribución de los autores:

Los autores han participado en el diseño y redacción del trabajo, y análisis de los documentos.

Esta obra está bajo una licencia de Creative Commons Reconocimiento-NoComercial 4.0 Internacional
Copyright (c) Benito Bravo Echevarría, Carlos Luis Fernández Peña