El departamento de CSE está comprometido con la excelencia en la educación en Ciencias de la Computación e Ingeniería, Ingeniería de Software, y la aplicación moderna de la computación. Para ello, nuestros programas académicos deben estar siempre alineados con las tendencias y estándares modernos de la disciplina, y con las mejores prácticas reconocidas para formar profesionales confiables y exitosos. Por ello, hemos establecido un proceso de mejora continua que tiene como objetivo evaluar el desempeño de los programas de CSE y SWE para ayudarnos a diseñar e implementar las acciones de mejora necesarias para estar siempre alineados con este compromiso. Además, en ambos programas académicos, el proceso de mejora continua es aún más crucial por las siguientes razones:

• La disciplina de las Ciencias de la Computación y sus áreas de aplicación evolucionan rápida y continuamente, no sólo en la obtención de nuevos conocimientos sino también en su impacto en la sociedad moderna.
• Debemos garantizar siempre a nuestros alumnos sean capaces de cumplir con sus deberes profesionales de manera adecuada y confiable, y que sean capaces de evolucionar en conocimientos a medida que la disciplina evoluciona para poder continuar con su contribución al crecimiento de nuestra sociedad a través del ejercicio de la profesión.

En resumen, el proceso de mejora continua está diseñado para garantizar que nuestros programas permitan a nuestros estudiantes adquirir un conjunto de competencias fundamentales que todo profesional de la disciplina debe tener.

Para dirigir este esfuerzo de mejora continua, el departamento de CSE ha creado el Comité de Evaluación y Mejora Continua (CAIC), compuesto por:

1. 1. Presidente del Departamento
   2. Coordinador de evaluación
   3. Asistente administrativo

Dado que nuestros programas son relativamente nuevos, empezamos a diseñar y aplicar un plan de evaluación desde el principio. El plan en sí mismo también ha sido objeto de revisión y mejora continuas. En las siguientes secciones, detallamos nuestro plan de evaluación y mejora continua para garantizar la consecución de los SOs y cómo lo hemos utilizado hasta ahora para implementar acciones de mejora específicas en cursos concretos. También presentaremos algunas acciones de mejora transversales que hemos implementado recientemente o que están en proceso de implementación.

El plan de estudios en nuestros programas es el componente que más peso tiene en el cumplimiento de los resultados de los estudiantes del programa, nuestro plan se concentra en la mejora continua de todos nuestros cursos, especialmente los cursos básicos que son gestionados por el Departamento (cursos con código CIIC o INSO). El plan tiene dos componentes:

Tabla 1: Componentes de la estrategia de evaluación

En las siguientes subsecciones, describimos ambos componentes en detalle.

Valoración Directa, Evaluación y Mejoramiento de los Cursos Básicos

Como se ha descrito anteriormente, cada curso tiene su propia lista de Resultados de Aprendizaje del Curso (CLOs), que representan las habilidades fundamentales que el curso permitirá a los estudiantes adquirir, basándose en los temas y actividades particulares del curso. Además, cada CLO se relaciona con uno o más SOs que se ven directamente afectados por las habilidades asociadas con el CLO. Este esquema nos permitirá evaluar no sólo el rendimiento del curso en términos de sus propios CLO, sino también su rendimiento con respecto a los SOs que se ven afectados. Por lo tanto, en el proceso de evaluar un curso y determinar las acciones de mejora, los CLOs del curso se utilizan como indicadores de rendimiento.

Este enfoque ha sido atractivo para nuestro profesorado, ya que simplifica el trabajo necesario para preparar actividades de evaluación específicas que estén alineadas con los CLO específicos, y a través de las cuales se puede medir el rendimiento del curso. También nos ayuda a mantener la uniformidad en un curso determinado cuando varios miembros del profesorado imparten diferentes secciones, ya que los CLOs proporcionan un marco para construir actividades educativas comunes. Los datos de evaluación de todos los cursos son evaluados por el CAIC para proponer acciones al profesorado del Departamento de CSE para mejorar el rendimiento del curso.

La tabla 2 muestra el caso de un curso básico en particular, CIIC 3011 – Introducción a la programación de ordenadores 1. Muestra cada uno de los cinco CLOs para este curso y los SOs del programa que cada CLO impacta. La expectativa es que al lograr un CLO particular en el curso, el estudiante estará adquiriendo habilidades particulares que contribuyen a uno o más SOs como se especifica en la tabla.

Tabla 2: CLOs para el curso CIIC 3011

Cuando un curso está bajo evaluación, se espera que los profesores a cargo definan cómo se medirán y evaluarán los CLOs del curso. Este esfuerzo se hará en conjunto con el CAIC. Si hay varios profesores a cargo de varias secciones del curso, se espera que coordinen este esfuerzo, de modo que todas las secciones utilicen los mismos instrumentos de evaluación. Dichos instrumentos son actividades que van a ser calificadas y forman parte del trabajo utilizado en el curso para determinar la nota final de los alumnos. Por ejemplo, pueden ser

1. 1. Quizzes
   2. Ejercicios específicos en los exámenes
   3. Trabajos en casa
   4. Proyectos
   5. Trabajos de laboratorio
   6. Informes escritos
   7. Presentaciones orales

Cada uno de estos instrumentos está orientado a medir un CLO en particular, así como los SOs en los que influye el CLO. Se trata de una medida de cómo los estudiantes que aprobaron el curso se desempeñaron en cada CLO sobre la base del trabajo calificado seleccionado. Este proceso de evaluación incluirá al menos una actividad para cada CLO. Todas las puntuaciones de cada estudiante se normalizan a 100 como valor máximo posible en cada una de dichas actividades. Entonces, si hay m actividades destinadas a medir un determinado CLO x, la máxima puntuación posible que puede obtener un estudiante para ese CLO sería 100m. El porcentaje correspondiente a la puntuación total alcanzada por el alumno en esas actividades calificadas que miden el CLO x se utiliza para medir el nivel alcanzado por el alumno concreto en el CLO x. Obsérvese que este valor es igual a la media de esos m valores que obtiene el alumno. A continuación se ilustra esto utilizando algunas notaciones y fórmulas.

Para que un estudiante se considere «en buen nivel para el CLO x», ese valor final tiene que ser ≥ 70.

El enfoque anterior también se aplica a las SOs de un curso para medir el rendimiento del curso en términos de las SOs a las que contribuye. Esto se describirá con más detalle en una próxima subsección.

Para obtener una medida final del rendimiento de un CLO x en el curso, utilizamos la siguiente métrica: el porcentaje de estudiantes que aprueban y que terminan en buen nivel con respecto al CLO x.

Los mapas de los cursos son aquellos para los que se espera que el curso contribuya con el conjunto particular de habilidades que los estudiantes habrían adquirido al alcanzar sus CLOs. La Tabla 3 detalla el mapeo real de los CLOs de los cursos básicos de CSE con los resultados de los estudiantes. Los números en cada celda son CLOs específicos del curso en particular que representan habilidades alineadas con (o que impactan) el SO particular que la columna representa. Una celda en blanco significa que el curso en cuestión no incide en el resultado estudiantil concreto.

Tabla 3: Asignación de los CLOs a los SOs de los cursos básicos que son comunes en los programas de CSE y SWE.

Tabla 3.a: Asignación de los CLOs a los SOs de los cursos básicos que son únicos en el programa de CSE.

Tabla 3.b: Asignación de los CLO a los SOs de los cursos básicos que son únicos en el programa de SWE.

Según las tablas, las actividades utilizadas para medir el rendimiento de los CLOs también se utilizan para medir el rendimiento de los SOs, y eso se hace siguiendo el mismo enfoque. Por ejemplo, para el curso CIIC 3011, las actividades de evaluación utilizadas para evaluar los CLOs 1 y 2 se combinan para evaluar el SO 4 en ese curso, y las utilizadas para evaluar los CLOs 3, 4 y 5 se combinan para evaluar el SO 6. Un estudiante que apruebe el curso estará en buen nivel con respecto a un SO j en particular si obtiene al menos un 70% en las actividades calificadas correspondientes. Finalmente, para medir el rendimiento de un SO j en particular en el curso, utilizamos la siguiente métrica: el porcentaje de estudiantes que aprueban y que están en buen estado con respecto al SO j.

En esta subsección, discutimos los detalles del proceso cíclico que se ha establecido para el proceso de evaluación y mejora continua de los cursos básicos. También discutimos el mecanismo de recogida de datos y la evaluación del curso de culminación.

Detalles Fundamentales del ciclo de Evaluación/Actuación

Con el fin de garantizar la evaluación oportuna y frecuente y la mejora continua de todos los cursos básicos, al tiempo que se minimiza la carga de trabajo adicional impuesta a nuestro profesorado, hemos dividido nuestros cursos en cuatro grupos de acuerdo con la forma en que se planea ofrecer cada curso en los planes de estudio del programa. Cada semestre centramos nuestros esfuerzos de mejora en uno solo de estos grupos, siguiendo un enfoque de ida y vuelta. Así, todos los cursos deben haber sido evaluados cada dos años. Y durante cada uno de esos ciclos de dos años, tendremos la oportunidad de aplicar las acciones de mejora propuestas para cada curso básico en cada oferta del curso como parte del proceso de mejora continua. Los cursos que se ofrecen cada semestre tendrán cuatro semestres para implementar esas acciones antes de la próxima vez que se sometan a una evaluación directa según nuestro plan de evaluación. Los que se ofrecen cada dos semestres, tendrán al menos dos semestres para implementar esas acciones.

Basándonos en los planes de estudio actuales de nuestros programas, cada uno de los cursos básicos debe ofrecerse al menos como se ilustra en las últimas cuatro columnas de la Tabla 4. En la práctica, la demanda puede ser alta, de ahí que las dos primeras columnas muestren si, históricamente, el curso se ha ofrecido en ambos semestres de un año académico, o sólo en uno. Las últimas cuatro filas de la tabla muestran tres cursos que no son básicos para el programa de CSE, pero sí para el Programa de Ingeniería de Software (SWE), nuestro otro programa de grado. Estos cursos son INSO 4115, INSO 4116, INSO 4117 e INSO 4151. Elegimos mostrarlos aquí para completarlos, porque nuestro proceso de evaluación está integrado en ambos programas.

Tabla 4: Calendario de los Cursos Básicos

Leyenda: una celda en blanco indica que el curso no está previsto que se ofrezca en el semestre concreto del año concreto correspondiente a la columna de la celda; una marca de verificación indica que el curso está previsto que se ofrezca en el año/semestre concreto y que es un curso troncal de ambos programas; la s significa que el curso es troncal sólo del programa SWE; la c indica que es un curso troncal sólo del programa CSE.

Basándonos en la tabla anterior, hemos dividido los cursos básicos en cuatro grupos. Cada grupo corresponderá a un conjunto de cuatro cursos que se ofrecerán en el mismo semestre. Los grupos de cursos, así como los semestres en los que está previsto que se evalúen, se muestran en la Tabla 5.

Tabla 5: Calendario de evaluación de cada grupo de cursos

Además de estos cuatro grupos, los cursos capstone de cada programa gestionado por el departamento de CSE (CSE y SWE) van a ser evaluados en cada semestre que se ofrezcan (Más adelante se habla de la evaluación del curso capstone).

Debido a que iniciamos nuestra evaluación de los cursos utilizando un esquema diferente al que se describe aquí (según los cambios aprobados por el Departamento de CSE en marzo de 2019), tuvimos que reajustar nuestros esfuerzos con el fin de entrar en el ciclo de evaluación previsto. La tabla 6 muestra los cursos tal y como han sido evaluados o serán evaluados en 8 semestres consecutivos desde 2018 hasta 2021. Los grupos de la tabla se basan en los grupos descritos anteriormente y tal como fueron aprobados por el Departamento de CSE en la primavera de 2019. En nuestros grupos originales, CIIC 3075 no formaba parte del Grupo 1, pero CIIC 3081 y CIIC 4050 sí. Es por ello que esos cursos adicionales que aparecen en el semestre concreto se muestran con un «+» o un «-« como prefijo. El primer caso (+) indica que el curso fue evaluado además de los cursos que ahora están en el Grupo 1. El otro (-) indica que el curso no fue evaluado durante ese semestre. En la primavera de 2019, la tabla muestra «+c3075» además del Grupo 2. Esto se debe a que en ese semestre estábamos haciendo la evaluación directa de los cursos del Grupo 2, pero necesitábamos añadir el curso CIIC 3075 para sincronizar con el nuevo ciclo de evaluación. Luego, a partir del otoño de 2019, todas las actividades de evaluación estarán completamente sincronizadas con el plan; es decir, sólo los cursos de un grupo particular estarán en evaluación directa en un semestre particular según nuestro plan de evaluación. La tabla también destaca que el curso Capstone estará bajo evaluación directa en cada ocasión que se ofrezca.

Tabla 6: Calendario de evaluación de 2018 a 2021

En un semestre concreto, nuestro esfuerzo se concentrará en el grupo de cursos que corresponde a ese semestre según el plan. Los datos y resultados de la evaluación serán recogidos por los profesores que imparten los cursos concretos. Esos datos serán evaluados por el CAIC, en conjunto con los profesores que imparten el curso. A partir de ese análisis, se tomarán decisiones para las acciones de mejora necesarias en cada curso particular. Dichas acciones se implementarán en los sucesivos semestres en los que se ofrezca el curso. Todo el profesorado será informado de los resultados y consultado sobre aquellas acciones que puedan requerir la aprobación del departamento.

Figura 1: Plan de evaluación del CSE

La figura 1 resume el ciclo general de evaluación y mejora de los cursos por semestre. El proceso de evaluación de cada curso del grupo de cursos que se evalúa en un semestre concreto es el siguiente.

En esencia, la evaluación individual del curso se consigue fundamentalmente midiendo el rendimiento de los estudiantes que lo superan en todos los OEC del curso. Utilizando esos datos, y el mapeo preestablecido de los CLOs del curso a los SOs, también se obtienen los resultados midiendo su desempeño en términos de los SOs a los que se espera que el curso contribuya. El CAIC, junto con el profesorado que imparte el curso, analizará las posibles razones de aquellos uno o dos CLOs, así como los SOs, que presenten valores de rendimiento más bajos. A continuación, se desarrolla un plan de mejora, que puede incluir la modificación de las actividades existentes del curso o la incorporación de otras nuevas, para mejorar el rendimiento de los estudiantes en esos resultados más débiles.

Retiros departamentales para la evaluación y la mejoramiento continuo

El departamento de CSE se compromete a organizar un retiro del profesorado al menos una vez al año. El retiro incluirá en el orden del día las siguientes tareas importantes relativas al proceso de mejora continua:

Informar del estado de la participación del profesorado en el proceso de evaluación de los dos grupos de cursos que han sido objeto de evaluación directa en los dos semestres anteriores.
Informar de los datos de evaluación que se han recogido durante los dos semestres anteriores.
Informar de los resultados de la evaluación preliminar basada en los datos de evaluación recogidos que debe haber realizado el CAIC.
Discutir y aprobar las acciones de mejora continua recomendadas por la CAIC y el profesorado.
Otras cuestiones nuevas.

Algunos temas urgentes pueden ser presentados y discutidos también en las reuniones ordinarias de departamento. Para ello, en cada reunión ordinaria de departamento se incluirá en el orden del día un punto abierto para debatir cuestiones relevantes relacionadas con el proceso de mejora continua.

Mecanismo de recolección de datos

El CAIC es consciente de que la participación del profesorado es crucial en este proceso de evaluación. Y también, que cuanto más trabajo adicional imponga el proceso a ese profesorado, menos animado estará a aportar su parte de evaluación de forma efectiva.  Teniendo esto en cuenta, la CAIC ha preparado unos formularios de Google Sheet que el profesorado puede utilizar para facilitar la presentación de los datos de los cursos objeto de evaluación. A partir de ese formulario, una vez enviados los datos, se generan automáticamente los resultados para cada uno de los OEC del curso en base a lo discutido previamente. Esos formularios también mostrarán el rendimiento de cada SO afectado por el curso en base a los datos proporcionados.

Hemos creado un formulario específico para cada curso para rellenar los datos de los estudiantes de las actividades del curso. Cuando el curso está en evaluación, ese formulario se comparte con el profesorado que imparte el curso, para que pueda introducir los datos una vez finalizado el semestre. Veremos casos concretos de los resultados generados con estos formularios cuando hablemos de resultados específicos en una sección posterior de este informe. El formulario completo estará disponible para su revisión, incluyendo aquellos con datos específicos para los cursos que ya han pasado por la evaluación directa, durante los días de la visita al sitio o según lo soliciten los evaluadores del programa.

Para cada curso, el CAIC ha creado una plantilla correspondiente al Informe de Evaluación del Curso de la Facultad (FCAR). Esta plantilla permite a los profesores responsables del curso presentar un resumen de los resultados de la evaluación de su curso. Ese informe se utiliza posteriormente para determinar las acciones de mejora según la discusión anterior.  El FCAR proporciona un resumen de los logros de las CLO y las SO en el curso. Se espera que se presente un solo FCAR que resuma los resultados en todas las secciones del curso; ya sea que se trate de un solo profesor o de varios profesores que ofrezcan el curso durante el semestre. La eventual evaluación y las decisiones de mejora basadas en esa evaluación serán realizadas por el CAIC en conjunto con todos los profesores que imparten el curso.

En este momento el FCAR es todavía un documento de trabajo, por lo que cabe esperar modificaciones en un futuro próximo. Actualmente, el formulario incluye tres partes esenciales. Estas son

1. 1. Cobertura de los Temas en el Curso – Se trata de una medida del nivel de cobertura del tema particular en el semestre que se informa, basado en lo que se espera en el curso particular. El propósito de estos datos es determinar qué temas se dejan de lado constantemente y tomar decisiones basadas en ese conocimiento.
   2. Evaluación de los Resultados de Aprendizaje del Curso utilizando el Trabajo Calificado – Esto corresponde a la evaluación de los CLOs como se describió anteriormente. Para un curso que tiene n CLOs, esa tabla sería la siguiente:

Algunas de nuestras secciones son realizadas por estudiantes matriculados en diferentes programas de licenciatura: Ciencias de la Computación e Ingeniería (CSE), Ingeniería de Software (SWE), o Ingeniería Informática (CE). En aquellos cursos que tienen estudiantes de más de un programa de pregrado, necesitaremos replicar esta tabla como máximo cuatro veces: una para todo el grupo de estudiantes que toman el curso, y una separada para cada uno de esos tres programas académicos. Para ello, utilizamos el código de programa proporcionado por el registro en la lista oficial de estudiantes matriculados en el curso para separar fácilmente a los estudiantes por programa. Este enfoque permite hacer un seguimiento del progreso de las CLO en todos los programas y de forma individual.

3. Acciones de mejora propuestas – Son las acciones que se proponen preliminarmente para la mejora del curso en los CLOs seleccionados. Inicialmente son propuestas por los propios profesores, pero serán analizadas en conjunto con el CAIC para finalmente determinar las acciones finales.

La plantilla completa del FCAR, así como una muestra de FCARs de evaluaciones recientes, estarán disponibles para su revisión en el momento de la visita o a petición de los evaluadores.

Los cursos de nuestros programas están sometidos a una evaluación constante con el fin de medir cómo debe mejorarse cada curso para cumplir con éxito el papel que tienen los cursos particulares en todo el programa académico. Como se ha explicado anteriormente, medimos cómo los estudiantes que aprueban el curso lo hacen con respecto a los CLOs del curso en particular. Eso se mapea con los SO, en base a los que impacta cada CLO. Además, la determinación final de si nuestros estudiantes que se gradúan están alcanzando las habilidades necesarias para lograr los resultados de los estudiantes se basa en cómo se desempeñan en su curso de capstone. Por lo tanto, el curso de culminación será evaluado cada vez que se ofrezca. En cada una de estas ofertas, medimos el rendimiento de los estudiantes en cada uno de los resultados.

En el caso del curso de culminación, no hay CLOs per se. En su lugar, medimos el rendimiento de los estudiantes en cada uno de los SOs basándonos en las siguientes actividades:

1. 1. Propuesta de proyecto por escrito
   2. Informes escritos del proyecto
   3. Presentaciones orales del proyecto
   4. Demostraciones de los artefactos del proyecto (por ejemplo, aplicación móvil, herramienta de software, aplicación web)

Para cada una de estas actividades, los instructores del curso disponen de un instrumento de evaluación que puntúa el contenido técnico, las habilidades de presentación, la innovación, las cuestiones sociales/éticas y las técnicas y herramientas de desarrollo de software utilizadas para implementar la solución. Este instrumento asigna las actividades clave directamente a las SOs del programa. Las puntuaciones de todas las actividades realizadas durante el semestre se acumulan, se promedian y se asignan a las SOs. A continuación, se convierten en una puntuación porcentual. Actualmente utilizamos el 70% como la puntuación mínima que indica que el rendimiento de los estudiantes es adecuado para una SO determinada. Una puntuación inferior a esta inicia un proceso para profundizar en las posibles acciones que deben tomarse para mejorar el programa.

Nuestro objetivo a partir de la evaluación de un curso en particular es identificar qué SOs específicos en los que incide el curso muestran un rendimiento inferior a la media. Por lo tanto, no hemos establecido ningún umbral adicional para establecer si el rendimiento en un resultado del estudiante es adecuado o no para un curso en particular. Nuestro objetivo es encontrar siempre alguna área de mejora, aunque sea menor, centrándonos en aquellos CLOs y SOs que muestren el rendimiento más bajo en el curso. Si varios CLOs o SOs son muy bajos en un curso en particular, tratamos de identificar cuáles son los CLOs más relevantes para mejorar. Esperamos que si mejoramos en un CLO en particular pueda tener un impacto positivo en otros CLO también.

El departamento de CSE está comprometido con la excelencia en la educación en Ciencias de la Computación e Ingeniería, y sus aplicaciones fundamentales. Para ello, nuestros programas deben estar siempre alineados con las tendencias y estándares modernos de la disciplina y con las mejores prácticas reconocidas para producir profesionales de éxito en la disciplina. Para lograr ese objetivo de la mejor manera posible, hemos establecido un proceso de evaluación y mejora continua que mide periódicamente el nivel de logro alcanzado por los cursos individuales, así como por los planes de estudio en su conjunto a lo largo de un conjunto de Resultados de Aprendizaje del Estudiante.

Aquí presentamos el plan de evaluación para los dos programas de grado que alberga el departamento de CSE. Estos son el BS en Ciencias de la Computación e Ingeniería, y el BS en Ingeniería de Software. Este proceso de evaluación y mejora continua es fundamental por las siguientes razones:

1. La disciplina de Ciencias de la Computación es una disciplina que evoluciona rápidamente, no sólo en la derivación de nuevos conocimientos, sino también en el impacto que la disciplina tiene en la sociedad moderna.
2. Debemos garantizar en todo momento a nuestros alumnos que son capaces de desempeñar sus funciones profesionales de forma satisfactoria y confiable. Y además, que sean capaces de evolucionar en conocimientos a medida que evoluciona la disciplina para poder seguir contribuyendo al crecimiento de nuestra sociedad a través del ejercicio de su profesión.

Nuestro proceso de evaluación y mejora continua está diseñado para garantizar que nuestros programas permitan a nuestros estudiantes adquirir un conjunto de habilidades fundamentales que todo profesional de la disciplina debe poseer.  Estas habilidades se recogen en los resultados de aprendizaje de los estudiantes (SLO) compartidos por los dos programas académicos. Para ambos programas, el departamento de CSE ha decidido que esos SLO sean los siguientes

(a) Capacidad para aplicar los conocimientos de informática y matemáticas (en la solución de problemas…) adecuados a los resultados de los estudiantes del programa y a la disciplina

(b) Capacidad para analizar un problema e identificar y definir los requisitos informáticos adecuados para su solución, incluyendo el diseño y la realización de experimentos con este fin

(c) Capacidad para diseñar, implementar y evaluar un sistema, proceso, componente o programa informático para satisfacer las necesidades deseadas, incluyendo: económicas, medioambientales, sociales, políticas, éticas, de salud y seguridad, de fabricación y de sostenibilidad.

(d) Capacidad de funcionar eficazmente en equipos multidisciplinarios para lograr un objetivo común

(e) Comprensión de las cuestiones y responsabilidades profesionales, éticas, jurídicas, de seguridad y sociales.

(f) Capacidad para comunicarse eficazmente con una serie de audiencias

(g) Capacidad para analizar el impacto local y global de la informática en los individuos, las organizaciones y la sociedad

(h) Reconocimiento de la necesidad de un desarrollo profesional continuo y la capacidad de participar en él.

(i) Capacidad para utilizar las técnicas, habilidades y herramientas actuales necesarias para la práctica de la informática.

(j) Capacidad para aplicar los fundamentos matemáticos, los principios algorítmicos y la teoría de las ciencias de la computación en el modelado y el diseño de sistemas basados en la computación de forma que se demuestre la comprensión de las ventajas y desventajas que conllevan las decisiones de diseño.

(k) Capacidad para aplicar los principios de diseño y desarrollo en la construcción de sistemas informáticos de diversa complejidad.

(l) Conocimiento de los problemas actuales.

Dado que los planes de estudio de nuestros programas son el componente que más responsabilidad tiene en el cumplimiento de los resultados de aprendizaje de los estudiantes mencionados, nuestro plan se concentra en la mejora continua de todos nuestros cursos. Esa mejora se basará en los resultados de la evaluación periódica de los cursos, tal y como establece el plan de evaluación. Cada curso incluye resultados específicos de aprendizaje de los estudiantes, denominados Resultados de Aprendizaje del Curso (CLO), que a menudo son específicos de los temas que cubre el curso. Todos los CLOs de nuestros cursos se han incorporado a los correspondientes programas de los cursos, que están disponibles públicamente en nuestro sitio web para todos nuestros estudiantes y constituyentes.  Para garantizar que todos los resultados del aprendizaje de los estudiantes se abordan en al menos un curso, cada CLO se asigna a la lista de SLOs que afecta. La siguiente tabla muestra parte de esa asignación; la versión completa se encuentra aquí.

La tabla relaciona cada curso con los SLOs del programa. En la segunda columna, hemos incluido el número de CLOs que tiene el curso en la fila particular. Además, para cada SLO del programa, la tabla incluye una columna. El número en cada celda corresponde al número de CLOs en el curso en particular que impactan en el SLO del programa correspondiente. Las celdas en blanco implican que el curso en cuestión no afecta al SLO del programa en cuestión.

Por último, esperamos que nuestros estudiantes sean capaces de demostrar que han alcanzado los SLOs del programa al menos cuando trabajen en su correspondiente curso de culminación. Por lo tanto, el curso de culminación desempeñará un papel crucial en la evaluación de todo el programa. A partir de los resultados obtenidos en ese curso, podremos decidir las acciones de mejora que puedan ser necesarias en los planes de estudio correspondientes.

Para garantizar una evaluación oportuna y frecuente de todos los cursos, minimizando al mismo tiempo la carga de trabajo adicional impuesta a nuestro profesorado, hemos dividido nuestros cursos en seis grupos según las subdisciplinas de la informática. Cada año centramos nuestros esfuerzos de mejora en uno solo de estos grupos, por lo que el profesorado que participa en la evaluación y en los esfuerzos de mejora estará formado en su mayoría por profesores de una sola área disciplinar. Los grupos de cursos se evalúan de forma rotatoria. Por lo tanto, todos los cursos deben haber sido evaluados y mejorados cada cinco años. Hemos identificado los siguientes cinco grupos de cursos que dividen nuestros cursos en áreas subdiciplinarias como sigue:

La evaluación directa de las asignaturas se inició en el curso 2017-2018. A partir de ese año, nos concentraremos en realizar la evaluación directa de los cursos pertenecientes al Grupo 1. Y el proceso se repetirá de forma rotatoria cada cinco años. El curso de culminación será objeto de evaluación en cada ocasión que se ofrezca. La siguiente figura resume el proceso cíclico que hemos implementado para evaluar los cursos y el conjunto de los programas. Después de esos primeros cinco años, el proceso se repite comenzando de nuevo con el conjunto de cursos del Grupo1, cada cinco años después de 2017.

En un año académico concreto, nuestro esfuerzo se concentrará en el grupo de cursos que corresponde a ese año académico. Los datos y resultados de la evaluación serán recogidos por los profesores que imparten los cursos concretos. Dichos datos serán evaluados por el Comité CAI, conjuntamente con los profesores que imparten el curso. A partir de ese análisis, se deciden las acciones de mejora necesarias en cada curso concreto. Dichas acciones se implementarán en el siguiente semestre en que se ofrezca el curso. Todo el profesorado será informado de los resultados, y consultado sobre aquellas acciones que puedan requerir la aprobación del departamento.

La siguiente figura resume el ciclo general de evaluación y mejora por curso académico.

Los siguientes recuadros describen detalladamente el proceso de evaluación y mejora del curso, de un año de duración, incluyendo los plazos de cada actividad:

Retiro departamental de evaluación y mejoramiento continuo:

Informar de los resultados a todo el profesorado y debatir cuestiones generales sobre el proceso de evaluación y mejora continua. Todos los miembros del profesorado tendrán la oportunidad de proponer y aprobar nuevas acciones de mejora generales tanto para los cursos como para el propio proceso de mejora.

Del proceso anterior, la parte propia de las actividades de evaluación y mejora durante los dos semestres se resume en la siguiente figura.

En esencia, la mejora individual del curso se consigue fundamentalmente midiendo el rendimiento en todos los resultados de aprendizaje del curso por parte de los estudiantes que lo aprueban. Se selecciona un subconjunto de resultados de aprendizaje del curso que obtienen los niveles de rendimiento más bajos como candidatos a la mejora.  Entonces, se desarrolla un plan de mejora, que puede incluir la modificación de las actividades existentes o la incorporación de nuevas actividades del curso, para mejorar el rendimiento de los estudiantes en estos resultados candidatos.

Los resultados de los datos que los profesores recogen para sus cursos se presentan finalmente a través del FCAR específico para el curso. El departamento de CSE ha establecido la política de que todas las secciones de un curso determinado deben ser coordinadas entre todos los profesores que ofrecen el curso simultáneamente. Por lo tanto, se espera que se presente un solo FCAR que resuma los resultados en todas las secciones del curso; ya sea que se trate de un solo profesor o de varios profesores que ofrezcan el curso durante el semestre. Además, la discusión y las decisiones tomadas para la mejora en conjunto con el CAI de CSE, involucrarán a todo el profesorado que imparte el curso y, cuando sea pertinente, también al profesorado que impartirá el curso en un futuro próximo.

Aunque en este momento el FCAR es un documento de trabajo, y por lo tanto debemos esperar modificaciones en un futuro próximo, el formulario incluirá tres partes esenciales. Éstas son

1. Cobertura de los temas en el curso – Esta es una medida del nivel de cobertura del tema particular en el semestre que se reporta, basado en lo que se espera en el curso particular. Esto se basa en la idea de que los temas específicos suelen tener cierto número de subtemas que se suelen cubrir en el curso. Si sólo se cubre el 50% de esos subtemas, entonces el informe debería reflejarlo. En realidad, utilizamos el rango 0..5, donde 0 es nada y 5 es la cobertura total del tema en cuestión. El propósito de estos datos es determinar qué temas se dejan de lado constantemente y tomar decisiones basadas en ese conocimiento. Esta información se presenta en el FCAR como una tabla, como la que se muestra aquí.

2. Evaluación de los Resultados de Aprendizaje del Curso utilizando el Trabajo Calificado – Esta es una medida de cómo los estudiantes se desempeñaron en cada CLO basado en el trabajo calificado. Para cada CLO, el informe del curso incluirá cómo se midió y cuál fue el nivel alcanzado en cada uno. La parte de «cómo se mide» la deciden fundamentalmente los profesores que imparten el curso. Puede incluir tareas, cuestionarios, partes de exámenes, actividades de laboratorio, proyectos del curso, presentaciones orales, etc. La «puntuación máxima» es la suma de las puntuaciones máximas en cada actividad particular utilizada para medir la CLO concreta. Por último, la parte más importante es el «nivel alcanzado». Corresponde al porcentaje de alumnos aprobados que han obtenido al menos el 70% de la puntuación máxima posible. Este porcentaje de estudiantes será el criterio utilizado para determinar cómo se cumplió el CLO particular en el curso concreto.  Esta información se recoge en forma de tabla, como la siguiente.

3. Acciones propuestas para el mejoramiento – Son las acciones que se proponen preliminarmente para el mejoramiento del desempeño del curso en cada una de las acciones particulares. Inicialmente son propuestas por los propios profesores, pero se espera que sean analizadas en conjunto con el comité del CAI para eventualmente determinar las acciones finales. Esas acciones finales serán las mismas propuestas en esta tabla, tal vez con algunas acciones adicionales que se decidan en conjunto con el CAI.

Esperamos que se propongan acciones al menos para las CLOs que presenten un bajo rendimiento, aunque éste sea superior al umbral establecido.

Medimos el rendimiento alcanzado en un CLO concreto utilizando los resultados de las actividades calificadas que fueron seleccionadas por los profesores que imparten el curso como actividades dirigidas a ese CLO. Esos resultados se tabulan al final del semestre utilizando únicamente los resultados de los alumnos que aprueban el curso.

Hemos establecido el valor umbral del 70% como la puntuación mínima que el estudiante ha obtenido tras contar su rendimiento en todas esas actividades calificadas. Por lo tanto, cualquier puntuación que represente menos del 70% de la puntuación total posible en las actividades seleccionadas implica que el CLO no fue alcanzado por el estudiante en particular.

A partir de los datos generados para cada estudiante en cada CLO, determinamos cuál ha sido el rendimiento del curso en particular en relación con sus CLOs. Para ello, también hemos establecido el umbral del 70%. Es decir, se considera que un CLO está en buen estado si al menos el 70% de los estudiantes que lo aprueban han obtenido una puntuación del 70% o más en las actividades calificadas dirigidas a ese CLO.

La siguiente tabla resume lo descrito anteriormente.

Aquellas CLOs que no alcancen el estado de buena reputación serán consideradas como reprobadas.

Los cursos de nuestros programas están sometidos a una evaluación constante con el fin de medir cómo debe mejorarse cada curso para cumplir con éxito el papel que tienen los cursos particulares en el conjunto del programa académico. Sin embargo, la determinación final sobre si nuestros estudiantes que se gradúan están alcanzando las habilidades necesarias que los PLOs implican, se basa en cómo se desempeñan en sus cursos de culminación. Por lo tanto, los cursos de culminación de ambos programas serán evaluados cada vez que se ofrezcan. En ellos, medimos el rendimiento de los estudiantes en todos los resultados del programa.