La preparación de la facultad de ingeniería para una evaluación y evaluación eficaces de ABET es una responsabilidad fundamental para cualquier programa que busque una acreditación inicial o continua. Los miembros de la facultad son los principales impulsores de la entrega de planes de estudios, el aprendizaje de estudiantes y la recopilación de pruebas que demuestren la calidad del programa. Sin su participación activa y informada, incluso los planes de evaluación más bien diseñados no se cumplirán con una terminología de la evaluación de resultados.

Comprensión de los criterios de acreditación ABET

Antes de que la facultad pueda contribuir significativamente a la evaluación, deben tener una comprensión clara y operativa de los criterios de acreditación de ABET. El marco actual, ABET Criterios para los programas de acreditación (2024-2025), se construye alrededor de un modelo basado en resultados que enfatiza lo que los estudiantes pueden hacer en la graduación, en lugar de simplemente qué cursos han completado.

  • Programa Objetivos Educativos (PEOs): Declaraciones amplias que describen los logros profesionales y profesionales que el programa está preparando graduados para lograr dentro de unos pocos años de graduación. La facultad debe entender cómo sus cursos y mentores contribuyen a estos objetivos a largo plazo.
  • Resultados Estudiantes (SOs): Estas son las habilidades, conocimientos y comportamientos específicos que los estudiantes tienen en el momento de la graduación. ABET define siete resultados de los estudiantes (1 a 7) aplicables a todos los programas de ingeniería. La facultad necesita saber cuáles son los resultados de sus cursos y cómo medir el logro de los estudiantes de esos resultados.
  • ] Mejora continua (CI):] Criterio 4 (Mejoramiento continuo) es el centro del proceso de evaluación. Requiere que los programas utilicen datos de evaluaciones para realizar mejoras programáticas.La facultad debe entender que la evaluación no es sólo un ejercicio de presentación de informes sino una herramienta para la toma de decisiones.
  • Criterios de programa: Más allá de los criterios generales, cada disciplina de ingeniería (civil, mecánico, eléctrico, etc.) tiene criterios de programa específicos que definen requisitos adicionales.La facultad debe estar familiarizada con los criterios pertinentes a su programa.

Para construir este entendimiento, no es suficiente proporcionar una visión general única. La facultad necesita oportunidades continuas para comprometerse con los criterios en el contexto de su propia enseñanza. Los facilitadores del taller pueden utilizar los criterios oficiales de ABET como recurso primario, pero deben complementar con ejemplos disciplina-específicos y estudios de casos. Por ejemplo, un profesor de ingeniería mecánica puede ver cómo se evalúa el resultado del estudiante 3 (una capacidad de asignación)

También es esencial aclarar conceptos erróneos comunes. Por ejemplo, muchos profesores creen inicialmente que ABET requiere el 100% de los estudiantes para lograr una puntuación pasajera en cada resultado. En realidad, ABET espera que los programas definan criterios de rendimiento (por ejemplo, el 80% de los estudiantes lograrán una puntuación de 3 o más en una rúbrica de 4 puntos) y luego utilizar los resultados para informar mejoras.

Estrategias para la preparación de la Facultad

Preparar la facultad para la evaluación de ABET es un proceso en curso que requiere un enfoque multifacético. A continuación se presentan estrategias clave que han demostrado ser eficaces en programas de ingeniería en todo Estados Unidos e internacionalmente. Cada estrategia debe adaptarse a la cultura, los recursos y las necesidades específicas del departamento.

1. Talleres de capacitación

Los talleres regulares e interactivos son la piedra angular de la preparación de la facultad. En lugar de una sola sesión de "muerte por PowerPoint", considere una serie de talleres espaciados durante todo el año académico. Los temas deben avanzar desde el conocimiento fundacional a la práctica avanzada.

  • ABET 101:] Reseña de criterios, terminología y proceso de acreditación. Incluye una revisión de mock donde el papel de profesorado es revisor.
  • Efectivamente resultados de aprendizaje de estudiantes: Práctica escribiendo resultados mensurables alineados con la Taxonomía de Bloom. Compare ejemplos débiles vs. fuertes.
  • Designing Rubrics: Orientación paso a paso sobre la creación de rúbricas analíticas e integrales para proyectos, informes y presentaciones. Incluir ejercicios de calibración donde los estudiantes de muestra de puntuación de la facultad trabajan juntos para asegurar la consistencia.
  • Cerrar el Ártico: Casos de estudios de programas que utilizaron datos de evaluación para realizar cambios significativos. Muestra los datos, la decisión y el impacto en el aprendizaje de estudiantes.
  • Herramientas y Tecnología: Demostración de sistemas de gestión de evaluaciones (por ejemplo, Herramientas de herramientas de fabricación, tejidos o de producción de datos) y técnicas de visualización de datos.

Los talleres deben ser dirigidos por los campeones de profesores que tienen experiencia con ABET, idealmente en coordinación con el coordinador de evaluación del programa. Invitar facilitadores externos de otras instituciones o de ABET puede traer nuevas perspectivas pero debe ser complementado con contexto interno. También es eficaz tomar un enfoque entrenar a los compañeros]: identificar unas pocas facultades para ser altamente capacitados, entonces tener una sesión de mentor.

2. Alfabetización de evaluación

La alfabetización de evaluación va más allá de conocer los criterios; implica entender los principios de buen diseño de evaluación e interpretación de datos. Muchos profesores de ingeniería tienen poca formación formal en medición educativa.

  • Validez y fiabilidad: ¿La evaluación realmente mide el resultado deseado? ¿Dos evaluadores diferentes darían la misma puntuación? Use ejemplos de contextos de ingeniería, por ejemplo, clasificando un informe de laboratorio para habilidades de análisis.
  • Direct vs. Medidas indirectas: Las medidas directas (exámenes, proyectos, carteras) proporcionan pruebas de aprendizaje real; las medidas indirectas (superiores, autoreportaciones) proporcionan percepciones. Un plan de evaluación robusto utiliza ambos.
  • Sampling and Aggregation: No es necesario evaluar cada asignación para cada resultado. Los programas pueden utilizar muestras específicas para reducir el volumen de trabajo y obtener datos representativos. La facultad debe entender cómo se pueden combinar los datos de múltiples secciones y cursos.
  • Criterios de rendimiento y parámetros: Establecer metas realistas para el logro de los estudiantes. Por ejemplo, "el 80% de los estudiantes alcanzarán una puntuación de 3 o superior en una rúbrica de 4 puntos para el Resultado 5".

Una manera eficaz de construir la alfabetización de evaluación es a través de una sesión de ortografía rúbica. La facultad se reúne para marcar un conjunto de muestras de trabajo de estudiantes usando una rúbrica común. Se discrepancias y calibran su puntuación. Esto no sólo mejora la fiabilidad entre los grupos, sino que también profundiza su comprensión de lo que el rendimiento "aceptable" parece.

3. Mapping de los estudios

La cartografía de curriculum es una representación visual o tabular de cómo los cursos y requisitos del programa contribuyen a los resultados del estudiante. Es una poderosa herramienta para que la facultad vea la imagen grande y su papel dentro de ella. Un mapa bien construido ayuda a responder preguntas como:

  • ¿Qué resultados están cubiertos considerablemente? ¿Qué están bajo cubiertas o faltan?
  • ¿Hay una progresión lógica de la introducción al aprendizaje avanzado?
  • ¿Dónde están los mejores lugares para recopilar datos de evaluación para cada resultado?

La facultad debe estar involucrada en la creación y actualización del mapa de planes de estudios. Un proceso típico implica un retiro o una serie de reuniones donde cada miembro de la facultad identifica los resultados abordados en sus cursos e indica el nivel de aprendizaje (introducido, reforzado o dominado).Este mapeo colaborativo a menudo revela lagunas sorprendentes o redundancias. Por ejemplo, un programa puede descubrir que el trabajo en equipo (Outcome 5) sólo se enseña en un curso el equipo electivo, o que el resultado se evalúa informalmente sin una asignación de funciones básicas.

La cartografía de curriculum también apoya ] la articulación de los resultados de aprendizaje de curso] para programar los resultados. Cuando la facultad escribe objetivos de aprendizaje de la sillabi, pueden indicar explícitamente qué resultados del programa se abordan y cómo se evaluarán. Esta alineación es un elemento clave de la evidencia ABET y ayuda a los estudiantes a entender la relevancia de su curso.

4. Prácticas de documentación

La acreditación ABET se basa en evidencias documentadas de lo que hace el programa y de cómo mejora continuamente. La facultad necesita formación sobre expectativas de documentación y mejores prácticas.

  • Archivos de la serie: Mantener una carpeta para cada curso que contenga un programa de estudios, trabajo de estudiantes de muestra (anónimo), rúbricas utilizadas, y un resumen de los resultados de evaluación y los cambios realizados.
  • Informes de evaluación: Una plantilla estándar para que la facultad informe datos de evaluación para un resultado específico, incluyendo hallazgos, interpretación y mejoras planificadas.
  • Actas de medición:] Documentando discusiones sobre datos de evaluación y decisiones tomadas. Por ejemplo, a minutos de una reunión de comité de planes de estudios que decidió revisar un requisito debido a un bajo rendimiento en un curso posterior.
  • Control de la Versión: Mantener un seguimiento de cómo las asignaciones, las rúbricas y la silabi evolucionan con el tiempo en respuesta a los resultados de la evaluación. Esto demuestra el ciclo de "cerrar el bucle".

Para hacer menos onerosa la documentación, los departamentos pueden crear plantillas y repositorios digitales]. Una estructura de carpetas de sistemas de gestión de la unidad o el aprendizaje compartido puede estandarizar donde se almacenan los documentos. La facultad debe mostrar ejemplos de archivos de cursos bien organizados de colegas. También ayuda a designar a una persona de punto (coordinador de evaluación o soporte para personal) que pueda responder preguntas y revisar periódicamente los archivos de autocompletos antes de un sitio.

Es importante destacar que la documentación no es sólo para la acreditación sino para el desarrollo profesional de la facultad y para mejorar la enseñanza. Cuando la facultad ve que documentar su trabajo de evaluación conduce a menos sorpresas durante las revisiones y proporciona evidencia para la promoción y premios de enseñanza, es más probable que inviertan en la práctica.

Aplicación de métodos de evaluación eficaces

Con una facultad preparada, el siguiente paso es implementar métodos de evaluación que permitan datos válidos y fiables sin instructores abrumadores. El mantra debe ser "embed, no añadir". Siempre que sea posible, utilizar las asignaciones de cursos existentes, exámenes y proyectos como vehículos de evaluación.

Tipos de evaluación de diverso tipo

Un método único raramente captura todas las dimensiones de un resultado. Los programas deben emplear una mezcla de:

  • Exams and Quizzes: Bien para probar conocimientos y habilidades analíticas, pero menos eficaz para el trabajo en equipo o la comunicación. Use inventarios de conceptos (por ejemplo, Inventario de Concepto de Fuerza para la física) para el benchmarking.
  • Proyectos de diseño: Ideal para evaluar múltiples resultados simultáneamente (problema de resolución, diseño, trabajo en equipo, comunicación). Use rúbricas estructuradas para contribuciones separadas.
  • Lab Reports:] Evaluar la experimentación, el análisis de datos y la comunicación escrita. Asegurar que las rúbricas aborden explícitamente cada resultado.
  • Portafolios:] Los portafolios de Capstone compilan evidencia en varios cursos, son valiosos para demostrar crecimiento y para evaluar los resultados a nivel de programas como el diseño o el aprendizaje permanente.
  • Presentaciones y reseñas de los usuarios: Útile para los resultados de la comunicación oral y el trabajo en equipo. Los instrumentos de evaluación de los usuarios (por ejemplo, CATME) proporcionan datos sobre las contribuciones individuales a los equipos.

Recopilación y análisis de datos

La facultad debe decidir cómo recopilar y agregar datos de manera eficiente. El muestreo es a menudo necesario cuando los tamaños de clase son grandes. Por ejemplo, un programa puede recopilar datos del curso de diseño de alta edad cada semestre, pero sólo del curso de capstone una vez al año. Otro enfoque es establecer una "evaluación común" en todas las secciones de un curso de multisección. Por ejemplo, todas las secciones de Mecánica de Nivel de Ingeniería podrían administrar el mismo problema de examen final que evalúa un resultado específico para obtener un programa de datos.

El análisis de datos debe ser sencillo: porcentajes de cálculo o distribuciones de puntajes de rúbricas, comparar con el objetivo de rendimiento e identificar áreas de debilidad. La facultad necesita orientación para interpretar datos significativamente. Por ejemplo, si el 75% de los estudiantes alcanzaron el objetivo pero el programa esperaba el 80%, ¿qué significa eso? ¿Es la brecha debido a un defecto en la instrucción, una evaluación excesivamente difícil o un problema de cohorte?

Utilización de la tecnología

La tecnología puede simplificar los procesos de evaluación y reducir la carga de trabajo de la facultad. Herramientas como sistemas de gestión de aprendizaje (LMS) con seguimiento de resultados (por ejemplo, resultados de Canvas, objetivos de Blackboard) permiten a la facultad etiquetar asignaciones a resultados y agregar automáticamente partituras. Otras plataformas de gestión de evaluaciones dedicadas como Taskstream, Weave o Nuventive proporcionan paneles para el análisis de nivel de programa.

Fomentar una cultura de mejora continua

El objetivo final de la evaluación de ABET no es producir informes sino impulsar una mejora continua. Esto requiere un cambio cultural de la evaluación de la vista como complemento para verla como parte integral de la enseñanza y el aprendizaje. Cultivar esta cultura es la responsabilidad del liderazgo de los departamentos, pero cada miembro de la facultad desempeña un papel.

Función del liderazgo y el apoyo

Los presidentes del Departamento, coordinadores de programas y decanos deben demostrar compromiso a través de acciones, no sólo palabras. Esto incluye:

  • ]Alquilar recursos: Proveer tiempo de liberación para coordinadores de evaluación o un comité de evaluación de profesores. Asistencia a los fondos en talleres o conferencias relacionados con ABET.
  • Proveer incentivos: Reconocer la labor de evaluación en evaluaciones anuales, méritos y criterios de promoción. Un premio de enseñanza podría considerar las contribuciones a la evaluación y la mejora.
  • Creación de estructuras:] Establecer comités permanentes (por ejemplo, Comité de Currículum, Comité de Evaluación) que se reúnan periódicamente y tengan cartas claras. Asegurar que los datos de evaluación sean un tema permanente del programa en las reuniones departamentales.
  • Modelo de Comportamiento: Los líderes deben participar en sesiones de formación, compartir sus propios resultados de evaluación y discutir públicamente las mejoras que han realizado en sus cursos.

Facultad Colaboración y Comunidad

La evaluación es más eficaz cuando se convierte en una actividad colaborativa en lugar de una carga individual. Se debe alentar a la facultad a trabajar en equipos para diseñar evaluaciones, compartir rúbricas y discutir resultados. Por ejemplo, un "círculo de enseñanza" de instructores que enseñan el mismo curso introductorio puede reunirse mensualmente para hablar de evaluaciones comunes y dificultades estudiantiles.

Además, los programas pueden crear un repositorio de recursos de evaluación] como las rúbricas de muestras, los ejemplares de trabajo anotados de estudiantes y los resúmenes de mejoras exitosas. Los nuevos profesores pueden acceder a estos materiales durante el internado. Cuando los profesores ven ejemplos de cómo sus colegas mejoraron el aprendizaje de estudiantes basados en datos de evaluación, son más propensos a comprometerse.

Cierre del circuito: De datos a mejora

La frase "cerrar el bucle" se refiere al ciclo de recogida de pruebas de evaluación, interpretarlo, hacer mejoras, y luego volver a evaluar si los cambios funcionaron. La facultad necesita ejemplos explícitos de este ciclo. Un ejemplo poderoso podría ser: Un programa encuentra que sólo el 60% de los mayores cumplen con el objetivo de rendimiento en el Resultado 2 (diseño).

Es esencial documentar estas historias de "cerrar el bucle".La facultad debe mantener una revista o registro de cambios realizados en base a datos de evaluación. Incluso pequeños cambios -como reordenar temas en un curso o proporcionar una asignación de muestras- vale la pena notar. Los revisores de ABET buscan evidencia de que el programa es una organización de aprendizaje que se adapta con el tiempo.

Pasos prácticos para empezar

Si su programa está empezando a preparar la facultad para la evaluación ABET, aquí está un enfoque gradual:

  1. Phase 1: Construir la conciencia (semestre 1)] — Realizar un taller de inicio que explique los criterios de ABET y la importancia de la participación de la facultad.
  2. Phase 2: Establecer infraestructura (semester 2)] — Formar un comité de evaluación, crear un mapa de planes de estudios (o actualizar los existentes), y adoptar un conjunto de resultados de los estudiantes a nivel de programas.
  3. Phase 3: Desarrollar herramientas (verano)] — Escribe o revisa los resultados del aprendizaje de cursos alineados con los resultados del programa. Crear o perfeccionar rúbricas para evaluaciones clave, especialmente en cursos de diseño y capstone de alta calidad.
  4. Página 4: Evaluación piloto (semestre de caída)] — Implementar las nuevas rúbricas y recopilar datos de algunos cursos. Celebrar una sesión de normación. Discutir resultados en una reunión de comité de evaluación. Identifique los primeros triunfos y desafíos.
  5. Página 5: Implementación completa (spring semester and beyond)] — Escala a todos los cursos. Establecer ciclos regulares de presentación de informes. Comenzar "cerrar el bucle" haciendo cambios basados en datos. Continuar el desarrollo profesional a través de talleres y mentores.

Conclusión

Preparar profesores de ingeniería para una evaluación y evaluación efectivas de ABET no es un evento único sino un viaje continuo que fortalece todo el programa educativo. Cuando los profesores entienden profundamente los criterios de acreditación, están equipados con alfabetización de evaluación, tienen mapas de planes claros y abarcan documentación sistemática, pueden transformar la evaluación de una carga de cumplimiento en una poderosa herramienta para mejorar el aprendizaje de los estudiantes.