La preparazione di docenti di ingegneria per la valutazione efficace ABET e la valutazione è una responsabilità fondamentale per qualsiasi programma che cerca l'accreditamento iniziale o continuato. I membri della Facoltà sono i principali driver di consegna del curriculum, l'apprendimento degli studenti, e la raccolta di prove che dimostra la qualità del programma. Senza la loro partecipazione attiva, informata, anche i piani di valutazione più ben progettati saranno a corto. La sfida è che molti docenti di ingegneria sono assunti per la loro competenza tecnica, non per la loro familiarità con la valutazione dei risultati-based di valutazione di accreditamento o di accreditamento.

Comprensione dei Criteri di accreditamento ABET

Prima che la facoltà possa contribuire significativamente alla valutazione, devono avere una chiara comprensione operativa dei criteri di accreditamento ABET. L'attuale struttura, [ABET Criteri per l'accreditamento dei programmi di ingegneria (2024-2025), è costruita intorno a un modello basato sui risultati che sottolinea ciò che gli studenti possono fare alla laurea, piuttosto che semplicemente quali corsi hanno completato.

  • Programma Obiettivi educativi (PEOs):[] Le dichiarazioni ampie che descrivono la carriera e le realizzazioni professionali che il programma sta preparando i laureati per raggiungere entro pochi anni dalla laurea.
  • Student Outcomes (SOs): Queste sono le competenze specifiche, le conoscenze e i comportamenti che gli studenti sono tenuti a possedere al momento della laurea. ABET definisce sette risultati degli studenti (1-7) applicabili a tutti i programmi di ingegneria.
  • Il miglioramento continuo (CI): Il criterio 4 (miglioramento continuo) è il cuore del processo di valutazione. Richiede che i programmi utilizzino i dati dalle valutazioni per migliorare il programma. La Facoltà deve capire che la valutazione non è solo un esercizio di reportistica ma uno strumento per il processo decisionale.
  • Criteri di programma:[[] Oltre ai criteri generali, ogni disciplina di ingegneria (civile, meccanico, elettrico, ecc.) ha criteri specifici di programma che definiscono requisiti aggiuntivi.

Per costruire questa comprensione, non è sufficiente fornire una panoramica di una volta. La Facoltà ha bisogno di opportunità in corso per impegnarsi con i criteri nel contesto del proprio insegnamento. I facilitatori di workshop possono utilizzare ABET criteri ufficiali[ come risorsa primaria, ma dovrebbero integrare con esempi specifici di disciplina e studi di casi.

Per esempio, molti docenti credono che ABET richiede al 100% degli studenti di ottenere un punteggio di passaggio su ogni risultato. In realtà, ABET si aspetta che i programmi definiscano i criteri di performance (ad esempio, l'80% degli studenti raggiungerà un punteggio di 3 o superiore su un 4-punto rubrico) e quindi utilizzare i risultati per informare la maggior parte dei miglioramenti significativi dell'aula.

Strategie per la preparazione della Facoltà

La preparazione della facoltà per la valutazione di ABET è un processo continuo che richiede un approccio multiforme. Di seguito sono le strategie chiave che hanno dimostrato efficace nei programmi di ingegneria negli Stati Uniti e a livello internazionale.

1. Laboratori di formazione

I workshop regolari e interattivi sono la base della preparazione della facoltà, piuttosto che una singola sessione "morte da PowerPoint", considerano una serie di workshop spaziati durante tutto l'anno accademico.

  • ABET 101:[] Panoramica dei criteri, della terminologia e del processo di accreditamento.
  • Writing Efficace apprendimento degli studenti deriva:[] Pratica a scrivere risultati misurabili allineati con la tassonomia di Bloom. Confrontare esempi deboli vs. forti.
  • Progettazione:[] Guida passo per passo sulla creazione di rubriche analitiche e olistiche per progetti, report e presentazioni. Includere esercizi di calibrazione in cui gli studenti del campione della facoltà di punteggio lavorano insieme per garantire la coerenza.
  • Closing the Loop:[] Studi di casi di programmi che hanno utilizzato i dati di valutazione per apportare modifiche significative.
  • Strumenti e tecnologia:[[] Dimostrazione dei sistemi di gestione della valutazione (ad esempio, Taskstream, Weave, o strumenti homegrown) e tecniche di visualizzazione dei dati.

I workshop dovrebbero essere guidati da docenti che hanno esperienza con ABET, idealmente in coordinamento con il coordinatore di valutazione del programma. Invitare i facilitatori esterni da altre istituzioni o da ABET stesso può portare prospettive fresche, ma dovrebbe essere completato con contesto interno. E 'anche efficace per prendere un train-the-trainer approccio: identificare alcuni docenti per diventare altamente formati, quindi avere loro più piccole sessioni di lavoro

2. Literacy di valutazione

L'alfabetizzazione della valutazione va oltre la conoscenza dei criteri; si tratta di comprendere i principi della buona progettazione di valutazione e dell'interpretazione dei dati. Molti docenti di ingegneria hanno poca formazione formale nella misura educativa.

  • Validità e affidabilità:[ La valutazione misura effettivamente il risultato previsto? Due diversi tassisti danno lo stesso punteggio? Utilizzare esempi da contesti di ingegneria, ad esempio, classificazione di un rapporto di laboratorio per le competenze di analisi.
  • Diretto contro Misure Indirette:[] Le misure dirette (esami, progetti, portafogli) forniscono prove di apprendimento effettivo; le misure indirette (soprusi, auto-reporti) forniscono percezioni.
  • Sampling e Aggregazione:[[] Non ogni compito deve essere valutato per ogni risultato. I programmi possono utilizzare campionamento mirato per ridurre il carico di lavoro, pur ottenendo dati rappresentativi.
  • Criteri di idoneità e Benchmarks:[] Impostare obiettivi realistici per il raggiungimento degli studenti. Ad esempio, "80% degli studenti raggiungerà un punteggio di 3 o superiore su un rubrico a 4 punti per il risultato 5."

Un modo efficace per costruire l'alfabetizzazione della valutazione è attraverso una sessione di norming rubrica[. La Facoltà si riunisce per segnare un insieme di campione di lavoro studentesco utilizzando un rubrico comune. Discutere discrepanze e calibrare il loro punteggio. Questo non solo migliora l'affidabilità inter-rater, ma approfondisce anche la loro comprensione di ciò che "accettabile" prestazioni sembra.

3. Mapping del curricolo

La mappatura del curriculum è una rappresentazione visiva o tabulare di come i corsi e i requisiti del programma contribuiscono ai risultati degli studenti. È uno strumento potente per la facoltà di vedere il quadro grande e il loro ruolo all'interno di esso. Una mappa ben strutturata aiuta a rispondere a domande come:

  • Quali risultati sono pesantemente coperti? Che sono sotto copertura o manca?
  • Esiste una progressione logica dall'apprendimento introduttivo all'apprendimento avanzato?
  • Dove sono i posti migliori per raccogliere i dati di valutazione per ogni risultato?

La Facoltà dovrebbe essere coinvolta nella creazione e nell'aggiornamento della mappa del curriculum. Un processo tipico coinvolge un ritiro o una serie di incontri in cui ogni membro della facoltà identifica i risultati affrontati nei loro corsi e indica il livello di apprendimento (introdotto, rinforzato o masterizzato). Questa mappatura collaborativa spesso rivela lacune sorprendenti o licenziamenti.

La mappatura del curriculum supporta anche l'articulation dei risultati dell'apprendimento del corso[] per i risultati del programma. Quando la facoltà di scrivere gli obiettivi di apprendimento del corso syllabi, possono indicare esplicitamente quali risultati del programma sono affrontati e come saranno valutati.

4. Pratiche di documentazione

L'accreditamento ABET si basa fortemente sulle prove documentate di ciò che il programma fa e su come migliora continuamente.La Facoltà ha bisogno di formazione sulle aspettative di documentazione e sulle migliori pratiche.

  • Course Files:[] Mantenere una cartella per ogni corso contenente syllabus, lavoro di studente campione (anonimato), rubriche utilizzate, e un riassunto dei risultati di valutazione e delle modifiche apportate.
  • Rapporto di valutazione:[] Un modello standard per la facoltà di segnalare i dati di valutazione per un risultato specifico, inclusi i risultati, l'interpretazione e i miglioramenti previsti.
  • Meeting minutes:[]] Documentazione di discussioni sui dati di valutazione e le decisioni prese. Ad esempio, minuti da una riunione del comitato di curriculum che ha deciso di rivedere un prerequisito a causa di basse prestazioni in un corso successivo.
  • Controllo della domanda:[] Tenere traccia di come le assegnazioni, le rubriche e i syllabi si evolvono nel tempo in risposta ai risultati della valutazione, dimostrando così il ciclo "chiusura del ciclo".

Per rendere meno oneroso la documentazione, i dipartimenti possono creare modelli digitali e repository[]. Una struttura di cartelle di sistema di gestione dell'unità condivisa o di apprendimento può standardizzare dove i documenti sono memorizzati. La Facoltà dovrebbe essere mostrata esempi di file di corso ben organizzati da colleghi. Aiuta anche a progettare una persona di punto (coordinatore di valutazione o supporto del personale) che possono rispondere a domande e rivedere periodicamente i file per la completezza prima di un sito visita.

È importante sottolineare che la documentazione non è solo per l'accreditamento, ma per lo sviluppo professionale della facoltà e per il miglioramento dell'insegnamento. Quando la facoltà vede che documentare il loro lavoro di valutazione porta a meno sorprese durante le recensioni e fornisce prove per la promozione e l'insegnamento premi, sono più probabilità di investire nella pratica.

Implementazione di metodi di valutazione efficaci

Con una facoltà preparata, il passo successivo è l'implementazione di metodi di valutazione che forniscono dati validi e affidabili senza istruttore schiacciante. Il mantra dovrebbe essere "esemplare, non aggiungere". Ovunque possibile, utilizzare i corsi esistenti, esami e progetti come veicoli di valutazione.

Tipi di valutazione diversi

Un metodo unico raramente cattura tutte le dimensioni di un risultato. I programmi dovrebbero impiegare un mix di:

  • Esami e Quizzes:[] Buon per testare le conoscenze e le competenze analitiche, ma meno efficace per il lavoro di squadra o la comunicazione.
  • Progetti di progettazione:[] Ideale per valutare simultaneamente più risultati (problem-solving, design, lavoro di squadra, comunicazione).
  • Rapporto di Lab:[] Valuta la sperimentazione, l'analisi dei dati e la comunicazione scritta.
  • Portafogli:[] I portafogli Capstone compilano le prove su più corsi, sono preziosi per dimostrare la crescita e per la valutazione a livello di programma dei risultati come il design o l'apprendimento permanente.
  • Presentations and Peer Reviews:[]] Utili per la comunicazione orale e i risultati del lavoro di squadra.

Raccolta e analisi dei dati

La Facoltà deve decidere come raccogliere e aggregare i dati in modo efficiente. Il campionamento è spesso necessario quando le dimensioni della classe sono grandi. Ad esempio, un programma potrebbe raccogliere i dati dal corso di progettazione senior ogni semestre, ma solo dal corso di capstone una volta all'anno. Un altro approccio è quello di stabilire una "valutazione comune" in tutte le sezioni di un corso multi-sezione.

L'analisi dei dati dovrebbe essere semplice: percentuali di calcolo o distribuzioni di punteggi rubrici, confrontate con l'obiettivo di prestazione e identificare le aree di debolezza. La Facoltà ha bisogno di una guida sull'interpretazione dei dati in modo significativo. Ad esempio, se il 75% degli studenti ha raggiunto l'obiettivo, ma il programma si aspetta l'80%, cosa significa?

Utilizzo della tecnologia

La tecnologia può semplificare i processi di valutazione e ridurre il carico di lavoro della facoltà. Strumenti come sistemi di gestione dell'apprendimento (LMS) con il monitoraggio dei risultati (ad esempio, i risultati di Canvas Outcomes, gli obiettivi della lavagna) permettono alla facoltà di taggare i risultati e aggregare automaticamente i punteggi.

Promuovere una cultura del miglioramento continuo

L'obiettivo finale della valutazione ABET non è quello di produrre report ma di migliorare continuamente, ma richiede un cambiamento culturale dalla valutazione di visione come componente aggiuntivo alla visione come parte integrante dell'insegnamento e dell'apprendimento.

Ruolo di Leadership e supporto

Sedie del Dipartimento, coordinatori del programma e deans devono dimostrare l'impegno attraverso azioni, non solo parole, ma anche:

  • Alllocation Resources:[] Fornisce tempo di rilascio per i coordinatori di valutazione o un comitato di valutazione della facoltà.
  • Incentivi di approvvigionamento:[] Riconoscere i lavori di valutazione nelle valutazioni annuali, nella retribuzione del merito e nei criteri di promozione.
  • Creating Structures:[] Istituzione di comitati permanenti (ad esempio, Comitato Curriculum, Comitato di valutazione) che si riuniscono regolarmente e hanno carte chiare.
  • Modeling Behavior:[] I leader dovrebbero partecipare a sessioni di formazione, condividere i loro risultati di valutazione e discutere pubblicamente i miglioramenti che hanno fatto nei loro corsi.

Collaborazione e comunità della Facoltà

La valutazione è più efficace quando diventa un'attività collaborativa piuttosto che un onere individuale. La Facoltà dovrebbe essere incoraggiata a lavorare in team per progettare valutazioni, condividere rubriche e discutere i risultati. Ad esempio, un "circolo di insegnamento" di istruttori che insegnano lo stesso corso introduttivo può incontrare mensile per parlare di valutazioni comuni e difficoltà degli studenti. Tali comunità riducono l'isolamento e generano la proprietà collettiva del successo degli studenti.

Inoltre, i programmi possono creare un repository di risorse di valutazione[] come le rubriche dei campioni, gli esemplari di lavoro degli studenti annotati e i riassunti dei miglioramenti di successo.

Chiusura del Loop: dai dati al miglioramento

La frase "chiusura del ciclo" si riferisce al ciclo di raccolta delle prove di valutazione, interpretandolo, apportando miglioramenti, e poi rivalutando per vedere se i cambiamenti funzionavano. La Facoltà ha bisogno di esempi espliciti di questo ciclo. Un esempio potente potrebbe essere: Un programma rileva che solo il 60% degli anziani incontra l'obiettivo di performance su Outcome 2 (design). La Facoltà analizza che molti studenti non riescono perché non considerano vincoli realistici (ad esempio, economico, l'80%)

La Facoltà dovrebbe tenere una rivista o un registro di cambiamenti fatti sulla base dei dati di valutazione. Anche i piccoli cambiamenti – come il riordinare argomenti in un corso o fornire un'assegnazione del campione – vale la pena notare.

Pratici passi per iniziare

Se il vostro programma sta appena iniziando a preparare la facoltà per la valutazione ABET, ecco un approccio graduale:

  1. Phase 1: Costruire la consapevolezza (semestre 1) – Condurre un workshop di kick-off che spiega i criteri ABET e l'importanza del coinvolgimento della facoltà di indagine per misurare le loro conoscenze e le loro preoccupazioni attuali.
  2. Phase 2: Stabilire infrastrutture (semestre 2)[] — Formare un comitato di valutazione, creare una mappa del curriculum (o aggiornare esistente), e adottare una serie di risultati degli studenti di livello di programma.
  3. Phase 3: Sviluppare strumenti (estate)[[] – Scrivere o rivedere i risultati di apprendimento del corso allineati ai risultati del programma.
  4. Phase 4: Valutazione pilota (semestre di caduta)[ – Implementare le nuove rubriche e raccogliere dati da alcuni corsi. Tenere una sessione di norming. Discutere i risultati in una riunione di comitato di valutazione.
  5. Phase 5: Attuazione completa (prima semestre e oltre)[ – Scala a tutti i corsi. Istituzione di cicli di report regolari. Iniziare "chiusura del ciclo" facendo cambiamenti basati sui dati. Continua lo sviluppo professionale attraverso workshop e mentoring peer.

Conclusioni

La formazione continua di una società di formazione, che si occupa di formazione, di formazione e di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione di programmi di formazione, di studio, di documentazione, di studio, di studio, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione, di formazione,