Table of Contents
Het voorbereiden van ingenieursfaculteit voor effectieve ABET-evaluatie en -evaluatie is een fundamentele verantwoordelijkheid voor elk programma dat initiële of voortgezette accreditatie zoekt. Faculteitsleden zijn de belangrijkste drivers van curriculumlevering, studentenopleiding en het verzamelen van bewijs dat de kwaliteit van het programma aantoont. Zonder hun actieve, geïnformeerde deelname, zullen zelfs de meest goed ontworpen beoordelingsplannen tekortschieten. De uitdaging is dat veel ingenieursfaculteiten worden ingehuurd voor hun technische expertise, niet voor hun vertrouwdheid met resultaten gebaseerde beoordeling of accreditatie terminologie. Dit artikel biedt een uitgebreide gids voor ingenieursafdelingleiders, programmacoördinatoren en faculteit zelf om de kennis, tools en cultuur te bouwen die nodig is voor succesvolle ABET-evaluatie en -evaluatie. Door te investeren in faculteitsvoorbereiding voldoen programma's niet alleen aan accreditatievereisten, maar bevorderen ze ook een echte cyclus van continue verbetering die ten goede komt aan studenten, faculteit en de instelling.
Inzicht in de ABT-accreditatiecriteria
Voordat de faculteit een zinvolle bijdrage kan leveren aan de beoordeling, moeten zij een duidelijk, operationeel begrip hebben van de ABET-accreditatiecriteria.Het huidige kader, ABET Criteria voor het accrediteren van technische programma's (2024-2025), is opgebouwd rond een op uitkomsten gebaseerd model dat benadrukt wat studenten kunnen doen bij het afstuderen, in plaats van gewoon welke cursussen ze hebben afgerond. De belangrijkste componenten zijn:
- Programma Educatieve doelstellingen (PEO's): Brede verklaringen die de carrière en professionele prestaties beschrijven die het programma maakt om afgestudeerden voor te bereiden om binnen een paar jaar na hun afstuderen te bereiken. Faculteit moet begrijpen hoe hun cursussen en mentoring bijdragen aan deze langetermijndoelstellingen.
- Studentenresultaten (SO's): Dit zijn de specifieke vaardigheden, kennis en gedrag die studenten naar verwachting zullen bezitten op het moment van hun afstuderen. ABET definieert zeven studentenresultaten (1 tot 7) die van toepassing zijn op alle engineeringprogramma's. Faculteit moet weten welke uitkomsten hun cursussen hebben en hoe ze het bereiken van deze uitkomsten kunnen meten.
- Continuous Improvement (CI): Criterium 4 (Continuous Improvement) is het hart van het beoordelingsproces. Het vereist dat programma's gegevens gebruiken van beoordelingen om programmatische verbeteringen te maken. Faculteit moet begrijpen dat beoordeling niet alleen een rapportageoefening is maar een instrument voor besluitvorming.
- Programma Criteria: Naast de algemene criteria heeft elke ingenieursopleiding (civiel, mechanisch, elektrisch, enz.) specifieke programmacriteria die aanvullende eisen definiëren. Faculteit moet vertrouwd zijn met de criteria die relevant zijn voor hun programma.
Om dit begrip te kunnen opbouwen, is het niet voldoende om een eenmalig overzicht te geven. De faculteit heeft permanente mogelijkheden nodig om zich te laten leiden door de criteria in de context van hun eigen onderwijs. Workshopfacilitators kunnen ABET's officiële criteria als primaire bron gebruiken maar moeten een aanvulling vormen op disciplinespecifieke voorbeelden en case studies. Bijvoorbeeld, een lid van de faculteit werktuigbouwkunde kan zien hoe Student Outcome 3 (een vermogen om effectief te communiceren) wordt beoordeeld door middel van senior ontwerp projectrapporten en presentaties. Wanneer de faculteit hun eigen opdrachten en rubrics kan in kaart brengen naar specifieke criteria, wordt het abstract concreet.
Het is ook essentieel om algemene misvattingen te verduidelijken. Bijvoorbeeld, veel faculteiten zijn aanvankelijk van mening dat ABET 100% van de studenten nodig heeft om een score te behalen op elk resultaat. In werkelijkheid verwacht ABET dat programma's prestatiecriteria definiëren (bijv. 80% van de studenten zal een score van 3 of hoger bereiken op een 4-punts ruric) en vervolgens de resultaten gebruiken om verbeteringen te informeren. Evenzo denkt de faculteit vaak dat beoordeling betekent het toevoegen van extra werk zoals exit enquêtes of alumni vragenlijsten. Hoewel die deel kunnen uitmaken van het beoordelingsplan van een programma, is het meest betekenisvolle bewijs afkomstig van directe klaslokale beoordelingen die in het curriculum zijn ingebed. Helpende faculteit zien beoordeling als een natuurlijke uitbreiding van hun gradatie en feedback werk is cruciaal om weerstand te verminderen.
Strategieën voor de voorbereiding van de faculteit
De voorbereiding van de faculteit voor de beoordeling van ABET is een continu proces dat een veelzijdige aanpak vereist. Hieronder staan belangrijke strategieën die effectief zijn gebleken in engineering programma's in de Verenigde Staten en internationaal. Elke strategie moet worden afgestemd op de specifieke cultuur, middelen en behoeften van de afdeling.
1. Opleidingsworkshops
Regelmatige, interactieve workshops vormen de hoeksteen van de faculteitsvoorbereiding. In plaats van één enkele "dood door PowerPoint" sessie, overwegen we een reeks workshops die gedurende het hele academisch jaar zijn verspreid. Onderwerpen moeten worden ontwikkeld van basiskennis naar geavanceerde praktijk.
- ABET 101: Overzicht van criteria, terminologie en accreditatieproces. Inclusief een schijnonderzoek waarbij de faculteit rol speelt als beoordelaars.
- Schrijven van effectieve resultaten van het leren van studenten: Oefenen met meetbare resultaten afgestemd op de taxonomie van Bloom. Vergelijk zwakke vs. sterke voorbeelden.
- Ontwerpen van Rubrics: Stapsgewijze begeleiding bij het creëren van analytische en holistische rubrics voor projecten, rapporten en presentaties. Inclusief kalibratieoefeningen waarbij de faculteitsscores van de student samenwerken om consistentie te waarborgen.
- Slotering van de Loop: Case studies van programma's die beoordelingsgegevens gebruikten om zinvolle veranderingen aan te brengen. Laat de gegevens, de beslissing en de impact op het leren van studenten zien.
- Tools en technologie: Demonstratie van beoordelingsmanagementsystemen (bv. Taskstream, Weave, of zelfgegroeide tools) en data visualisatietechnieken.
Workshops moeten worden geleid door faculteitskampioenen die ervaring hebben met ABET, ideaal in coördinatie met de beoordelingscoördinator van het programma. Externe facilitators uit andere instellingen of van ABET zelf kunnen nieuwe perspectieven bieden maar moeten worden aangevuld met interne context. Het is ook effectief om een trainer-the-trainer aanpak te nemen: een paar faculteiten te identificeren om hoog opgeleid te worden, dan moeten ze hun collega's in kleinere groepen of een-op-een sessies mentoreren. Dit bouwt interne capaciteit op en creëert peer-accountability.
2. Beoordelingsgetuige
De beoordelingsgeletterdheid gaat verder dan het kennen van de criteria; het gaat om het begrijpen van de principes van goed assessment ontwerp en data-interpretatie. Veel ingenieurs faculteiten hebben weinig formele opleiding in het meten van het onderwijs.
- Validiteit en betrouwbaarheid: Meten twee verschillende raters de beoogde uitkomst eigenlijk? Geeft twee verschillende raters dezelfde score? Gebruik voorbeelden van technische contexten, bijvoorbeeld het inschatten van een labrapport voor analysevaardigheden.
- Direct vs. indirecte maatregelen: Directe maatregelen (onderzoeken, projecten, portefeuilles) leveren bewijs van daadwerkelijk leren; indirecte maatregelen (enquêtes, zelfrapportages) bieden percepties. Een robuust beoordelingsplan maakt gebruik van beide.
- Sampling and Aggregation: Niet elke opdracht hoeft voor elk resultaat te worden beoordeeld. Programma's kunnen doelgerichte bemonstering gebruiken om de werkbelasting te verminderen terwijl ze nog representatieve gegevens verkrijgen. Faculteit moet begrijpen hoe gegevens uit meerdere secties en cursussen kunnen worden gecombineerd.
- Prestatiecriteria en benchmarks: Reationele doelen stellen voor studentenprestaties. Bijvoorbeeld: "80% van de studenten zal een score van 3 of hoger halen op een 4-punts-rubric voor Resultaat 5."
Een effectieve manier om assessment alfabetisering te bouwen is door middel van een rubric norming sessie. Faculteit verzamelen om een steekproef set van studentenwerk met behulp van een gemeenschappelijke rubriek te scoren. Ze bespreken discrepanties en kalibreren hun score. Dit verbetert niet alleen de betrouwbaarheid van inter-rater, maar verdiept ook hun begrip van hoe "aanvaardbaar" prestaties eruit zien. Dergelijke sessies kunnen worden herhaald aan het begin van elk semester voor belangrijke beoordelingen zoals senior ontwerpprojecten of capstone rapporten.
3. Curriculum Mapping
Curriculum mapping is een visuele of tabeller weergave van hoe cursussen en programmavereisten bijdragen aan de resultaten van studenten. Het is een krachtig hulpmiddel voor de faculteit om het grote plaatje en hun rol in het te zien. Een goed gebouwde kaart helpt vragen te beantwoorden zoals:
- Welke resultaten worden zwaar gedekt? Welke zijn onder-onder-gedekt of ontbreken?
- Is er een logische progressie van inleidende naar gevorderd leren?
- Waar zijn de beste plaatsen om beoordelingsgegevens voor elk resultaat te verzamelen?
Een typisch proces is een terugtocht of een reeks bijeenkomsten waarbij elk faculteitslid de resultaten identificeert die in zijn cursussen worden behandeld en aangeeft hoe het is om te leren (ingevoerd, versterkt of gemasterd). Deze samenwerking brengt vaak verrassende lacunes of ontslagen aan het licht. Zo kan een programma bijvoorbeeld ontdekken dat teamwork (Outcome 5) slechts in één electieve cursus wordt gegeven, of dat de uitkomst informeel wordt beoordeeld zonder een rubric. Zodra er lacunes zijn vastgesteld, kan de faculteit wijzigingen voorstellen: een groepsproject toevoegen in een kerncursus, een opdracht herzien om teamwork expliciet aan te pakken, of een gemeenschappelijk rubric voor teamdeliverables ontwikkelen.
Curriculum mapping ondersteunt ook articulatie van leerresultaten om resultaten te programmeren. Wanneer faculteitsleeropleidingssyllabusti leerdoelstellingen schrijft, kunnen zij expliciet aangeven welke programmaresultaten worden aangepakt en hoe zij zullen worden beoordeeld. Deze uitlijning is een belangrijk element van ABET-bewijs en helpt studenten de relevantie van hun cursuswerk te begrijpen.
4. Documentatiepraktijken
ABET accreditatie is sterk afhankelijk van gedocumenteerd bewijs van wat het programma doet en hoe het voortdurend verbetert. Faculteiten hebben training nodig over documentatieverwachtingen en best practices.
- Natuurlijke bestanden: Een map behouden voor elke cursus met syllabus, voorbeeldwerk voor studenten (geanonimiseerd), gebruikte rubrieken, en een samenvatting van de resultaten en wijzigingen van de beoordeling.
- Beoordelingsverslagen: Een standaard template voor de faculteit om beoordelingsgegevens voor een specifiek resultaat te rapporteren, inclusief bevindingen, interpretatie en geplande verbeteringen.
- Ontmoeting notulen: Documenteren van discussies over beoordelingsgegevens en genomen beslissingen. Bijvoorbeeld notulen van een vergadering van een curriculumcomité die besloten heeft om een vereiste te herzien vanwege lage prestaties in een volgende cursus.
- Versiecontrole: Bijhouden hoe opdrachten, rurics en syllabusi zich in de loop van de tijd ontwikkelen als reactie op de beoordelingsresultaten. Dit toont de cyclus "de lus sluiten" aan.
Om de documentatie minder belastend te maken, kunnen afdelingen digitale templates en repositories maken. Een gedeelde drive- of leerbeheersysteemmapstructuur kan standaardiseren waar documenten worden opgeslagen. Faculteit moet voorbeelden van goed georganiseerde cursusbestanden van collega's laten zien. Het helpt ook om een puntpersoon (beoordelingscoördinator of ondersteuning van personeel) aan te wijzen die vragen kan beantwoorden en periodiek bestanden kan beoordelen op volledigheid voordat een zelfstudie of bezoek aan een site wordt uitgevoerd.
Het is belangrijk om te benadrukken dat documentatie niet alleen voor accreditatie is, maar voor de eigen professionele ontwikkeling van de faculteit en voor het verbeteren van het onderwijs. Wanneer de faculteit ziet dat het documenteren van hun beoordelingswerk leidt tot minder verrassingen tijdens beoordelingen en levert bewijs voor promotie- en onderwijsprijzen, zijn ze meer kans om te investeren in de praktijk.
Uitvoering van effectieve beoordelingsmethoden
Met een voorbereide faculteit wordt de volgende stap gezet in het implementeren van evaluatiemethoden die geldige, betrouwbare gegevens opleveren zonder overweldigende instructeurs. De mantra moet worden "ingebouwd, niet toevoegen." Waar mogelijk, gebruik bestaande cursusopdrachten, examens en projecten als beoordelingsvoertuigen. Dit vereist een zorgvuldig ontwerp vooraf.
Diverse beoordelingstypen
Een enkele methode legt zelden alle dimensies vast van een resultaat. Programma's moeten een mix van:
- Examens en quizzen: Goed voor het testen van kennis en analytische vaardigheden, maar minder effectief voor teamwork of communicatie. Gebruik conceptinventarissen (bijv. Force Concept Inventory for physics) voor benchmarking.
- Ontwerpen Projecten: Ideaal voor het gelijktijdig beoordelen van meerdere uitkomsten (probleemoplossend, ontwerp, teamwork, communicatie). Gebruik gestructureerde rubrics om bijdragen te scheiden.
- Lab Reports: Beoordeel experimenten, data analyse en schriftelijke communicatie. Zorg ervoor dat rubrics expliciet elk resultaat behandelen.
- Portfolios: Capstone-portefeuilles verzamelen bewijsmateriaal over meerdere cursussen. Ze zijn waardevol voor het aantonen van groei en voor het beoordelen van resultaten op programmaniveau zoals ontwerp of levenslang leren.
- Presentations and Peer Reviews: Nuttig voor mondelinge communicatie en teamwork resultaten. Peer evaluatie instrumenten (bijv. CATME) verstrekken gegevens over individuele bijdragen aan teams.
Gegevensverzameling en -analyse
Faculteit moet beslissen hoe gegevens efficiënt te verzamelen en te aggregeren. Sampling is vaak nodig wanneer de klassen groot zijn. Bijvoorbeeld, een programma kan elk semester gegevens verzamelen van de senior design cursus, maar alleen van de capstone cursus eenmaal per jaar. Een andere aanpak is om een "gemeenschappelijke beoordeling" te maken over alle secties van een multi-sectie cursus. Bijvoorbeeld, alle secties van Engineering Mechanics kunnen hetzelfde eindexamen probleem dat een specifieke uitkomst beoordeelt beheren. Faculteit kan dan data poolen om een programma-niveau foto te krijgen.
De analyse van de gegevens moet eenvoudig zijn: reken percentages of verdelingen van de ruricscores, vergelijk met het prestatiedoel en bepaal gebieden van zwakte. Faculteit heeft begeleiding nodig bij het zinvol interpreteren van gegevens. Bijvoorbeeld, als 75% van de studenten het doel bereikt maar het programma verwacht 80%, wat betekent dat? Is de kloof te wijten aan een fout in de instructie, een te moeilijke beoordeling, of een cohort probleem? Faculteit moet worden opgeleid om deze vragen te stellen en om bevindingen te trianguleren met andere bewijzen (bijvoorbeeld feedback van werkgevers, alumni enquêtes, rangverdelingen).
Gebruik van technologie
Technologie kan evaluatieprocessen stroomlijnen en de werkbelasting van de faculteit verminderen. Tools zoals leermanagementsystemen (LMS) met resultatentracking (bijv. Canvas Outcomes, Blackboard Goals) laten de faculteit toe om opdrachten te taggen naar resultaten en automatisch scores te aggregeren. Andere specifieke evaluatiemanagementplatforms zoals Taskstream, Weave of Nuventive bieden dashboards voor programma-niveauanalyse. Echter, technologie is alleen nuttig als de faculteit wordt opgeleid om het consequent te gebruiken. Simple Excel spreadsheets kunnen net zo goed werken voor kleine programma's. De sleutel is om te kiezen voor tools die overeenkomen met de maturity en het comfortniveau van het programma. ABET biedt een repository van beste praktijken en tools[ die programma's kunnen referentie.
Een cultuur van continue verbetering bevorderen
Het uiteindelijke doel van de ABET-beoordeling is niet om rapporten te produceren maar om continue verbetering te stimuleren. Dit vereist een culturele verschuiving van het bekijken van assessment als een add-on naar het bekijken ervan als een integraal onderdeel van onderwijs en leren. Cultivering van deze cultuur is de verantwoordelijkheid van afdelingsleider, maar ieder faculteitslid speelt een rol.
Rol van leiderschap en ondersteuning
De voorzitters van de afdeling, programmacoördinatoren en decanen moeten hun inzet tonen door middel van acties, niet alleen woorden.
- Toedeling van middelen: Verschaf tijd voor beoordelingscoördinatoren of een beoordelingscommissie voor de faculteit.Bijwoning van het fonds bij workshops of conferenties in verband met ABET.
- Bevorderende prikkels: Herkent beoordelingswerk in jaarlijkse evaluaties, verdienste loon en promotiecriteria. Een onderwijsprijs kan bijdragen tot beoordeling en verbetering overwegen.
- Creatiestructuren: Stel permanente comités op (bijv., Curriculum Committee, Assessment Committee) die regelmatig bijeenkomen en duidelijke charters hebben. Zorg ervoor dat beoordelingsgegevens een permanent agendapunt zijn tijdens de afdelingsvergaderingen.
- Modeling Gedrag: Leiders moeten deelnemen aan trainingen, hun eigen beoordelingsresultaten delen en publiekelijk bespreken verbeteringen die ze hebben gemaakt in hun cursussen.
Faculteitssamenwerking en Gemeenschap
Beoordeling is het meest effectief wanneer het een samenwerking in plaats van een individuele last wordt. Faculteit moet worden aangemoedigd om te werken in teams om beoordelingen te ontwerpen, delen van rubrics, en bespreken resultaten. Bijvoorbeeld, een "leercirkel" van instructeurs die dezelfde inleidende cursus kan maandelijks ontmoeten om te praten over gemeenschappelijke beoordelingen en studentenproblemen. Zulke gemeenschappen verminderen isolatie en genereren collectieve eigendom van studenten succes.
Bovendien kunnen programma's een repository van beoordelingsbronnen creëren, zoals voorbeeldrubrics, geannoteerde studentenwerkvoorbeelden en samenvattingen van succesvolle verbeteringen. Nieuwe faculteiten kunnen deze materialen tijdens het aan boord nemen gebruiken. Wanneer de faculteit voorbeelden ziet van hoe hun collega's het leren van studenten op basis van beoordelingsgegevens verbeterden, zijn ze eerder geneigd om zich te gaan bezighouden met zichzelf.
Sluiten van de Loop: Van gegevens naar verbetering
De term "de lus sluiten" verwijst naar de cyclus van het verzamelen van beoordelingsmateriaal, het interpreteren ervan, het maken van verbeteringen, en dan opnieuw beoordelen om te zien of veranderingen gewerkt. Faculteit heeft expliciete voorbeelden van deze cyclus nodig. Een krachtig voorbeeld kan zijn: Een programma stelt vast dat slechts 60% van de senioren de prestatiedoelstelling op Resultaat 2 (ontwerp) haalt. Faculteit analyseert dat veel studenten falen omdat ze geen realistische beperkingen overwegen (bijv. economisch, milieu). Als gevolg daarvan voegt het programma een lezingsmodule over ontwerpbeperkingen in de junior-level capstone voorbereidingscursus toe en herziet het senior ontwerp ruric tot gewichtsbeperkingen zwaarder. In de volgende beoordelingscyclus verbetert de prestaties tot 80%. Dit verhaal is overtuigend bewijs voor een bezoek aan de site en toont aan dat faculteit niet alleen gegevens verzamelt maar het gebruik ervan.
Het documenteren van deze "sluiten van de lus" verhalen is essentieel. Faculteit moet een tijdschrift of een register bijhouden van wijzigingen die zijn gemaakt op basis van beoordelingsgegevens. Zelfs kleine veranderingen .zoals het herschikken van onderwerpen in een cursus of het verstrekken van een steekproefopdracht zijn het vermelden waard. ABET beoordelaars zoeken naar bewijs dat het programma is een learning organisatie die zich aanpast in de tijd.
Praktische stappen om te beginnen
Als uw programma net begint met het voorbereiden van de faculteit voor ABET-evaluatie, dan is hier een gefaseerde aanpak:
- Fase 1: Bouwbewustzijn (semester 1) . Voer een start workshop uit waarin ABET criteria en het belang van faculteit betrokkenheid worden uitgelegd. Onderzoeksfaculteit om hun huidige kennis en zorgen te meten.
- Fase 2: Infrastructure (semester 2) . Vorm een beoordelingscommissie, maak een curriculumkaart (of update bestaande), en neem een set programma-niveau studentenresultaten.
- Fase 3: Ontwikkel hulpmiddelen (zomer) . . Schrijf of herzie leerresultaten afgestemd op de resultaten van het programma. Maak of verfijn rurics voor belangrijke beoordelingen, vooral in senior ontwerp en capstone cursussen.
- Fase 4: Pilot Assessment (fall semester) . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
- Fase 5: Volledige implementatie (voorjaar semester en verder) . . Schaal naar alle cursussen. Stel regelmatige rapportagecycli op. Begin met "sluiten van de lus" door het maken van wijzigingen op basis van gegevens. Ga door met professionele ontwikkeling via workshops en peer mentoring.
Conclusie
Het voorbereiden van ingenieursopleidingen voor effectieve ABET-evaluatie en -evaluatie is geen eenmalige gebeurtenis, maar een continue reis die het hele onderwijsprogramma versterkt. Wanneer de faculteit de accreditatiecriteria goed begrijpt, is uitgerust met beoordelingsgeletterdheid, duidelijke curriculumkaarten heeft en systematische documentatie omarmt, kunnen zij de beoordeling van een compliancelast omzetten in een krachtig instrument om het leren van studenten te verbeteren. De strategieën die in dit artikel worden beschreven, trainingsworkshops, beoordelingsgeletterdheid, curriculum mapping, documentatiepraktijken, diverse beoordelingsmethoden en een ondersteunende cultuur van continue verbetering bieden een routekaart voor programma's in elk stadium van voorbereiding van de faculteit, engineeringprogramma's niet alleen zorgen voor accreditatiesuccessuccess, maar ook een cultuur van uitmuntendheid bevorderen die afgestudeerden, werkgevers en samenleving ten goede komt. Resources from learning centers[ kan verdere ondersteuning bieden bij de ontwikkeling van de faculteit. Uiteindelijk is het doel een gemeenschap te creëren waar elk lid van de faculteit eigenaar is over de resultaten van de student en zich inzet voor de voortdurende cyclus van reflectie en verbetering.