Evaluation meint 1[ [das methodische Erfassen und] [das begründete Bewerten von Prozessen und Ergebnissen zum] [besseren Verstehen und Gestalten einer Praxis-Maßnahme im Bildungsbereich durch Wirkungskontrolle, Steuerung und Reflexion.] ]1

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Der Fachbegriff &rlaquo;Evaluation&llaquo; enthält zunächst das Erfassen von Prozessen und Ergebnissen. &rlaquo;Erfassen&rlaquo; bedeutet dabei eine explizite Handlung die (a) methodisch organisiert und damit überprüfbar ist und deren Ergebnis (b) festgehalten -- dokumentiert -- wird (&rlaquo;schwarz auf weiß&rlaquo; ).

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Wird ›Evaluation‹ als Fachbegriff verwendet, dann ist dieses ›Bewerten‹ etwas anderes als ›seine subjektive Meinung äußern‹: Man vergleicht die erhobenen Daten (›Ist-Wert‹) mit dem, was man sich gewünscht hat (›Soll-Wert‹). Dieser Soll-Wert sollte möglichst vorher, spätestens im Verlauf der Evaluations-Untersuchung durch Beschreibungen, Erläuterungen und Begründungen so nachvollziehbar gemacht werden, dass auch für einen Außenstehenden verständlich wird, warum welche Kriterien zu einem bestimmten Urteil führen. Der Maßstab muss also explizit begründet werden und kann damit überprüft, kritisiert und korrigiert werden.

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Ein zentrales Evaluationsproblem ist die Frage: Wer definiert Kriterien und Maßstäbe? Das ›Aufdecken von Anliegen und Konfliktthemen‹, [...] das Formulieren der Ziele und das Herausfinden der ›eigentlichen Ziele ‹ wird zunehmend als spezifische, oft schwierige und konfliktträchtige Aufgabe im Evaluationsprozess gesehen. Aber: ohne solch explizite, dokumentierte Bewertungskriterien und Bewertungsmaßstäbe (kurz: Soll-Werte) ist eine ›Evaluation‹ keine Evaluation!

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Evaluation ist [...] kein Selbstzweck, sondern hat eine didaktische Funktion: Praxis soll eingeschätzt, verstanden und verbessert werden. Evaluation soll a) zeigen was abgelaufene Maßnahmen bewirkt haben: Das ist der ›Blick zurück‹ und die Kontrollfunktion. Und Evaluation soll b) helfen, kommende Maßnahmen besser zu gestalten: Das ist der ›Blick nach vorn‹ und die didaktische Steuerungsfunktion von Evaluation. Außerdem hilft Evaluation, c) Bildungsmaßnahmen zu reflektieren (Reflektionsfunktion) und zu verstehen.

Aber: alles gleichzeitig ist meist nicht möglich. Deshalb ist es wichtig, sich bei Evaluationsmaßnahmen von vornherein klar zu machen, was man erreichen will […].

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Mit der Praxis- und Nutzenbezogenheit greift Evaluation einerseits in vorhandene Systeme ein, wird andererseit von den vorhandenen Akteuren und Strukturen beeinflusst. Evaluation spielt sich deshalb immer in einem ›politischen‹ Kontext ab.

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Evaluation is NOT political under the following conditions: *[ [No one cares about the program.] [No one knows about the program.] [No money is at stake.] [No power or authority is at stake.] [And, no one in the program, making decisions about the program, or otherwise involved in, knowledgeable about, or attached to the progam, is sexually active.] ]*

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{uf-eval} 'Michael Quinn Patton' (1997) : Utilization-Focused Evaluation

Der Begriff hat nur dann Trennschärfe, wenn auch klar ist, was er nicht einschließt. Eine Reihe von Auschlusskriterien wurden bereits genannt: *[ [Evaluation setzt die methodische Sammlung und zugängliche Dokumentation von Daten voraus.] [Evaluation macht wertende Aussagen auf der Grundlage begründeter Soll-Wert- oder Ziebleschreibungen.] [Evaluation zielt auf das Verstehen, Bewerten und Verbessern konkreter Praxismaßnahmen.] ]* Fehlt eines dieser Elemente, dann sollte nach dem hier vorgeschlagenen Verständnis nicht von Evaluation gesprochen werden.

Evaluation lässt sich damit auch abgrenzen gegen Forschung: Forschung sucht nach allgemeinen Erkenntnissen […], Evaluation untersucht und bewertet einen speziellen und realen Fall […].

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Die Überprüfung, ob Maßnahmen in der Weiterbildung, den ihnen zugedachten Erfolg haben, ist sowohl für den Lerner, den Kursleiter und Organisator als auch für die Weiterbildungs-Institutionen und die Öffentlichkeit von Interesse:

[ [Den Lernern wird der Erfolg rückgemeldet bzw. es werden Hinweise zur Weiterarbeit gegeben.] [Der Kursleiter bzw. der Organisator/Veranstalter kann didaktische Entscheidungen begründet fällen.] [Der Institution und Öffentlichkeit gegenüber kann gerechtfertigt werden, wozu bestimmte Investitionen gemacht werden.] [Außerdem werden für Wissenschaft und Forschung Datengrundlage und Instrumente geschaffen.] ]

Verzichtet man auf Erfolgskontrollen, dann ergeben sich sowohl praktische als auch theoretische Gefahren: [ [Für die Praxis fehlt ein Maßstab, an dem und mit dem Bildungsangebote verbessert und weiterentwickelt werden; außerdem wird, wer nicht nachweist, was seine Tätigkeit bringt, in weniger bildungsfreundlichen Zeiten Schwierigkeiten haben, sein Angebot zu rechtfertigen.] [Theorien bleiben ohne empirische Kontrolle kaum mehr als wohlklingende und wohlmeinende Überzeugungen; Erwachsenenpädagogik bzw. Andragogik als Wissenschaft von der Bildung Erwachsener tut sich damit schwer, den Geruch der intuitiven Kunst loszuwerden.] ]

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Bevor die eigentliche Untersuchung beginnt, legt man fest,

1[ [was man untersuchen will (Zielbeschreibung)] [was man als erwünschte oder befürchtete Wirkung feststellen will und] [welches die Kriterien und Indikatoren sind, die man erfassen kann und an denen man den Erfolg messen will […].] ]1

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Will man eine Bildungsinvestition begründen, sollte man prüfen, ob es möglich ist, den Schaden zu beziffern, der bei Nicht-Stattfinden der Bildungsmaßnahme entsteht bzw. welche Schadenskosten bereits getragen werden oder in Zukunft getragen sein werden. [...] Manchmal erhält man bei der Frage nach zu heilendem Schade keinen Geldbetrag genannt, sondern nicht-monetäre Gründe [...].

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Indem man sich zwingt, in der Projektplanung und während der Projektdurchführung nicht nur geplante Tätigkeiten zu beschreiben [...] sondern beabsichtigte Wirkungen, Ergebnisse, »Outcomes« zu formulieren, kommt man leichter von allgemeinen Intentionen zu konkretem Handeln. Und man sieht besser und früher, dass Schritte in die richtige Richtung gemacht werden.

[…]

Dieses selbstkritisch-prüfenden Herangehen ist nicht nur für die Evaluation wichtig: Nach unserer Beobachtung führt dies zu einer veränderten professionellen Haltung, in der die andragonische Arbeit nicht mehr allein auf mehroder weniger glaubhafte Bekenntnisse und Überzeugungen angewiesen ist, sondern didaktische Wirkzusammenhänge zunehmend erklärt, begründet und gestaltet werden.

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Evaluation ist nichts ohne Dokumentation. Für die kontinuierliche Arbeit empfiehlt sich ein Projekttagebuch [...]. Am Schluss bzw. nach Teilschritten muss ein Evaluationsbericht abgefasst werden. Meist enthält er folgende Teile:

1[ [Abstract mit Kurzüberblick] [Absicht der Untersuchung] [Projektbeschreibung (Historie) und bebsichtigete Ergebnisse] [Die Untersuchungsmethode] [Datengegründete Darstellung der Ergebnisse, kritische Reflexion] [Vergleich der Absichten und des Erreichten - Bewertung] [Schlussfolgerungen, Empfehlungen: Was haben wir gelernt? Wie geht es weiter?] [Materialanhang] ]1

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Gelernt wird nicht nur, was bewusst als Lerninhalt verkündigt wird, sondern auch und gerade das, was als Nebeninhalt durch die Form unseres Lernangebotes mittransportiert wird.

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Wenn Erwachsenenbildungsarbeit die Entwicklung zum selbständigen und mündigen Bürger, zum verantwortlichen Mitarbeitern, zur vielseitigen Persönlichkeit fördern will, dann darf Evaluation nicht entmündigen, Verantwortung wegnehmen, fremde Maßstäbe unerklärt anlegen, einseitig und ohne individuelle Rücksicht beurteilen; den Beteiligten muss die Möglichkeit eingeräumt sein, eigenverantwortlich beim Beurteilungsprozess mitzuwirken und auch diesen Teil des Lernens für eigene Entwicklung zu nutzen.

Wenn Erwachsenenbildung nützen und nicht Schaden zufügen soll, dann darf Evaluation nicht unnötig Bildungszeit verschenken, darf nicht verletzen, herabwürdigen und die Bereitschaft zum Weiterlerenen, zur lebenslangen und lebensbreiten Bildung verringern oder gar beenden. Evaluation hat in andragogisch-ethischer Verantwortung das eigene Vorgehen zu reflektieren.

Dieses Vergewissern, welche Vorstellungen uns beim Evaluieren leiten, ist ein Stück professionell-andragogisches Handeln, in dem Aktion und Reflexion zusammenfließen. Theorie ist dabei nicht darüberschwebend-unverbindliches Wortgeplänkel, Praxis ist nicht blindes Drauflosagieren, Theorie erleuchtet Praxis, so dass wir unser Handeln in seinem Kontextverstehen und begründet gestalten können.

Verstehen wir Evaluation als didaktisches Handeln, bei dem es um ein besseres Verstehen und Gestalten von Bildungsangeboten für Erwachsene geht, dann muss sich dieses didaktische Handeln an unseren Vorstellungen vom Erwachsenen und seinem Lernen orientieren. Sich diese explizit bewusst zu machen heißt, die Besonderheiten von andragogischer Evaluation zu kennen.

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Die zentrale Funktion von Evaluation in der Erwachsenenbildung ist nicht, Lerner in eine Rangfolge gemäß ihres Wissens/Könnens zu bringen, sondern Bildungsangebote auf ihre Qualität zu prüfen.

Evaluation ist ein Teil des Lernprozesses und dient dem Lernerfolg. Neben der Information über Erreichtes und Nichterreichtes an den Lernenden (summative Evaluation) kommt der formativen Evaluation besondere Bedeutung zu: im Lernprozess Lernhilfe zu sein.

In der Erwachsenenbildung kommt der Selbstevaluation gegenüber der Fremdevaluation of eine größere Rolle zu. In vielen Fällen […] können die Beteiligten selbst erkennen und beurteilen, was erreicht wurde und was erreicht werden sollte.

Insbesondere zur Stärkung der selbständigen und selbstverantwortlichen Eigensteuerung des Lernens ist die Selbstkontrolle von besonderer Bedeutung. Dies schließt Fremdkontrolle als Rückmeldung (zur Motivation/Belohnung und/oder Entscheidung über Korrektur) nicht aus.

Evaluation in der Erwachsenenbildung stellt sich oft als gemeinsames Bemühen aller Beteiligten dar, die sich auch im Evaluationsprozess die Verantwortung teilen.

Deshalb wird man die Maßnahmen und die Ergebnisse von Evaluation bei Erwachsenen in der Regel mit allen Beteiligten absprechen bzw. besprechen.

Dabei geht es nicht um Abrechnung, sondern um die Fragen: Wer trägt welche Verantwortung? Was hat jeder für sich daraus gelernt? Was folgt daraus fürs Weiterlernen?

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Evaluation kann eine Bildungsmaßnahme entweder von innen heraus an ihren deklarierten Absichten dokumentieren und bewerten - das wäre »intrinsische Evaluation«, - oder man kann erfasen, welche Früchte diese Maßnahme trägt - das wäre Output-Evaluation ([...] oder »Ergebnisevaluation«).

[…]

Das Gemeinsame dieser intrinsischen Evaluationsformen liegt darin, dass Maßnahmen, Prozesse, Konzepte aus ihren eigenen Ansprüchen heraus überprüft werden, und nicht an ihren Auswirkungen.

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Bei der Zielevaluation werden die Ziele einer Bildungsmaßnahme, die zu diesem Zwecke explizit formuliert sein müssen, überprüft. Dazu werden sie auf logische Stimmigkeit, Vollständigkeit, Genauigkeit und Überprüfbarkeit untersucht. Dies erfolgt, bevor die Früchte der Zielangabe etwa in einem Projektverlauf sichtbar werden, also gewissermaßen von innen heraus, indem man argumentativ die Zielformulierungen selbst bewertet.

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Wenn vom Verlauf, vom Prozess einer Bildungsmaßnahme bestimmte Qualitäten erwartet werden, - z.B. die Teilnehmer sollen aktiv sein, es soll ein partnerschaftliches Klima herrschen, das Lernen soll visuell unterstützt sein -, dann kann man die Planung/den Prozess beobachten und prüfen, ob er tatsächlich so abläuft wie gewünscht. Auch hier prüft man kein Ergebnis, sondern misst die Sache innerlich an ihren eigenen Ansprüchen.

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Produktevaluation (nicht zu verwechseln mit Output-/Ergebnisevaluation!) bedeutet, dass man ein didaktisches Produkt, zum Beispiel die Planung einer Konferenz, die Möblierung eines Bildungszentrums oder den Entwurf eines Studienbriefes aus den eigenen Ansprüchen heraus evaluiert, noch bevor bei einem ersten Nutzer die Ergebnisse sichtbar werden.

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Output-Evaluation \[dokumentiert und bewertet\] was bei einer Maßnahme als Ergebnis herauskommt: Werden nach einem Sprachkurs bestimmte sprachliche Situationen beherrscht? Wie gut lösen die Teilnehmer die Theoriefragen beim Sportboot-Führerschein [...]. Output-Evaluation ist also erst möglich nach Abschluss einer Bildungsmaßnahme bzw. einem Zwischenabschnitt. Erst dann kann man festhalten, welche Früchte sie getragen hat.

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Evaluation kann quantitative Größen erfassen. Dies geschieht meist in Form von Zahlen [...]. Auch Aussagen über Qualitäten lassen sich in quantifizierter Form erheben, beispielsweise in der Form von Ratings (Schätzskalen) [...].

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Bei der qualitativen Evaluation werden Aussagen in Form von Worten gesammelt, die nicht vorher festgelegt sind. Qualitatives Vorgehen lässt Offenheit für nicht vorhergesehene Beobachtungen.

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Vorteil quantitativer Evaluation ist, dass man große Personenzahlen schnell befragen, auswerten und zusammenfassen kann. Nachteil ist, dass vieles damit an Farbigkeit der Information verloren geht und dass man nur Antworten auf das bekommt, was man fragt - und nicht, was den Befragten am Herzen oder auf der Zunge gelegen hätte, an das der Evaluator in seinem Fragebogen aber nicht gedacht hat. Solche Inhalte, die vom Evaluator nicht berücksichtigt wurden, gewinnt man eher mit qualitativen Verfahren, man erhält offen-überraschende Antworten, Nunancen und Farben - mit der Schwierigkeit, diese dann zusammenfassend auszuwerten.

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Im Original als Graphik:

Bei Kursauswahl: Angebots-Evaluation: Wird das Angebot unser Problem lösen?

Kursverlauf: Evaluation Meinung: Wie beurteilen die Nutzer das Angebot?

Kursverlauf: Evaluation Was wissen/können die Nutzer danach?

In der Praxis: Evaluation Anwendung Was tun die Nutzer in der Praxis?

In der Praxid: Evaluation Wirkung: Wurde die Praxis wunschgemäß verändert?

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Bei dieser Strategie wird am Ende einese Kurses gefragt, was die Teilnehmer über den Kurs meinen. Es erfolgt also eine Einschätzung, oft in Form einer Schätzskala [...]. Diese Methode hat den Vorteil, dass sie ökonomisch durchführbar ist und die Ergebnisse schnell zur Verfügung stehen. Außerdem können die Fragen solcher Schätzskalen weitgehend unabhängig vom Kursinhalt formuliert werden, das gleiche Befragungsinstrument ist deshalb auch bei unterschiedlichen Kursinhalten einsetzbar. Diese Methode ist deshalb die am öftesten anzutreffende Auswertungsform.

Nachteil einer solchen Schätzskala ist, dass die Teilnehmer ihren subjektiven Eindruck […] vom Kurs wiedergeben, der durch vielerlei Faktoren beeinflusst wird und keineswegs unbedingt zutrifft.

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Will man wissen, welches Wissen und Können in einem Kurs erworben wurde [...], so muss man jeden Teilnehmer dieses Wissen oder Können vorführen lassen. Dies kann am Ende des Kurses geschehen in Form einer Prüfung, mit Papier-Bleistift-Aufgaben, (standardisierten) Tests, Simulationen, Arbeitsaufgaben einer Probearbeit oder ähnlichem.

[…]

Vorteil dieser Stufe 2 ist, dass die Stoffbeherrschung direkt gezeigt wird und man nicht auf die mehr oder weniger verlässliche Selbsteinschätzung oder Meinung der Teilnehmer angewiesen ist. Ein weiterer, vor allem didaktischer Vorteil ist, dass die Teilnehmer erfahren, was sie können. Meistens ist dies eine ermutigende und stolz machende Erfahrung.

[…]

Von Nachteil ist, dass die Konstruktion solcher Lernergebnis-Prüfungen oft aufwändig ist, dass sie nur für einen einzelnen Kurs bzw. Stoffbereich gelten und komplexere Lehrziele wie »Selbständigkeit« oder »Verantwortung« so kaum erfasst werden können. Außerdem ist mit der Lernergebnisprüfung nicht ausgesagt, ob das Gelernte nachher auf die Praxis transferiert wird und diese positiv verändert wird.

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Mit der Evaluation auf der Stufe »Anwendung« wird also unterschiedliches geprüft. Man prüft:

Weiterbildungs-Erfolg: Wurde nichts oder nicht ausreichend gelernt?

Mehr oder weniger Erfolg hängt auf der Stufe »Anwendung« auch davon ab, dass genügend gelernt wurde. Hier wird man also nachfragen, ob die Bildungsmaßnahme gut genug war, um den Erfolg zu sichern. Ist dies nicht der Fall, dann muss sie entweder verbessert werden oder verlängert/wiederholt werden. »Besser und/oder mehr davon« wäre die Strategie.

Transfer-Erfolg: Wurde genug transferierbar gelernt?

Fehlender Anwendungserfolg kann möglicherweise darauf zurückgeführt werden, dass zwar die richtigen Inhalte gelehrt wurden, dass die Teilnehmer die Inhalte auch gelernt haben, dass aber im Kurs nicht genügend auf die Praxisübertragung geachtet wurde.

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Inhaltskontrolle: Wurden die richtigen Inhalte gelernt?

Erfolg bzw. Nichterfolg bei der Anwendung richtet den prüfenden Blick auch auf die Inhalte der Bildungsmaßnahme. Sind es die falschen, dann nutzt »besser oder mehr davon« nichts; als Strategie müssen Inhalte revidiert werden bzw. die Schwerpunkte anders gesetzt werden.

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Inhaltskontrolle: Wurden die richtigen Inhalte gelernt?

Erfolg bzw. Nichterfolg bei der Anwendung richtet den prüfenden Blick auch auf die Inhalte der Bildungsmaßnahme. Sind es die falschen, dann nutzt »besser oder mehr davon« nichts; als Strategie müssen Inhalte revidiert werden bzw. die Schwerpunkte anders gesetzt werden.

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Anwendungskontrolle: Bestand die Möglichkeit der Anwendung? [...] Anwendung ist ein Kriterium, das vom Teilnehmer subjektiv selbst definiert werden kann!

Spielt die Sicherung des Erfolgs auf der Ebene »Anwendung« eine wichtige Rolle, dann ist es didaktisch of sinnvoll, etwas ein Vierteljahr nach dem Kurs ein erneutes Treffen durchzuführen und dabei sowohl Transferprobleme als auch Anwendungswiderstände zu besprechen.

Ob mit dem Anwenden des Gelernten auch die beabsichtigten Wirkungen erzielt werden, ist auf dieser Stufe nicht gesichert. Dies wird in Stufe 4 [Wirkung] geprüft.

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen

Am Ende eines Kurses etwas zu wissen oder zu können ist eine Sache; eine andere Sache ist es, ob dieses Wissen oder Können später auch in die Praxis umgesetzt wird. In dieser dritten Stufe wird festgestellt, ob in Folge der Bildungsmaßnahme eine Anwendung des Gelernten in der Praxis festzustellen ist [...]. Dazu werden einige Zeit nach dem Kurs [...] die Teilnehmer im Anwendungsbereich aufgesucht und es wird festgestellt, ob das neu erworbene Wissen/Können angewendet wird. [...] Vorteil ist, dass jetzt geprüft wird, ob das Lernen tatsächlich zu einer verbesserten Handlungsfähigkeit geführt hat, und nicht zu einem folgenlosen Papierwissen; Nachteil ist die manchmal aufwändigere Erhebungsmethode [...]. Allerdings ist zu berücksichtigen, dass eine eventuelle Nicht-Anwendung des Gelernten weder bedeutet, dass die vorangegangene Bildungsmaßnahme erfolglos war, noch das der Teilnehmer nichts gelernt hat: Vielleicht hat sich einfach noch keine Gelgenheit zur Anwendung ergeben. [...] Das Problem liegt hier nicht im Verantwortungsbereich des Bildungswesens, sondern des Managements: Lernen macht nur dann Sinn, wenn hinterher auch die Möglichkeit der [...] Erprobung geboten wird [...]. Diese Möglichkeit der Erprobung liegt möglicherweise gar nicht in der Hand des Weitergebildeten oder des Trainers, sondern bei Vorgesetzten oder anderen, welche die Anwendung ermöglichen und dazu ermutigen müssen. Die Evaluation auf dieser Stufe überprüft damit nicht nur Bildungsergebnisse, sondern auch das Umfeld und kann damit feststellen, ob die Bildungsmaßnahme von Anfang an überhaupt sinnvoll war (wozu etwas lernen lassen, das hinterher gar nicht gebraucht wird?) und ob nachträglich das Umfeld so gestaltet wurde, dass das Gelernte auch angewendet werden konnte. Hier kann Evaluation dann wieder formativ wirken: bewusst zu machen, dass Anwendung möglicherweise nicht von sich alleine erfolgt, sondern auf Vorbedingungen angewiesen ist, die erst zu schaffen sind.

Weiterbildung; Evaluation; Lernerfolgserfassung; Leistungsbeurteilung ;

{weiterbildungsevaluation} 'Jost Reischmann' (2002) : Weiterbildungs-Evaluation: Lernerfolge messbar machen