PDF zum herunterladen

EVALuna
Fakultätsweite anonymisierte Online-Evaluation als Grundlage
für Qualitätssicherung und Benchmarking in der Lehre
Dr. T. Ganslandt, Dr. B. Marschall
Binary Design GmbH
www.evaluna.net
::
© 2001-2003 Binary Design GbmH
Hintergrund
Zieldefinition
Rückkopplung
Effiziente Lehre
Effiziente Evaluation
2
www.evaluna.net
::
© 2001-2003 Binary Design GbmH
Hintergrund
Chance
„ Neue Approbationsordnung
ƒ breite Restrukturierung
„ Qualitätsmanagement
ƒ kritische Evaluation neuer Curricula
ƒ Etablierung dauerhaft tragfähiger Feedback-Mechanismen
ƒ inter-institutionelles Benchmarking & Ranking
„ Gesetzlich verankert (ÄAppO, HRG)
ƒ regelmäßige Evaluation der Lehrveranstaltungen
ƒ Beteiligung der Studierenden
ƒ Veröffentlichung der Ergebnisse
3
www.evaluna.net
::
© 2001-2003 Binary Design GbmH
Hintergrund
Ziele und Funktionen
„ Empfehlungen HRK/Wissenschaftsrat 1996
ƒ Transparenz
ƒ Rechenschaftslegung
ƒ Qualitätssicherung und -entwicklung
ƒ Leistungsmessung und -vergleich
ƒ Leistungsbezogene Mittelverteilung
4
www.evaluna.net
::
© 2001-2003 Binary Design GbmH
Hintergrund
Projektanforderungen
„ zeitnah
„ hoher Rücklauf
„ anonym
„ sicher
„ nutzerfreundlich
„ kostengünstig
5
www.evaluna.net
::
© 2001-2003 Binary Design GbmH
Evaluationsverfahren
Neue Lösungen
6
www.evaluna.net
::
© 2001-2003 Binary Design GbmH
Methoden
Workflow
Evaluation
Studierende
Mittelvergabe
Dozenten
Sekretariate
Indiv.
Auswertung
Scheinvergabe
Gesamtauswertung
StudienDekanat
Zertifizierung
7
Bescheinigung
www.evaluna.net
::
© 2001-2003 Binary Design GbmH
Methoden
Evaluationsformen
EVALuna
Fakultätsevaluation
Kursevaluation
PROJEKTE
Mailevaluation
Pakete
Pakete
Umfragen
VERANSTALTUNGEN
Veranstaltungen
Veranstaltungen
Gruppen
Themen
Mailings
Gruppen
8
www.evaluna.net
::
© 2001-2003 Binary Design GbmH
Methoden
Fakultätsevaluation
Fakultätsevaluation
Kurs 1
Kurs 2
Gemeinsamer Fragebogen
Gemeinsame Auswertung
9
Kurs 3
www.evaluna.net
::
© 2001-2003 Binary Design GbmH
Methoden
Kursevaluation
Kursevaluation
10
Kurs 1
Kurs 2
Kurs 3
Fragebogen 1
Fragebogen 2
Fragebogen 3
Themen 1
Themen 2
Themen 3
Gruppen 1
Gruppen 2
Gruppen 3
Auswertung 1
Auswertung 2
Auswertung 3
www.evaluna.net
::
© 2001-2003 Binary Design GbmH
Methoden
Mailevaluation
EVALuna
Mailer
Mailevaluation
Gruppen
Teilnehmerliste
Zugangscodes
Code-Import
Mailing 1
Fragebogen
Mailing 2
Mailing 3
Auswertung
11
www.evaluna.net
::
© 2001-2003 Binary Design GbmH
Methoden
Implementierung
Data
Logic
Mailer
Teilnehmer
Zugangscodes
Userstatistik
Evaluation
User
Sessions
Projekte
Fragebögen
Antworten
MySQL
12
Auswertung
Presentation
Administration
EVALuna-Portal
MS-Med
...
ER-IMI
...
Verwaltung
Session-Mgt.
(mod_)Perl, PHP
Apache / Web-Browser
www.evaluna.net
::
© 2001-2003 Binary Design GbmH
Ergebnisse
Anwendung in Münster
16603
16796
15484
18000
15006
12188
16000
15077
14063
14000
9173
12000
10000
5482
8000
6381
5426
3093
6000
4000
1027
3512
2856
2077
Zertifizierungen
2000
0
Kommentare
0
WS01/02
0
User (kumulativ)
146
234
SS02
WS02/03
13
Belegungen
SS03
Nachrichten (kumulativ)
www.evaluna.net
::
© 2001-2003 Binary Design GbmH
Ergebnisse
Zeitlicher Verlauf
Beurteilen Sie die Veranstaltung auf einer freien Skala:
schlechter
100
90
80
70
60
50
40
30
besser
20
10
0
WS 2001
14
SS 2002
WS 2002
SS 2003
www.evaluna.net
::
© 2001-2003 Binary Design GbmH
Ergebnisse
Ranking
Beurteilen Sie die Veranstaltung auf einer freien Skala:
90
80
schlechter
100
70
60
50
40
30
10
0
15
besser
20
www.evaluna.net
::
© 2001-2003 Binary Design GbmH
Diskussion
Wirkung
„ Ziele erreicht
ƒ
ƒ
ƒ
ƒ
hoher Rücklauf
Wahrung der Anonymität
hohe Akzeptanz
zeitnaher Einsatz
„ Optimierung der Lehre
ƒ Identifikation kritischer Bereiche
ƒ Fokussierung der Ressourcen
ƒ unmittelbare Auswirkungen auf Lehrveranstaltungen
16
www.evaluna.net
::
© 2001-2003 Binary Design GbmH
Ausblick
„ Funktionalität
ƒ
ƒ
ƒ
ƒ
ƒ
ƒ
Mehrsprachlichkeit
Unabhängigkeit vom Fach Medizin
erweiterte Zugangsmöglichkeiten
erweiterte Auswertungen
Versionierung der Fragebögen
Evaluationsworkflows (Delphi-Verfahren)
„ Professionalisierung
ƒ Spin-off zum Vertrieb des Systems
ƒ überregionales Angebot nach dem ASP-Modell
17
www.evaluna.net
::
© 2001-2003 Binary Design GbmH
Ausblick
11/2002 Medica
11/2001 Medica
06/2003 Wissenschaftstage NRW Moskau
02/2003 Learntec Karlsruhe
18
05/2001 WEM Vancouver