GMS Zeitschrift für Medizinische Ausbildung (Aug 2006)
Qualitätsverbesserung von MC Fragen [Quality assurance of Multiple Choice Questions]
Abstract
[english] Because of the missing relevance of graded examinations at the German medical faculties, there was no need to reflect the question quality in written examinations consistently. Through the new national legislation for medical education certification-relevant, faculty-internal examinations are prescribed. Until now, there is a lack of structures and processes which could lead to an improvement of the question quality. To reflect the different performance of the students, a different severity and a good selectivity of the test questions are necessary. For a interdisciplinary examination for fourth year undergraduate students at the University Hospital Duesseldorf, new Multiple choice (MC)- questions which are application-orientated, clearly formulated and to a large extent free from formal errors should be developed. The implementation took place in the conception and performance of Workshops for the construction of MC-questions and the appointment of an interdisciplinary review-committee. It could be shown that an author training facilitates and accelerates the review-process for the committee and that a review process reflects itself in a high practise-orientation of the items. Prospectively, high-quality questions which are created in a review-process and metrological analysed could be read into inter-university databases. Therewith the initial expenditure of time could be reduced. The interdisciplinary constitution of the review-committee offers the possibility of an intensified discussion over content and relevance of the questions. [german] Wegen fehlender notenrelevanter Prüfungen an den Medizinischen Fakultäten in Deutschland bestand bisher keine Notwendigkeit, die Fragenqualität in schriftlichen Prüfungen konsequent zu reflektieren. Erst durch die neue Approbationsordnung sind zeugnisrelevante, fakultätsinterne Prüfungen vorgeschrieben. Es fehlen somit oftmals Strukturen und Prozesse, die zu einer Verbesserung der Fragenqualität führen. Damit die Klausuren das unterschiedliche Leistungsspektrum der Studierenden widerspiegeln, sind u.a. unterschiedliches Schwierigkeitsniveau und eine gute Trennschärfe der Prüfungsfragen notwendig. Für eine fachübergreifende Klausur des vierten Studienjahres an der Universität Düsseldorf sollten neue MC -Fragen entwickelt werden, die anwendungsorientiert prüfen, eindeutig formuliert und weitgehend frei von formalen Fehlern sind. Die Umsetzung erfolgte in der Konzeption und Durchführung von Workshops zur Erstellung von MC-Fragen für Fragenautoren und die Einrichtung eines interdisziplinären Reviewkomitees. Es konnte gezeigt werden, dass eine Autorenschulung den Reviewprozess für das Reviewkomitee erleichtert und beschleunigt. Der Nutzen des Reviewprozesses spiegelt sich in einer hohen Anwendungsorientierung der einzelnen Items wider. Hochwertige, in einem Reviewverfahren erstellte und messtechnisch analysierte Prüfungsfragen könnten künftig in interuniversitäre Datenbanken eingegeben werden und damit den anfänglich erforderlichen Zeitaufwand relativieren. Durch die interdisziplinäre Zusammensetzung des Reviewkomitees bietet sich außerdem die Möglichkeit einer verstärkten Diskussion über die Inhalte der Prüfungsfragen.
