Evidence Hub

Accelerating exam creation : design and empirical evaluation of a retrieval-augmented generative AI tool for MCQ generation

Schmelzle, Tim

Digital Library of the University of Innsbruck (University of Innsbruck), 2025

Abstract

Diese Masterarbeit untersucht das Potenzial generativer Künstlicher Intelligenz (KI), insbesondere großer Sprachmodelle (Large Language Models, LLMs), zur Steigerung von Effizienz und Qualität bei der Erstellung von Multiple-Choice-Fragen (MCQs) für Prüfungen im Hochschulbereich. Trotz jüngster Fortschritte in der KI-gestützten Inhaltserstellung stehen Lehrende weiterhin vor erheblichen Herausforderungen bei der Entwicklung qualitativ hochwertiger, kontextuell relevanter Prüfungsfragen, die mit den Lernzielen übereinstimmen. Um diese Lücke zu schließen, wurde ein spezialisiertes KI-gestütztes Tool auf Basis einer Retrieval-Augmented-Generation (RAG)-Pipeline entwickelt. Das Tool kombiniert vorlesungsspezifische Inhalte mit gezielt gestalteten Prompts zur Generierung von MCQs, die auf das Kursmaterial zugeschnitten sind.

Read the paper

Related studies

Go deeper in Evidence Hub

Evidence Hub adds a study data sheet (design, sample size, evidence level, key numbers), an AI summary and a chat grounded in the paper's text.

Open this study Sign up free