Schlagwort: eassessment

Veröffentlicht am

[publication] Developing and Testing a Peer-Review Process for Content Quality Assurance in MOOCs: A Case Study on an E-Assessment Course #eassessment #tugraz

Our publication about „Developing and Testing a Peer-Review Process for Content Quality Assurance in MOOCs: A Case Study on an E-Assessment Course“ got published now.

Abstract:
This contribution presents the development and testing of a peer-review process for content quality assurance in MOOCs, implemented in the course “E-Assessment – auf Kurs gebracht”. The process was evaluated regarding complexity, duration, collaboration with external reviewers, and learners’ perception. Results show that the procedure can be smoothly integrated into MOOC development. Reviewers contributed beyond expectations by providing materials, didactic advice, and legal-ethical reflections. Learners rated the videos (very) positively (92.7% positive ratings, 100 participants, n = 812 answers), especially for structure and coherence. Slightly lower ratings for ‘visual appearance’ and ‘use of supportive linguistic elements’ can be explained by the course’s retro video design and the viewers’ understanding of how linguistic devices can be effectively used in educational videos. The study confirms peer review as a feasible and effective quality assurance approach that supports both collaboration and content improvement.

[article @ publisher’s homepage]
[draft @ researchgate]

Reference: Loitzenbauer, J., Ebner, M., Schön, S., Brünner, B. (2026). Developing and Testing a Peer-Review Process for Content Quality Assurance in MOOCs: A Case Study on an E-Assessment Course. In: Auer, M.E., Toth, P. (eds) Innovation via Collaborative Learning in Engineering Education. ICL 2025. Lecture Notes in Networks and Systems, vol 1847. Springer, Cham. https://doi.org/10.1007/978-3-032-18885-4_26

Veröffentlicht am

[mooc] Woche 4: Lehren und Lernen mit digitalen Medien II #imoox #mooc #TEL #lul25

Und schon sind wir in der vierten Woche beim MOOC „Lehren und Lernen mit Medien II“.
Diese Woche geht es primär um zwei Themen: Informationssysteme und eAssessment 🙂

Mein Video geht um jene Informationssystem die im Kontext von Lehren und Lernen wichtig sind, aber die ich im I-Kurs noch nicht angesprochen hatte:

YouTube

Mit dem Laden des Videos akzeptieren Sie die Datenschutzerklärung von YouTube.
Mehr erfahren

Video laden

Primär sind Lehramtsstudierende die Zielgruppe des MOOCs, aber natürlich darf jeder mitmachen der daran Interesse hat. Wir freuen uns, wenn möglichst viele von dem Angebot profitieren und mit uns gemeinsam die nächsten Wochen diskutieren. Die Anmeldung ist komplett kostenfrei, wie man es von iMooX.at gewohnt ist 🙂

[Link zur kostenlosen Anmeldeseite]

Veröffentlicht am

[publication] Ensuring Quality in AI-Generated Multiple-Choice Questions for Higher Education with the QUEST Framework #AI #tugraz #research

This is an impactful contributions, methodological rigor, and exceptional novelty in the research field of AI in education.

Another research paper about the use of AI for education – titled „Ensuring Quality in AI-Generated Multiple-Choice Questions for Higher Education with the QUEST Framework“ – was published.

Abstract:
With the rise of generative AI models, such as large language models (LLMs), in educational settings, there is a growing demand to ensure the quality of AI-generated multiple-choice questions (MCQs) used in higher education. Traditional quiz development methods fall short in addressing the unique challenges posed by AI-generated content, such as consistency, cognitive demand, and question uniqueness. This paper presents the QUEST framework, a structured approach designed specifically to evaluate the quality of LLM-generated MCQs across five dimensions: Quality, Uniqueness, Effort, Structure, and Transparency. Following an iterative research process, AI-generated questions were assessed and refined using QUEST, revealing that the framework effectively improves question clarity, relevance, and educational value. The findings suggest that QUEST is a viable tool for educators to maintain high-quality standards in AI-generated assessments, ensuring these resources meet the pedagogical needs of diverse learners in higher education.

[draft @ ResearchGate]
[full article @ publisher’s website]

Reference: Ebner, M., Brünner, B., Forjan, N., Schön, S. (2025). Ensuring Quality in AI-Generated Multiple-Choice Questions for Higher Education with the QUEST Framework. In: Tomczyk, Ł. (eds) New Media Pedagogy: Research Trends, Methodological Challenges, and Successful Implementations. NMP 2024. Communications in Computer and Information Science, vol 2537. Springer, Cham. https://doi.org/10.1007/978-3-031-95627-0_20

Veröffentlicht am

[mooc] Woche 4: Lehren und Lernen mit digitalen Medien II #imoox #mooc #TEL #lul24

Und schon sind wir in der vierten Woche beim MOOC „Lehren und Lernen mit Medien II“.
Diese Woche geht es primär um zwei Themen: Informationssysteme und eAssessment 🙂

Mein Video geht um jene Informationssystem die im Kontext von Lehren und Lernen wichtig sind, aber die ich im I-Kurs noch nicht angesprochen hatte:

YouTube

Mit dem Laden des Videos akzeptieren Sie die Datenschutzerklärung von YouTube.
Mehr erfahren

Video laden

Primär sind Lehramtsstudierende die Zielgruppe des MOOCs, aber natürlich darf jeder mitmachen der daran Interesse hat. Wir freuen uns, wenn möglichst viele von dem Angebot profitieren und mit uns gemeinsam die nächsten Wochen diskutieren. Die Anmeldung ist komplett kostenfrei, wie man es von iMooX.at gewohnt ist 🙂

[Link zur kostenlosen Anmeldeseite]

Veröffentlicht am

[mooc] Woche 4: Lehren und Lernen mit digitalen Medien II #imoox #mooc #TEL #lul23

Und schon sind wir in der vierten Woche beim MOOC „Lehren und Lernen mit Medien II“.
Diese Woche geht es primär um zwei Themen: Informationssysteme und eAssessment 🙂

Mein Video geht um jene Informationssystem die im Kontext von Lehren und Lernen wichtig sind, aber die ich im I-Kurs noch nicht angesprochen hatte:

YouTube

Mit dem Laden des Videos akzeptieren Sie die Datenschutzerklärung von YouTube.
Mehr erfahren

Video laden

Primär sind Lehramtsstudierende die Zielgruppe des MOOCs, aber natürlich darf jeder mitmachen der daran Interesse hat. Wir freuen uns, wenn möglichst viele von dem Angebot profitieren und mit uns gemeinsam die nächsten Wochen diskutieren. Die Anmeldung ist komplett kostenfrei, wie man es von iMooX.at gewohnt ist 🙂

[Link zur kostenlosen Anmeldeseite]

Veröffentlicht am

[mooc] E-Assessment auf Kurs gebracht #imoox #eassessment #tugraz

Es freut uns, dass wir heute den MOOC zu „E-Assessment auf Kurs gebracht“ starten können. Der MOOC ist nicht nur aufgrund seines Inhaltes spannend, sondern wir haben erstmals ein Erstellungs-Verfahrung mit einer Qualitäts-Schleife durch Expert:innen zur Anwendung gebracht, d.h alle Drehbücher wurden entsprechend begutachtet bevor es in die Videoproduktion ging. Hier aber nun der Inhalt:

Sei es die Absolvierung eines MOOCs, die Theorieprüfung zur Erlangung des Führerscheins, eine Zertifizierungsprüfung als berufliche Qualifikation oder die Aufnahmeprüfung für ein Studium: Elektronische Prüfungen kommen in unzähligen kritischen Bereichen zum Einsatz, um Kenntnisse, Fähigkeiten oder Leistungen festzustellen. Es ist daher von entscheidender Bedeutung, dass bei der Erstellung von elektronischen Prüfungen (auch E-Assessments genannt) verschiedenste Richtlinien und Qualitätskriterien berücksichtigt werden. In diesem MOOC erlangen Sie die wesentlichen Kompetenzen, um …

  • elektronische Prüfungen strukturiert zu planen und adäquat einzusetzen.
  • gute Praktiken für die Erstellung von Fragen, Problemstellungen sowie Antworten anzuwenden.
  • elektronische Prüfungen in unterschiedlichen Settings abzuwickeln.
  • die Qualität von E-Assessments durch statistische Analysen sicherzustellen

Die Anmeldung zum MOOC ist natürlich kostenlos und richtet sich an Lehrende und Interessierte die E-Assessment in der Praxis erstellen wollen: [Link zur kostenlosen Anmeldung]

Veröffentlicht am

[podcast] Kreative Lehrmethoden und Prüfungen in der IT-Security #tugraz #security #telucation #IT-security #eassessment @lavados

Quelle

Es freut uns, dass wir nun den 13. Teil unserer Podcast-Serie „Lehren – Lernen – Lauschen“ auf der TELucation-Webseite zur Verfügung stellen können. Diesesmal spricht Daniel Gruss über seine Erfahrungen:

Daniel Gruss (Institute of Applied Information Processing and Communications) spricht in diesem Podcast über seine Lehrveranstaltung Betriebssysteme, seine Leidenschaft für gute Lehre und seine Abneigung gegen Proctoring in der Online-Lehre. Außerdem verrät er uns, wie er zum Protagonisten einer Sitcom wurde und award-winning Musik geschrieben hat.

[#12: Daniel Gruss über kreative Lehrmethoden und Prüfungen in der IT-Security]

Und nicht übersehen – der Podcast ist auch in allen gängigen Portalen verfügbar:

Veröffentlicht am

[mooc] Woche 4: Lehren und Lernen mit digitalen Medien II #imoox #mooc #TEL #lul22

Und schon sind wir in der vierten Woche beim MOOC „Lehren und Lernen mit Medien II“.
Diese Woche geht es primär um zwei Themen: Informationssysteme und eAssessment 🙂

Mein Video geht um jene Informationssystem die im Kontext von Lehren und Lernen wichtig sind, aber die ich im I-Kurs noch nicht angesprochen hatte:

YouTube

Mit dem Laden des Videos akzeptieren Sie die Datenschutzerklärung von YouTube.
Mehr erfahren

Video laden

Primär sind Lehramtsstudierende die Zielgruppe des MOOCs, aber natürlich darf jeder mitmachen der daran Interesse hat. Wir freuen uns, wenn möglichst viele von dem Angebot profitieren und mit uns gemeinsam die nächsten Wochen diskutieren. Die Anmeldung ist komplett kostenfrei, wie man es von iMooX.at gewohnt ist 🙂

[Link zur kostenlosen Anmeldeseite]