[publication] Whitepaper on Evaluating GenAI Innovation in Higher Education #tugraz #research #AIinEducation

Our publication, „Whitepaper on Evaluating GenAI Innovation in Higher Education,“ is included in the proceedings of the EDMedia 2026 conference.

Abstract:
Generative artificial intelligence (genAI) is increasingly shaping higher education by enabling new forms of content creation, assessment, learner support, personalization, and synthetic media. However, its value cannot be determined solely by technical performance, novelty, or efficiency. This paper presents an evaluation framework for quality genAI applications in higher education. This paper presents a practice-derived framework developed through a cross-case synthesis of nine diverse GenAI implementations at Graz University of Technology. Analyzing projects ranging from AI-generated content to RAG-based chatbots, we identified recurring decision points and risk patterns to formulate a five-phase, non-linear evaluation model. The framework guides institutions through specifying context, assessing feasibility, selecting implementation strategies, conducting multi-layered pilots, and performing data-informed analysis. A defining feature is the integration of explicit „Sustain-or-Discontinue“ decision gates at each stage, ensuring resources are committed only to viable applications while providing a structured pathway to terminate initiatives that fail to meet pedagogical or ethical standards. We argue that the core institutional capability lies not in rapid adoption, but in the discipline to evaluate responsibly, balancing experimentation with the rigor to govern and discontinue when necessary.

[publication @ conference’s homepage]
[preview @ ResearchGate]

Reference: Schön, S., Brünner, B., Ebner, M. & Leitner, P. (2026). Whitepaper on Evaluating GenAI Innovation in Higher Education. In Proceedings of EdMedia 2026 Edinburgh (pp. 697-703). Waynesville, NC: Association for the Advancement of Computing in Education (AACE). Retrieved June 15, 2026 from https://www.learntechlib.org/primary/p/2129693/.

This is an impactful contributions, methodological rigor, and exceptional novelty in the research field of AI in education.

[poster] A Whitepaper on Evaluating GenAI Innovation in Higher Education #edmedia26

This year, we present a poster about „A Whitepaper on Evaluating GenAI Innovation in Higher Education“ at EDMedia 2026.

Generative artificial intelligence (genAI) is increasingly shaping higher education by enabling new forms of content creation, assessment, learner support, personalization, and synthetic media. A whitepaper now presents a practice-derived framework developed through a cross-case synthesis of nine diverse GenAI implementations at Graz University of Technology. Analyzing projects ranging from AI-generated content to RAG-based chatbots, recurring decision points and risk patterns were identified to formulate a five-phase, non-linear evaluation model.

[Link to the poster]
[Link to ResearchGate]

This is an impactful contributions, methodological rigor, and exceptional novelty in the research field of AI in education.

[whitepaper] Whitepaper Quantifizierung von virtueller Lehre an österreichischen Hochschulen #fnma #austria

Im Rahmen einer FNMA-Arbeitsgruppe haben wir uns mit dem Thema „Quantifizierung von virtueller Lehre an österreichischen Hochschulen“ beschäfitigt und sind glaub ich nach spannenden Diskussionen und intensiver Zusammenarbeit zu einem guten Ergebnis gekommen.

Zusammenfassung:
Die Covid-19-Pandemie hat die Schwierigkeiten der Digitalisierung der Lehre von einem Tag auf den anderen zur Priorität und virtuelle Lehre zur zwischenzeitlichen Norm gemacht. Das begleitende Vokabular zur virtuellen Lehre erweist sich dabei als äußerst divers.
Dieses Whitepaper schafft eine einheitliche Definition der Kernbegriffe, grenzt diese gegeneinander ab und zeigt die Implikationen für die verschiedenen Stake- holder des Bildungssektors in einer postpandemischen Welt auf.
Umsetzungen von virtueller Lehre der unterschiedlichen Hochschultypen, die Ana- lyse der rechtlichen Rahmenbedingungen sowie erste Ansätze für die Mess- und Bewertbarkeit virtueller Lehre geben den Status quo der österreichischen Hoch- schullandschaft wieder.
Darauf aufbauend wurden unter Einbezug der Prinzipien zur Qualitätssicherung von virtueller Lehre 10 Empfehlungen als unterstützende Faktoren für die Quanti- fizierung virtueller Lehre an österreichischen Hochschulen erarbeitet:
[1] Bereitstellung der notwendigen Infrastruktur und Supportstruktur für virtu- elle Lehre
[2] Lehrpersonen mit entsprechenden Angeboten zu (medien-)didaktischen Aus- und Weiterbildungen unterstützen
[3] Virtuelle Lehre mit etablierten Verrechnungsschemata quantifizieren
[4] Asynchrone Lehraufwände in der Lehrplanung sichtbar machen
[5] Gelungene virtuelle Lehre sichtbar machen
[6] Virtuelle und hybride Formate fördern
[7] Freiheit der Lehre gilt auch für virtuelle Lehre
[8] Virtuelle Lehre benötigt rechtliche Grundlagen
[9] Virtuelle Lehre benötigt finanzielle Grundlagen
[10] Virtuelle Lehre benötigt österreichweite Abstimmung

[Whitepaper @ ResearchGate]
[Whitepaper @ Homepage]

Zitation: Fallmann Irmgard, Steinbacher Hans-Peter, Ammenwerth Elske, Burian Renate, Ebner Martin, Ghoneim Andrea, Gegenburger Bianca, Grün Elisabeth, Hauser Werner, Heinrich Monika, Karpf Klaus, Krizek Gerd, Lietze Stefanie, Mantler Herbert, Mair Michael, Niederl Franz, Oberhuemer Petra, Rehatschek Herwig, Rinnhofer Christina, Strasser Thomas, Zitek Andreas (2021). Quantifizierung von virtueller Lehre an österreichischen Hochschulen. Forum Neue Medien in der Lehre Austria.

[presentation] Learning Anaytics: Einsatz an österreichischen Hochschulen #fnma #LearningAnalytics

Ich habe zusammen mit vielen Kolleginnen und Kollegen im Rahmen einer Arbeitsgruppe des Forums Neue Medien in der Lehre Austria (FNMA) ein Whitepaper zu „Learning Analaytics: Einsatz an österreichischen Hochschulen“ erstellt und darf diese heute im Rahmen einer Veranstaltung präsentieren. Hier die Folien dazu:

Klicken Sie auf den unteren Button, um den Inhalt von www.slideshare.net zu laden.

Inhalt laden

[whitepaper] Bologna Digital 2020 #digitalEurope #HFD

Thanks to „Hochschulforum Digitalisierung“ for the opportunity to participate in two expert workshops and discussing main issues of the white paper about „Bologna Digital 2020 – White Paper on Digitalisation in the European Higher Education Area„:

Since December 2018, a large group of European experts have discussed priorities for digitalisation in higher education, exchanged innovative ideas and collected many impressive examples of good practice. Two „Bologna Digital 2020“ workshops in Berlin and Vienna gathered university representatives, European higher education stakeholders, governmental staff from different member states and other experts active in European higher education.

The whitepaper has been published now:

Europe needs new visions for contemporary higher education in the digital age. Digitalisation is not only an additional challenge, but also an effective means to address key challenges for higher education in the 21st century. The White Paper Bologna Digital 2020 on Digitalisation in the European Higher Education Are (EHEA) highlights opportunities and challenges as well as examples of good practice.

[Download the white paper directly]

[Homepage of the white paper]