Large Language Models - Autograding & Governance for businesses

zurück zur Übersicht

Projektart und Laufzeit

FFF-Förderprojekt, September 2023 bis Juli 2025

Koordinator

Data Science & Artificial Intelligence

Forschungsschwerpunkt

Geschäftsprozessmanagement

Beschreibung

Dieses Projekt zielt darauf ab, das Potenzial von großen Sprachmodellen (LLMs), insbesondere Chat-GPT, in zwei Bereichen zu untersuchen: Unterstützung bei der Prüfungsbewertung und Governance von LLMs im industriellen Kontext.
Der erste Aspekt konzentriert sich auf die Nutzung von LLMs zur Prüfungsbewertung, und adressiert dabei Bedenken wie Subjektivität und zeitaufwändige manuelle Bewertung. Das Projekt zielt darauf ab, eine Methodik für Pädagogen zu entwickeln, um Noten mit Hilfe von LLMs zu überprüfen, wobei ethi-sche Überlegungen, Voreingenommenheiten und Halluzinationsprobleme von LLMs berücksichtigt werden.

Der zweite Aspekt untersucht die Governance von LLMs in einem Geschäftskontext. Während die Regulierung von KI in letzter Zeit viel Aufmerksamkeit erregt hat, wurde die Governance von LLMs innerhalb von Organisationen weniger untersucht. Das Projekt analysiert Daten von lokalen Unternehmen und relevante Literatur, um die Governance-Herausforderungen in Bezug auf LLM-Halluzinationen, Risiken für geistiges Eigentum und potenzielle Vorteile zu verstehen. Es zielt darauf ab, ein Framework für eine effektive LLM-Governance zu entwickeln.

Publikationen

  • Schneider, J., Meske, C., & Kuss, P. (2024). Foundation Models. Business & Information Systems Engineering. (ABDC_2022: A; ABS_2021: 2; VHB_3: B)

    details