Rheinland-Pfalz - Was ist passiert – was dahinter steckt
Gesellschaft: Herausforderungen für Sprachmodelle in Mainz
Mainz () – Große Sprachmodelle haben erhebliche Schwierigkeiten, den Mainzer Dialekt zu verstehen. Das hat ein Forschungsteam der Johannes Gutenberg-Universität Mainz (JGU) in einer neuen Studie herausgefunden, wie die Universität mitteilte.
Die Forscher erstellten zunächst ein digitales Wörterbuch mit 2.351 Dialektwörtern auf Basis eines Lexikons aus dem Jahr 1966.
Anschließend testeten sie mehrere Open-Source-Sprachmodelle. Die KI musste sowohl die Bedeutung von Meenzerisch-Wörtern erklären als auch aus standarddeutschen Definitionen die passenden Dialektwörter finden.
Die Ergebnisse fielen eindeutig aus: Beim Erklären der Wörter erreichten die Modelle eine Trefferquote von durchschnittlich nur 4,24 Prozent, beim Erzeugen der Dialektwörter sogar nur 0,56 Prozent.
„Die Resultate zeigen sehr klar, dass heutige Sprachmodelle Meenzerisch bislang kaum verstehen“, sagte Ko-Autor Peter Herbert Kann von der Universität Marburg. Eine Ursache sehen die Forscher darin, dass Dialekte vor allem gesprochen werden und daher wenig Textdaten für das Training der KI existieren.
