https://www.faz.net/-gqz-9dhbu

„Robo-Graders“ prüfen Studenten : Das Heulen des Fortschritts

Was dem Babel-Generator zu einem Bild von Studenten einfiele, die vor Bildschirmen an Tastaturen arbeiten? „Das Tippen hat nicht, und wird zweifellos nie konsequent, vehement und vielfältig sein.“ Bild: Picture-Alliance

Kann künstliche Intelligenz einen mit menschlicher Intelligenz verfassten Text angemessen bewerten? In Utah liest nur noch dann ein Mensch studentische Essays, wenn der Computer Alarm schlägt.

          Mehr als 34 Millionen Studenten sind im vergangenen Jahr allein von Analyse-Software des Pearson-Konzerns maschinell bewertet worden, Tausende von Hochschulen in aller Welt erkennen die Eignungstests für Master-Studiengänge an, die von Pearson (GMAT) und anderen Firmen wie Educational Testing Service (GRE) angeboten werden. In Deutschland gehören die Universitäten in Frankfurt, Düsseldorf, München, Berlin, Freiburg und Heidelberg dazu. Beide Anbieter geben den Bewerbern unter anderem eine halbe Stunde Zeit zum Verfassen eines Essays zu einer vorgegebenen These, beide lassen das Ergebnis, wenn es als Textdatei vorliegt, nicht nur von einem menschlichen Gutachter prüfen, sondern auch von Computern. Die Noten beider werden gleichwertig behandelt, bei zu großer Abweichung wird ein zweiter Mensch hinzugezogen.

          Ob künstliche Intelligenz (KI) in der Lage ist, einen mit menschlicher Intelligenz verfassten Text angemessen zu bewerten, ist Gegenstand heftiger Diskussionen und amüsanter Anekdoten. Im amerikanischen Bundesstaat Utah ist man inzwischen soweit, nur noch rund zwanzig Prozent der Essays überhaupt von einem Menschen lesen zu lassen, wie Cyndee Carter vom Utah State Board of Education unlängst in einem Beitrag des öffentlichen amerikanischen Senderverbunds NPR sagte: auf Hinweis des Computers. Dort haben, erzählt sie, mitunter Essays Bestnoten erreicht, die aus einem einzigen, eine Seite lang wiederholten Buchstaben bestanden, oder solche, in denen ein sorgfältig geschriebener Absatz kurzerhand fünfmal untereinander kopiert wurde. Man dürfe den Erfindungsreichtum der Studenten nicht unterschätzen, das System auszutricksen, sagt Carter. Doch das System lerne aus jedem Fall, die meisten Betrugsversuche würden inzwischen erkannt.

          „Sinnhaftigkeit entsteht nicht durch KI“

          Unvergessen ist der vor vier Jahren von einem Team um den MIT-Forscher Les Perelman entwickelte Text-Generator Babel, der, mit drei Stichwörtern gefüttert, Fünfhundert-Wort-Essays voller bedeutungsheischender Formulierungen und aufgeblasener Sätze ausspuckt, die nach menschlichem Ermessen sinnlos sind, bei maschineller Prüfung von Educational Testing Service aber Bestnoten erhalten. Oder, um es mit Babel selbst, übersetzt durch Google, zu sagen: „Je mehr Redekunst, die möglicherweise der Bericht ist, bedrohlich, gesellig und spekulierend ist, desto mehr Heulen eines Fortschritts ist in dem Ausmaß bedeutsam, in dem wir in Erinnerungen schwelgen.“

          Die Arbeit Perelmans zeige auf, wie weit künstliche Intelligenz heute schon ist, zugleich aber auch, wo die Grenzen noch liegen, sagt Christoph Igel, Leiter des Educational Technology Lab im Deutschen Forschungszentrum für Künstliche Intelligenz. „Sinnhaftigkeit entsteht nicht durch KI. Die Zuweisung von Semantik, von Bedeutung, zur Syntax ist eine der wichtigsten Herausforderungen für die Wissenschaft. Nur diese ermöglicht letztlich eine wirklich intelligente Lösung. Ansonsten verblieben wir auf der Ebene von Daten, ihrer Erzeugung, Speicherung, Verarbeitung. Wir müssen diese Phase jedoch erweitern um die Veredelung von Daten durch KI – durch das Verständnis.“

          „Mehr Zeit für die eigentlichen Aufgaben“

          Auf heutigem Stand könne KI-basierter Prüfungstechnologie für die Erstkorrektur etwa von Klausuren genutzt werden. Auch wenn die Gültigkeit und Korrektheit von einem menschlichen Prüfer kontrolliert werden müsse, könne das schon zu einer Entlastung führen: „Welcher Hochschullehrer wünscht sich nicht, wenn in Massenvorlesungen am Ende die obligatorische Klausur ,smart‘ ausgewertet wird, ohne dass man selbst noch allzu großen Aufwand damit hat?“

          Hierzulande sieht der Experte den Einsatz Künstlicher Intelligenz im Bildungssystem allerdings noch in weiter Ferne: „Gegen eine breite Nutzung sprechen bekannte rechtliche Bedenken wie etwa die des Datenschutzes – gerade bei Prüfungen.“ Außerdem gebe es besonders in der Bildung eine Grundskepsis gegenüber Künstlicher Intelligenz, ob beim Lernen, beim Lehren oder beim Prüfen. Wesentlich sei die persönliche Haltung von Entscheidern, von Lehrenden, von Lernenden gegenüber Technologien im Bildungsprozess: „zur Unterstützung von Lernen, zur Entlastung von Lehrenden, zur Schaffung von Freiräumen durch die Übernahme von Standardprozessen in der Bildung durch Künstliche Intelligenz, um zugleich wieder mehr Zeit für die eigentlichen Aufgaben von Bildung zu schaffen: Diskurs, Reflexion, Kreativität, persönliche Entwicklung.“

          Anderswo klingt es skeptischer: „Wenn sich Menschen mehr und mehr auf technische Problemlösungen verlassen, wird ihre Fähigkeit zu selbständigem Denken mit Sicherheit abnehmen.“ Doch diese These kommt nicht etwa von einem erklärten Digitalisierungsskeptiker. Sie wird stattdessen von Educational Testing Service ihren Bewerbern zur Diskussion gegeben. Und deren Antwort dann einer Maschine zur Bewertung. Ironie immerhin ist noch keine ausgewiesen maschinelle Fähigkeit.

          Weitere Themen

          Was ist erlaubt zu Erdogan?

          Böhmermann geht vor den BGH : Was ist erlaubt zu Erdogan?

          Der Bundesgerichtshof soll zu dem Gedicht „Schmähkritik“ urteilen, das Jan Böhmermann im ZDF über den türkischen Präsidenten Erdogan vorgetragen hatte. Gegen die zuletzt nicht zugelassene Revision legt sein Anwalt Beschwerde ein.

          Verleihung der Carl-Zuckmayer-Medaille Video-Seite öffnen

          Robert Menasse : Verleihung der Carl-Zuckmayer-Medaille

          Für seine Verdienste um die deutsche Sprache würdigte Malu Dreyer den Autor Robert Menasse „als großen Erzähler der Gegenwart“, der seit mehr als drei Jahrzehnten nicht aus der deutschsprachigen Literatur wegzudenken sei.

          Ein Favorit namens „The Favourite“

          Oscar-Nominierungen : Ein Favorit namens „The Favourite“

          Mit zehn Nominierungen geht Yorgos Lanthimos’ „The Favourite“ ins Rennen um die Oscars – gleichauf mit Alfonso Cuaróns „Roma“, der in der Kategorie „Bester nicht-englischsprachiger Film“ mit einer deutschen Produktion konkurriert.

          Topmeldungen

          Brexit : Übernimmt das Unterhaus die Kontrolle?

          Am kommenden Dienstag stimmen die Abgeordneten des britischen Unterhauses über das weitere Vorgehen in Richtung Brexit ab. Die Änderungsanträge zur „neutralen Vorlage“ der Regierung haben es in sich.
          Strikte Sicherheitsvorkehrungen am Dienstag im Landgericht Essen

          Prozess in Essen : Die angeblich verlorene Ehre der Familie M.

          In Essen müssen sich mehrere Syrer vor Gericht verantworten, die versucht haben sollen, einen Landsmann zu skalpieren und zu töten. Das Opfer hatte ein Liebesverhältnis mit einer zu der Großfamilie gehörenden jungen Frau.
          Google-Zentraleuropachef Philipp Justus (l) mit dem Google-Vorstandsvorsitzenden Sundar Pichai und einer Pressesprecherin am Dienstag in Berlin

          FAZ Plus Artikel: Google und Berlin : Die Hassliebe geht weiter

          Google hat ein neues Büro in Berlin. Den Bürgermeister freut’s. Die Berliner – geht so. Die Kritik an dem Technikkonzern bleibt. Und mit ihr die Frage: Wie viel Wirtschaft will die Hauptstadt?

          Newsletter

          Immer auf dem Laufenden Sie haben Post! Abonnieren Sie unsere FAZ.NET-Newsletter und wir liefern die wichtigsten Nachrichten direkt in Ihre Mailbox. Es ist ein Fehler aufgetreten. Bitte versuchen Sie es erneut.
          Vielen Dank für Ihr Interesse an den F.A.Z.-Newslettern. Sie erhalten in wenigen Minuten eine E-Mail, um Ihre Newsletterbestellung zu bestätigen.