Wie kann man mit ChatGPT sofort einfache Texte erzeugen?

Eine vergleichende Analyse von Testergebnissen

Aus unserem ersten Beitrag zu Künstlicher Intelligenz (KI) wissen wir, dass das Programm ChatGPT von OpenAI komplexe Texte verständlich machen kann. ChatGPT kann vor allem Inhalte klar strukturieren und treffend formulieren. Allerdings erfüllt es damit noch nicht alle Ansprüche an Einfache Sprache. Diesen Weg muss man erst erkunden. Wir brauchten mehrere Schritte, um eine komplizierte Meldung in einen zumindest verständlichen Fachtext umzuwandeln.

Wie aber kann ChatGPT in einem Schritt einen Text in Einfacher Sprache erzeugen? Der Schlüssel hierfür sind die Eingabeaufforderungen (englisch: prompts), die wir an ChatGPT richten. Experten wie Ethan Mollick nennen diesen Umgang mit KI prompt crafting, etwa: Aufforderungen ersinnen und austüfteln. Welche Aufforderungen zum gewünschten Ergebnis führen, finden wir also nur durch Experimentieren heraus.

Im folgenden Beitrag testen wir, mit welchen Aufforderungen Texte verständlicher werden. Die Ergebnisse werten wir in einer vergleichenden Analyse aus. Unser Ziel ist es zu ermitteln, wie ChatGPT auf effektivstem Weg Texte in Einfacher Sprache erzeugen kann.

AUSGANGS-TEXT FÜR DIE TESTS

Wir versuchen, mit unterschiedlichen Aufforderungen möglichst einfache Texte aus ChatGPT herauszulocken. Dazu testen wir mehrere Übersetzungen eines Beispieltextes zum Volksentscheid Berlin 2030 klimaneutral. Außerdem beziehen wir zwei Kontrolltexte zu anderen Themen ein: zu Kolonialer Raubkunst im Humboldt Forum und zum Käuferschutz bei PayPal. Hier ist der Beispieltext:

Volksentscheid Berlin 2030 klimaneutral.
Pressemitteilung vom 13.02.2023

„Heute beginnt die PIN AG mit der Zustellung der Abstimmungsbenachrichtigungen an die Berliner Stimmberechtigten für den Volksentscheid Berlin 2030 klimaneutral. Spätestens am Samstag, dem 4. März 2023, haben dann alle stimmberechtigten Berlinerinnen und Berliner ihre Abstimmungsbenachrichtigung im Briefkasten. Stimmberechtigt für den Volksentscheid sind alle Personen, die auch zur gestrigen Abgeordnetenhauswahl wahlberechtigt waren, sofern sie nicht aus Berlin wegziehen. Berlinweit sind dies 2.431.772 Personen. Stimmberechtigte, die am Abstimmungstag verhindert sind, können vorab per Brief abstimmen. Hierzu kann ab heute ein Abstimmungsschein beantragt werden. Der Antrag kann online über die Website des Landeswahlleiters gestellt werden. Wer die Zustellung der Abstimmungsbenachrichtigung abwartet, kann die Abstimmungsbenachrichtigung via Scan des dort auf der Rückseite eingedruckten QR-Codes vornehmen. Durch das Scannen des QR-Codes mit einer geeigneten App wird der Abstimmungsscheinantrag im Internet aufgerufen und die verschlüsselten personenbezogenen Daten werden automatisch eingetragen. Der Antrag muss dann nur noch bestätigt werden. Die Abstimmungsunterlagen werden vom Bezirkswahlamt nach Hause oder an die angegebene Wunschadresse geschickt. Neben der Onlinebeantragung besteht auch die Möglichkeit durch Rücksenden der ausgefüllten Abstimmungsbenachrichtigung oder schriftlich – auch per E-Mail – die Briefabstimmungsunterlagen anzufordern. Zudem besteht die Möglichkeit, in einer Briefabstimmungsstelle ihres Bezirkes abzustimmen. Anschriften und Öffnungszeiten der Briefabstimmungsstellen finden Sie auf der Abstimmungsbenachrichtigung. Auf der Abstimmungsbenachrichtigung ist die Adresse des Abstimmungslokals deutlich durch einen hellgrauen Hintergrund gekennzeichnet.“

Es ist mühsam, diesen umständlich formulierten Text zu lesen. Mit welchen Aufforderungen kann ihn ChatGPT vereinfachen? In unseren folgenden Tests experimentieren wir mit Begriffen und Merkmalen der Einfachen Sprache, mit Mustertexten und Zielgruppen. Danach fordern wir ChatGPT auf, eigene Texte zu schreiben. Zum Schluss vergleichen wir die Ergebnisse aller Tests, um die besten Aufforderungen zu ermitteln.

ÜBERSETZE IN EINFACHE SPRACHE

In unserem ersten Beitrag haben wir gesehen, dass ChatGPT zwar die Einfache Sprache perfekt beschreibt und deren Regeln exakt auflistet. Aber die KI kann diese Regeln nicht praktisch anwenden. Unsere Aufforderung „Schreibe diesen Text entsprechend den Regeln der Einfachen Sprache“ hat nur einen mäßig verständlichen Text mit zahlreichen Mängeln hervorgebracht.

Wir lassen jetzt den Hinweis auf Regeln weg und testen drei kurze Aufforderungen: Übersetze diesen Text leicht verständlich/ in Klarsprache/ in Einfache Sprache.

Zu der zitierten Pressemitteilung erhalten wir drei recht ähnliche Übersetzungen. Sie sind zwar verständlich, haben aber viele sprachliche Mängel. Dieses Ergebnis trifft auch für die Übersetzungen der beiden Kontrolltexte zu. Das heißt, die drei kurzen Aufforderungen erzeugen noch keine Einfache Sprache. Sie eignen sich eher als Rohübersetzungen.

ÜBERSETZE IN EINFACHE SPRACHE – MIT LISTE VON MERKMALEN

Um bessere Ergebnisse zu erhalten, fügen wir Merkmale der Einfachen Sprache in die Aufforderung hinein. Experten empfehlen solche detaillierten Aufforderungen (ChatGPT Tipps und Tricks). Vorher testen wir allerdings, wie die KI mit einzelnen Merkmalen umgehen kann. Die KI reagiert auf Angaben zur Textstruktur und Anrede; zur Länge von Wörtern und Sätzen, zu Aktiv und Passiv; aber nicht zum Satzbau. Es ist daher sinnvoll, kurze Sätze zu fordern, um komplexe Satzgefüge zu beschränken.

Hier ist unsere Aufforderung an ChatGPT: Übersetze den folgenden Text in Einfache Sprache. Der Text soll 100 bis 120 Wörter haben. Rede den Leser mit ‚Sie‘ an. Verwende einfache kurze Wörter. Schreibe kurze Sätze mit höchstens 15 Wörtern. Verwende aktive Sprache anstelle von Passiv. Gliedere den Text in Absätze.

Antwort der KI:

„Sehr geehrte Leserinnen und Leser,
die PIN AG beginnt heute damit, die Abstimmungsbenachrichtigungen für den Volksentscheid Berlin 2030 klimaneutral an die stimmberechtigten Berlinerinnen und Berliner zu verschicken. Bis spätestens Samstag, den 4. März 2023, sollten Sie Ihre Abstimmungsbenachrichtigung im Briefkasten haben. Sie sind stimmberechtigt, wenn Sie auch bei der letzten Abgeordnetenhauswahl wahlberechtigt waren und in Berlin wohnen. Insgesamt sind dies 2.431.772 Personen in Berlin. Wenn Sie am Abstimmungstag verhindert sind, können Sie per Brief abstimmen. Dafür können Sie ab heute einen Abstimmungsschein online über die Website des Landeswahlleiters beantragen oder die Abstimmungsunterlagen schriftlich anfordern. Es besteht auch die Möglichkeit, in einer Briefabstimmungsstelle Ihres Bezirkes abzustimmen. Weitere Informationen finden Sie auf Ihrer Abstimmungsbenachrichtigung, einschließlich der Adresse des Abstimmungslokals.“

Wie ist das Ergebnis zu bewerten?

Die KI hat aus der schwer verständlichen Pressemeldung einen gut lesbaren Text gemacht. Dabei hat sie die Regeln der Einfachen Sprache teilweise umgesetzt: Zwar stehen in beiden Texten mehrere lange Fachwörter (über 16 Buchstaben), doch die langen Sätze der Pressemeldung hat KI von 4 auf 2 verringert und die Passivformen (ursprünglich in 5 Sätzen) ganz beseitigt.

Dennoch erreicht der Text insgesamt nicht das Niveau Einfacher Sprache. Die KI setzt die Regeln nicht konsequent um. Zudem ist die Aufforderung recht umfangreich und daher wenig tauglich für den allgemeinen Gebrauch. Versuchen wir daher, einfache Texte noch anders zu erzeugen.

ÜBERSETZE IM STIL DER BILD-ZEITUNG

Zu den Ratschlägen für ChatGPT gehört es, Texte im Stil von bekannten Autoren oder Medien anzufordern. Auf diese Weise erhält man Texte in einem bestimmten Stil, der viele Elemente sprachlicher Gestaltung einschließt.

Es wäre also naheliegend, für unseren Zweck auf einschlägige digitale Publikationen in Einfacher Sprache zu verweisen. Wir haben mit der Aufforderung „Schreibe diesen Text im Stil von…“ bekannte Webseiten in Einfacher Sprache getestet: die bpb-Webseite Einfach POLITIK, die Rundfunksendung nachrichtenleicht und Radio Wien: Wochenrückblick in Einfacher Sprache.

Die Antwort-Texte sind in einem passenden Stil geschrieben und auf die erwarteten Nutzer zugeschnitten. Einige Texte verweisen sogar auf die jeweilige Veröffentlichung, zum Beispiel: „Guten Abend, hier sind die Nachrichten in leichter Sprache.“ Doch die Texte entsprechen nicht dem sprachlichen Niveau der jeweiligen Webseiten. Sie sind nicht in Einfacher Sprache geschrieben. Es ist also anzunehmen, dass die KI nur einen wahrscheinlichen Stil aus dem Titel der Veröffentlichung abgeleitet hat.

Hier tut sich ein großer Bedarf auf: Wir brauchen viel mehr Veröffentlichungen in Einfacher Sprache, die auch als digitale Quelle für KI verfügbar sind!

An einem bekannten Medium wollen wir zeigen, wie ChatGPT einen einfachen Sprachstil tatsächlich aufgreifen kann. Dazu haben wir eine Übersetzung im Stil der BILD-Zeitung angefordert. Hier ist der KI-Text:

„Startschuss für den Volksentscheid Berlin 2030: Die PIN AG beginnt heute mit der Zustellung der Abstimmungsbenachrichtigungen an alle stimmberechtigten Berlinerinnen und Berliner! Bis spätestens Samstag, dem 4. März 2023, sollen alle Benachrichtigungen im Briefkasten landen. Insgesamt sind 2.431.772 Personen in Berlin wahlberechtigt – alle, die auch bei der gestrigen Abgeordnetenhauswahl ihr Kreuzchen gemacht haben. Einzige Ausnahme: Wer vor dem Abstimmungstermin aus Berlin wegzieht.
Wer am 24. September verhindert ist, kann bereits jetzt per Brief abstimmen. Dafür muss ein Abstimmungsschein beantragt werden. Das geht ganz einfach online über die Website des Landeswahlleiters. Oder wer lieber auf die Zustellung der Abstimmungsbenachrichtigung wartet, kann die Unterlagen auch via QR-Code auf der Rückseite der Benachrichtigung beantragen. Einfach mit einer geeigneten App scannen, die personenbezogenen Daten werden automatisch eingetragen und der Antrag muss nur noch bestätigt werden. Die Abstimmungsunterlagen werden dann bequem vom Bezirkswahlamt nach Hause oder an die angegebene Wunschadresse geschickt.
Wer es noch einfacher mag, kann die Briefabstimmungsunterlagen auch schriftlich oder per E-Mail anfordern. Oder direkt in einer Briefabstimmungsstelle im Bezirk abstimmen. Alle Infos dazu gibt’s auf der Abstimmungsbenachrichtigung – erkennbar an einem hellgrauen Hintergrund mit der Adresse des Abstimmungslokals. Jetzt heißt es: Stimme abgeben für den Klimaschutz in Berlin!“

Das ist typischer BILD-Stil. Der Text ist gut verständlich, hat eine klare Ansage und deutlichen Leserbezug. Insoweit passt er zur Einfachen Sprache. Er hat zwar auch mehrere sprachliche Mängel (lange Wörter, lange Sätze, Passiv, unvollständige Sätze). Doch im Test der Verständlichkeit übertrifft er die bisher angeforderten KI-Texte. Man sollte den Text allerdings auf Inhalt und Botschaft prüfen, denn auch sie gehören zu diesem ‚einfachen‘ Stil.

ÜBERSETZE FÜR EIN 9-JÄHRIGES KIND

Noch eine Stärke von ChatGPT können wir nutzen: Die KI ist darauf trainiert, mit den Nutzern zu kommunizieren. Sie kann sich daher gut auf Zielgruppen einstellen. Genau diese Fähigkeit ist für die Übersetzung in Einfache Sprache relevant. Diese Sprachform richtet sich an bestimmte Zielgruppen. Deren sprachliche Bedürfnisse bestimmen das angestrebte Niveau der Verständlichkeit.

Zunächst haben wir drei Zielgruppen einzeln getestet:

„Schreibe diesen Text für Menschen mit geringer Bildung/ funktionale Analphabeten/ Menschen mit geistiger Behinderung.“

Die jeweiligen Übersetzungen sind leicht verständlich, haben allerdings minimalen Inhalt. Sie weisen nicht einmal auf den Volksentscheid Berlin 2030 klimaneutral hin. Diese Übersetzungen sind also nicht für einen breiteren Leserkreis geeignet.

Zwei weitere Zielgruppen – Menschen mit wenig Deutschkenntnissen/ Menschen mit Demenz – haben keine besonders verständlichen KI-Texte erbracht. Insgesamt also sind unsere Tests mit den gängigen Zielgruppen für Einfache Sprache wenig ergiebig.

Für ChatGPT eignet sich jedoch eine andere Zielgruppe: Man kann das passende Alter der Leser eingeben („Explain this text to me like I am [number] years old“). Auch die Empfehlungen für plain English berücksichtigen das Alter der Leser. Die britische Regierung bezieht plain English auf die Lesefähigkeit Neunjähriger. In diesem Alter kann ein Kind Wörter aus dem englischen Grundwortschatz bereits ganzheitlich erfassen. Somit kann es Texte flüssig lesen – eine grundlegende Fähigkeit, die bis ins Erwachsenenalter reicht (Writing on GOV.UK). Die Regierung empfiehlt, die Texte auf ihrer amtlichen Webseite für das Leseniveau Neunjähriger zu schreiben.

Diese Altersgruppe können wir auch auf die Einfache Sprache anwenden. Wir haben verschiedene Varianten für die entsprechende Aufforderung an ChatGPT getestet. Die besten Ergebnisse bringt die Aufforderung „Schreibe diesen Text für ein neunjähriges Kind“ .

Hier ist die Antwort der KI:

„Heute startet ein wichtiger Tag für alle Berlinerinnen und Berliner, die alt genug sind, um zu wählen! Die Firma PIN AG wird die Abstimmungsbenachrichtigungen für den Volksentscheid Berlin 2030 klimaneutral an alle Stimmberechtigten verschicken. Bis spätestens Samstag, dem 4. März 2023, soll jeder seine Benachrichtigung bekommen haben. Wenn du gestern bei der Abgeordnetenhauswahl wählen durftest und immer noch in Berlin wohnst, bist du auch für diesen Volksentscheid stimmberechtigt. Insgesamt gibt es 2.431.772 Personen, die mitmachen dürfen. Wenn du am Abstimmungstag nicht da sein kannst, gibt es auch eine Möglichkeit per Brief abzustimmen. Dafür musst du einen Abstimmungsschein beantragen. Das geht entweder online oder durch Zurücksenden der Abstimmungsbenachrichtigung oder schriftlich per E-Mail. Wenn du die Benachrichtigung schon hast, kannst du auch einfach den QR-Code auf der Rückseite scannen und deinen Antrag online ausfüllen. Du hast viele Möglichkeiten, um deine Stimme abzugeben!“

Dieser Text ist logisch aufgebaut, ansprechend geschrieben und leicht verständlich. Auf die zusätzliche Anrede ‚Hey du!‘ kann man verzichten. Der Text hat einige lange Wörter, mehrere lange Sätze (aber einfach strukturiert und mit höchstens 21 Wörtern) und kein Passiv. Insgesamt kommt der Text an das Niveau Einfacher Sprache heran. Die beiden Kontrolltexte erreichen dieses Niveau noch deutlicher.

SCHREIBE EINEN EIGENEN TEXT

Bisher haben wir nur Übersetzungen getestet. Zum Vergleich fordern wir ChatGPT auf, eigene Texte zu drei ähnlichen Themen zu schreiben:

• Wie kann eine Stadt klimaneutral werden?
• Koloniale Raubkunst in Museen
• Käuferschutz bei PayPal

Wir beginnen mit der einfachen Aufforderung „Schreibe zum Thema …“, um das ‚eigene‘ Sprachniveau der KI zu testen. Danach erweitern wir die Aufforderung mit den gewünschten Sprachniveaus – wie wir das bei den Übersetzungen gemacht haben.

Welche neuen Erkenntnisse haben wir mit diesen Tests gewonnen?

(1) Fordern wir ChatGPT nur auf, zu dem jeweiligen Thema zu schreiben, sind die Texte zumeist wenig verständlich. Daraus lässt sich ableiten, dass ChatGPT kein ‚eigenes‘ Niveau der Verständlichkeit hat. Vielmehr widerspiegeln seine Texte das vorherrschende Sprachniveau der Quellen zum jeweiligen Thema.

(2) Erst wenn wir die gewünschten Sprachniveaus eingeben, sind die Texte leichter verständlich. Die besten Ergebnisse erhalten wir auch hier mit der Aufforderung „Schreibe für ein neunjähriges Kind“ . Diese Texte reichen an das Niveau Einfacher Sprache heran. Zugleich sind sie leserbezogen geschrieben. Selbst auf die unpersönlich formulierte Frage „Wie kann eine Stadt klimaneutral werden?“ spricht ChatGPT die Leser an. Der folgende Auszug zeigt das deutlich:

„Hallo liebe Leserinnen und Leser,

heute möchte ich euch erzählen, wie eine Stadt klimaneutral werden kann. Das bedeutet, dass die Stadt so wenig Treibhausgase wie möglich ausstößt und somit die Umwelt schützt.
Zuerst müssen die Menschen in der Stadt verstehen, warum es so wichtig ist, klimaneutral zu werden. Der Grund ist, dass durch den Klimawandel das Wetter immer extremer wird und die Tiere und Pflanzen in ihrer natürlichen Umgebung bedroht sind. Auch wir Menschen werden betroffen sein, wenn es zum Beispiel immer heißer wird oder es mehr Überschwemmungen gibt. […]“

VERGLEICH DER TEST-ERGEBNISSE

All unsere Testergebnisse haben wir zusätzlich auf Verständlichkeit geprüft: mit der Software TextLab von H&H Communication Lab GmbH. Diese Software verwendet den Hohenheimer Verständlichkeitsindex (HIX). Er misst die Verständlichkeit von Texten auf der Skala von 0 bis 20. Je höher der erreichte Wert, desto leichter verständlich ist der Text.

In der folgenden Übersicht vergleichen wir die Verständlichkeit (HIX-Werte) der einzelnen Texte. Außerdem ermitteln wir die durchschnittliche Verständlichkeit aller Texte.

Übersicht zur Verständlichkeit der getesteten Texte:

HIX-Werte für jeden Text und für alle Texte im Durchschnitt

	Klima (Übers.)	Humb. Forum (Übers.)	PayPal (Übers.)	Klima (eig. Text)	Museen (eig. Text)	PayPal (eig. Text)	Alle Texte
Ausgangs- text	7	10	5	6	5	11	7
Aufforde- rung:
> leicht verständl.	10	10	14	4	4	12	9
> Klar- sprache	7	10	11	7	5	13	9
> Einf. Sprache	10	13	10	10	10	13	11
> ES + Merkmale	11	13	15	13	13	15	13
> BILD- Zeitg.	13	18	11	10	10	14	13
> Neunjähr. Kind	16	18	16	15	19	18	17

Die Übersicht zeigt, dass die Verständlichkeit bei jedem Sprachniveau variiert. Doch insgesamt zeichnen sich deutliche Unterschiede je nach Aufforderung ab. Das wird vor allem bei den durchschnittlichen HIX-Werten für alle Texte (fett gedruckt) erkennbar.

Die Verständlichkeit der KI-Texte verbessert sich etwa in drei Stufen:

• gering bei den Sprachformen ‚leicht verständlich‘, ‚Klarsprache‘ oder ‚Einfache Sprache‘;
• besser bei der Angabe ‚Einfache Sprache‘ mit genauen Hinweisen und beim Mustertext ‚BILD-Zeitung‘;
• am besten bei der Zielgruppe ’neujähriges Kind‘.

Diese Abstufung zeigt sich bei den eigenen Texten noch deutlicher als bei den Übersetzungen. Klar erkennbar ist vor allem der durchgängig höchste Wert für die Zielgruppe ’neujähriges Kind‘. Dieser Wert bewegt sich in dem Bereich, den wir der Einfachen Sprache zuordnen: von HIX-Wert 16 aufwärts.

FAZIT

Was haben unsere Tests und Analysen gebracht? Wir können mit einer schlichten Aufforderung an ChatGPT („Schreibe für ein neunjähriges Kind“) sofort einen Text in Einfacher Sprache erzeugen. Dieser Text taugt zumindest als Entwurf. Er müsste noch inhaltlich und sprachlich überprüft bzw. überarbeitet werden.

Ob diese Aufforderung bei jedem Test und jedem Thema klappt ist allerdings offen: ChatGPT erzeugt selbst bei wiederholter Aufforderung immer einen neuen Text. Das bringt nützliche Varianten, aber keine zuverlässigen Ergebnisse.

Unser Beitrag soll vor allem Lust auf weitere Experimente mit ChatGPT machen. Aus dieser KI ist gewiss noch viel mehr für die Einfache Sprache herauszuholen. Das wird aber nur gelingen, wenn viele Interessierte an Tests mitwirken und gemeinsam Erfahrungen austauschen!

Sabine Manning

Für Anregungen zu diesem Beitrag danke ich besonders Stephan Manning, Bettina Mikhail und Uwe Roth.

Überblick der Beiträge zu Einfach schreiben mit künstlicher Intelligenz:

Teil 1: Wie kann man ChatGPT für Einfache Sprache nutzen?
Teil 2: Wie kann man mit ChatGPT sofort einfache Texte erzeugen? (siehe oben)
Teil 3: Kann ChatGPT die Profis für Einfache Sprache ersetzen?

Bild von Gordon Johnson auf Pixabay

Hinweis: Dieser Beitrag unterliegt der Creative Commons Lizenz. Das bedeutet, dass ihn Interessierte für nicht kommerzielle Zwecke weiterverwenden dürfen. Sie müssen dazu den Autor und den Blog Multisprech (https://multisprech.org/) nennen und dürfen den Text nicht bearbeiten.