ChatGPT ist mit seiner Fähigkeit, ganze Texte zu gestalten und sein Wissen immer weiter aufzubauen, in vielen Bereiche des alltäglichen Lebens vorgedrungen. Die künstliche Intelligenz (KI) beherrscht natürlich auch Japanisch, allerdings hat sie Probleme mit den Schriftzeichen, deswegen könne man ChatGPT-Texte weiterhin perfekt von denen echter Menschen unterscheiden.
Anfang Juni wurde in einer japanischen Fachzeitschrift eine Studie veröffentlicht, die sich mit diesem Thema befasst. Dafür wurden verschiedene stilistische Merkmale herangezogen, wie sie auch bei kriminalistischen Ermittlungen herangezogen werden. In Japan wächst seit einiger Zeit die Sorge, dass ChatGPT zum Betrügen genutzt wird, in dem sich Studenten Aufsätze oder akademische Arbeiten mit der KI schreiben lassen.
ChatGPT arbeitet mit wiederkehrenden Mustern, die man leicht erkennt
Bei einer Studie zu den Fähigkeiten der KI mit der englischen Sprache fanden die Forscher heraus, dass man die KI-Texte mit großer Wahrscheinlichkeit von denen echter Menschen unterscheiden kann. Für Japanisch gab es ähnliche Untersuchungen bisher noch nicht. Professoren von der Mejiro Universität in Tokyo und der Kyoto Universität für weiterführende Wissenschaft haben sich der Frage ebenfalls angenommen.
Die beiden Wissenschaftler verglichen 72 akademische Abhandlungen über Psychologie in japanischer Sprache mit 144 Texten, die von ChatGPT geschrieben wurden. Die Forscher wiesen die KI an, zu einem bestimmten Thema unter einer vorgegebenen Überschrift einen Artikel zu verfassen. Anschließend verglichen die Teilnehmer vor allem stilistische Merkmale, wie die Positionierung von Kommas und die Abfolge von Wortbauteilen.
Die Studie ergab, dass die KI häufig Kommata nach dem Partikel „wa“ verwendete und die Vorsilbe „hon“, die auf die Gegenwart hindeutet, häufiger vorkam als bei von Menschen geschriebene Texten. Auf der Grundlage der Ergebnisse sind die Wissenschaftler in der Lage, zwischen ChatGPT-Texten und von Menschen verfassten Schriften mit einer Genauigkeit von 100 Prozent zu unterscheiden.
Methoden zur Erkennung sollen weiter verfeinert werden
Die Ergebnisse bleiben auch mit Vergleichen mit Texten von GPT-4, der neuesten Version des Chatbots, unverändert, obwohl diese Version noch leistungsfähiger sein soll, als alle bisher veröffentlichen Versionen der KI. Mit kriminalistischen Untersuchungen werden Schriften mit ähnlichen Methoden untersucht, um die Echtheit von Notizen, Briefen oder anderen Schriften zu authentifizieren.
Auf den ersten Blick würden die ChatGPT-generierten japanischen Texte zwar natürlich und authentisch wirken, bei genauerem Hinsehen und mit dem Wissen, um die Stolpersteine, könne man die KI-Texte aber ohne Schwierigkeiten von denen echter Menschen unterscheiden. Es sei auf jeden Fall einfacher als die Unterscheidung von Texten verschiedener Menschen. Da aber auch die KI immer weiter hinzulernt, sind die Forscher motiviert, ihre Methoden zur Erkennung der Urheberschaft von Abhandlungen und akademischer Arbeiten weiter zu verfeinern.



