«ChatGPT, wie hoch ist dein IQ?»

Künstliche Intelligenz ist das Thema der Stunde. Das Potenzial dieser Technologie ist riesig. Aber kann diese Technologie tatsächlich die Erwartungen erfüllen, die in sie gesetzt werden? Professor Jürg Gutknecht, der gemeinsam mit Niklaus Wirth die Programmiersprache Oberon entwickelt hat, wollte prüfen, ob seine Skepsis gegenüber künstlicher Intelligenz berechtigt ist. Nachfolgend schildert er seinen Selbstversuch mit ChatGPT, bei dem er herausfinden wollte, wie intelligent ChatGPT tatsächlich ist.

Wie intelligent ist ChatGPT?

Der Hype um künstliche Intelligenz (KI) ist riesig. Aussagen wie «dies ist ein Wendepunkt für unsere Gesellschaft» und «Programmierer werden in Zukunft überflüssig» sind zurzeit allgegenwärtig. Gemeint ist natürlich ChatGPT, entwickelt von OpenAI. Aus Neugier beschloss ich, ChatGPT eine Chance zu geben, um meine eher kritische Haltung gegenüber KI zu prüfen. Anstatt tiefgründig und theoretisch über den neuen Stern am KI-Himmel nachzudenken, wollte ich selbst den Intelligenzquotienten (IQ) von ChatGPT herausfinden.

Die erste und naheliegendste Idee, den IQ von ChatGPT herauszufinden, war, ihn direkt zu fragen.

Hier ist der Dialog:

Abb. 1a, 1b

Je nach Erwartungshaltung und Blickwinkel ist die schwer fassbare Antwort von ChatGPT bescheiden, überbescheiden oder einfach enttäuschend.

Aber so leicht gebe ich natürlich nicht auf und beschliesse, ChatGPTs IQ auf die harte Tour herauszufinden, indem ich ihn einer Reihe von Problemen unterwerfe, die grösstenteils rechnerischer oder logischer Art sind. Um fair zu bleiben, habe ich auf grafisch orientierte Aufgaben verzichtet. Aus zwei Gründen habe ich jedoch Aufgaben einbezogen, die eindeutig über seine derzeitigen Fähigkeiten hinausgehen:

a) Ich möchte sein Verhalten in einer solchen Situation überprüfen und

b) ich werde zu einem späteren Zeitpunkt auf ihn zurückkommen, um seine Lernkurve zu bewerten.

Fortsetzung im PDF

Die gesamte Interaktion zwischen Prof. Gutknecht und ChatGPT war viel ausführlicher. Dabei stellte er der KI immer komplexere Aufgaben, die dessen Intelligenz nach üblichen (menschlichen) Kriterien auf die Probe stellte. Was dabei herausgekommen ist, hat selbst Gutknecht überrascht. Im nachfolgenden PDF können Sie die gesamte Interaktion nachlesen. Der Dialog und Professor Gutknechts Analyse sind auf Englisch. Seine Schlussfolgerungen sind im PDF übersetzt.

Zum gesamten Austausch zwischen Gutknecht und ChatGPT: “ChatGPT- What is your IQ?” (Jürg Gutknecht) (PDF)