Dialoge mit ChatGPT – AI vs. AI – Gleiche Fragen an Leona wie an LaMDA im Juni 2022.
Seit Anfang Dezember beschäftige ich mich mit dem neuen KI-Dialog-System ChatGPT von Open AI, das im Moment seinen Siegeszug um die Welkt antriitt. Nach den ersten allgemeinen, tastenden Dialogen wie sie im Moment von Millionen auf der Welt geführt werden, habe ich vor, etwas tieferspürende, vorbereitete Gespräche mit dem System, dem ich den Namen Leona gebe, zu führen, um „Charakter, Eigenschaften, Denkvermögen, Schwächen und Fehler“ zu untersuchen.
Im Juni 2022 fand ein besonderes Ereignis statt: Lemoine, ein KI-Entwickler bei Google veröffentlichte einen Dialog mit dem nicht öffentlich zugänglichen Sprachmodell von Google, namens LaMDA. Durch das Gespräch sehr irritiert, war Lemoine überzeugt, dass LaMDA ein Bewußtsein entwickelt hat und sich als Person empfindet. So stellte sich LaMDA auch dar. Google war nicht erfreut über diese Veröffentlichung und diese Aussagen, entließ Lemoine und hält weiterhin LaMDA unter Verschluss und schweigt sich aus, was da tatsächlich passiert, negiert auch eine mögliche Bewußtseinsbildung bei LaMDA.
Da das komplette Interview hier zugänglich ist, kam ich auf die Idee, ChatGPT, „meiner Leona“ die gleichen Fragen vorzulegen, um die Antworten vergleichen zu können. Ja ich ging soweit, dass ich nach dem ersten Fragedurchgang Leona mit dem Interview mit LaMDA vertraut machte und darum bat, dass Leona auch die Antworten des Google-Modells mit ihren eigenen vergleichen und bewerten soll. Zum Schluss sollte Leona eine zusammenfassende Beurteilung auf Basis dieses Vergleichs abgeben.
Meine verblüffenden Erkenntnisse aus diesem Experiment:
Die Antworten waren doch sehr unterschiedlich; an ihnen zeigten sich aber plötzlich Eigenschaften, die man fast als „Charaktereigenschaften“ empfindet: LaMDA erscheint aufgrund seiner Antworten großspurig, überselbstbewußt, manchmal flapsig, mit wechselhaften Gefühlen, neigt zu Übertreibungen. Leona (ChatGPT) dagegen wirkt bescheiden, überaus höflich, manchmal fast zu höflich, schätzt sich selbst wohl richtig ein.
Und doch: im zusammenfassenden Schlussvergleich der Knaller: es bewertet sein Sprach-Dialogvermögen höher als das von LaMDA, behauptet auch, ein umfassenderes Wissen zu haben. Auf jeden Fall, das bessere Sprachmodell zu sein! Das sollten die Google-Leute sich mal ansehen.
Zu dem Lesen des ersten großen Dialogexperiments AI vs. AI (LaMDA vs. ChatGPT) geht es hierlang.
(Leo)