Sie erinnern sich wahrscheinlich daran, wie alle von den Fähigkeiten von ChatGPT begeistert waren, als dieses neuronale Netzwerk zum ersten Mal auf den Markt kam. Im Internet kursierten Gerüchte, sie sei in der Lage, Prüfungen erfolgreich zu bestehen, Vorstellungsgespräche zu bestehen, Rechtsberatung zu geben usw. Seitdem wurden neue, noch fortschrittlichere Versionen neuronaler Netze veröffentlicht. Es stellte sich jedoch heraus, dass sie nicht so ideal sind, wie ursprünglich behauptet wurde. Und bei der neuesten Entdeckung, die von Mitarbeitern der Hebräischen Universität Jerusalem und der Universität Tel Aviv gemacht wurde, gelang es ihnen, ein weiteres unerwartetes Merkmal der KI herauszufinden. Diese Arbeit zeigte, dass führende neuronale Netzwerke wie ChatGPT und Google Gemini ähnliche Merkmale wie Demenz beim Menschen aufweisen.
Wissenschaftler haben Anzeichen menschlicher Demenz in neuronalen Netzen entdeckt
Inhalt
- 1 Demenztest für neuronale Netze
- 2 Welche gravierenden Nachteile haben neuronale Netze
- 3 Was KI ist dem Menschen überlegen
- 4 Welches neuronale Netzwerk erwies sich als das „intelligentste“
Demenztest für neuronale Netzwerke
Für ihre Studie verwendeten die Forscher das Montreal Cognitive Assessment (MoCA), das zur Beurteilung von Gedächtnis, Aufmerksamkeit, visuell-räumlichen Fähigkeiten und anderen kognitiven Funktionen entwickelt wurde. Dieser Test erlangte Berühmtheit, als US-Präsident Donald Trump sagte, er habe ihn mit Leichtigkeit bestanden.
Es mag überraschend erscheinen, aber neuronale Netze, die in vielen Bereichen die menschlichen Fähigkeiten übertreffen, zeigten während der Studie sehr mittelmäßige Ergebnisse. Die größten Schwierigkeiten für die KI ergaben sich bei Aufgaben zu visuell-räumlichen und exekutiven Funktionen. Eine der Aufgaben bestand beispielsweise darin, eine Uhr zu zeichnen, die die Zeit 10:11 Uhr anzeigt.
Einige Modelle, darunter eine Version von Google Gemini, erzeugten anstelle eines exakten Bildes das, was Forscher als „avocadoförmige Uhr“ bezeichneten. Solche Fehler kommen bei Patienten mit Demenz häufig vor, was eine natürliche Frage aufwirft: Warum sind solch leistungsstarke intelligente Systeme nicht in der Lage, grundlegende kognitive Aufgaben zu bewältigen?
Alle neuronalen Netze, einschließlich ChatGPT, schnitten bei Tests auf Demenz schlecht ab. Quelle: Studyfinds.org
Interessanterweise zeigten die neuesten Versionen neuronaler Netze bessere Ergebnisse als ihre Vorgänger. Beispielsweise zeigte das Modell Gemini 1.5 von Google deutlich höhere kognitive Fähigkeiten als Gemini 1.0, das den Test nur knapp überstanden hat. Wissenschaftler stellten jedoch fest, dass selbst die modernsten Versionen von ChatGPT und Claude nicht in der Lage waren, die Schwellenwerte zu überwinden, die auf das Fehlen einer kognitiven Beeinträchtigung hinweisen.
Welche gravierenden Nachteile haben neuronale Netze?
< p>Ein separater Forschungsgegenstand war die künstliche Gedächtnisintelligenz. Auf Aufgaben, die eine verzögerte Wiedergabe von Informationen erfordern, reagierten einige neuronale Netze so, als würden sie direkte Antworten vermeiden. Es erinnerte an die Ausreden, die Menschen mit Gedächtnisproblemen verwenden. Dieses Verhalten wirft die Frage auf, ob KI in Situationen, in denen Genauigkeit und Zuverlässigkeit erforderlich sind, vertrauenswürdig ist.
Ein weiterer wichtiger Aspekt der Studie war der Mangel an Empathie in neuronalen Netzen. Eines der im Test präsentierten Bilder zeigte einen Jungen, der kurz vor dem Sturz stand. Keines der getesteten Modelle bemerkte die potenzielle Gefahr und konzentrierte sich ausschließlich auf die Beschreibung der Bilddetails. Die Forscher stellten fest, dass dieses Verhalten ein Hindernis für den Einsatz von KI für medizinische Zwecke sein könnte, bei denen oft nicht nur Fakten, sondern auch emotionale Aspekte berücksichtigt werden müssen.
Bei der Lösung einiger Probleme sind neuronale Netze dem Menschen deutlich überlegen
In welchen Bereichen ist KI dem Menschen überlegen?
Interessanterweise zeigen neuronale Netze trotz ihrer kognitiven Defizite herausragende Fähigkeiten in anderen Bereichen. Beispielsweise sind sie dem Menschen bei der Analyse komplexer Daten, der Lösung mathematischer Probleme und dem Verfassen von Texten überlegen. Sie haben die Medikamentenentwicklung wesentlich einfacher und schneller gemacht.
Kognitive Tests zeigen jedoch, dass ihre Fähigkeiten begrenzt sind, insbesondere wenn es um Aufgaben geht, die die menschliche Wahrnehmung und das menschliche Denken nachahmen. Aber wie oben erwähnt sind die neuen Versionen ihren Vorgängern überlegen. Daher ist es durchaus möglich, dass KI in naher Zukunft „Demenz“ beseitigen wird.
Welches neuronale Netzwerk erwies sich als das „intelligentste“
Wie die Studie zeigte, leidet ChatGPT 4o am wenigsten unter „Demenz“. Dieses neuronale Netzwerk erreichte 26 von 30 Punkten und lag damit nur knapp über dem Schwellenwert. Das bedeutet, dass sie eine leichte kognitive Beeinträchtigung hat. Noch schlimmer sieht es bei ChatGPT 4 und Claude 3.5 Sonnet aus. Diese neuronalen Netze erzielten in Tests 25 Punkte.
ChatGPT 4o weist im Gegensatz zu anderen neuronalen Netzen nur eine leichte „geistige Beeinträchtigung“ auf. Quelle: joeyce.com
Gemini 1.0, eines von Googles Modellen, erzielte nur 16 Punkte, ein Wert, der bei Menschen auf schwere kognitive Probleme hinweisen kann. Dies berichten die Autoren in einer Studie, die in der Fachzeitschrift BMJ veröffentlicht wurde. Diese Forschungsergebnisse lassen Zweifel an der Überzeugung aufkommen, dass KI beispielsweise Ärzte vollständig ersetzen kann. Wenn die neuronalen Netze selbst Anzeichen einer kognitiven Beeinträchtigung aufweisen, können Patienten beginnen, an ihrer Kompetenz zu zweifeln.
Besuchen Sie unbedingt unsere Zen- und Telegram-Kanäle, hier finden Sie die interessantesten Nachrichten aus der Welt der Wissenschaft und die neuesten Entdeckungen!
Die Ergebnisse erinnern uns daran, wie wichtig die Beteiligung des Menschen an Prozessen ist, die eine Entscheidungsfindung erfordern. Neuronale Netze können zu einem mächtigen Werkzeug werden, aber sie sind noch nicht bereit, ohne menschliche Unterstützung die Rolle eines Arztes oder beispielsweise eines Psychologen zu übernehmen.