nerdculture.de is one of the many independent Mastodon servers you can use to participate in the fediverse.
Be excellent to each other, live humanism, no nazis, no hate speech. Not only for nerds, but the domain is somewhat cool. ;) No bots in general. Languages: DE, EN, FR, NL, ES, IT

Administered by:

Server stats:

1.2K
active users

Der Kluger-Hans-Effekt: Wenn KI aus den falschen Gründen richtig liegt 🤖🐴

Eine kann manchmal richtige Ergebnisse liefern – aber aus völlig falschen Gründen. Das nennt man den „Kluger-Hans-Effekt“. Der Name geht auf ein Pferd zurück, das Anfang des 20. Jahrhunderts scheinbar rechnen konnte. Tatsächlich las Hans aber nur die Körpersprache seines Besitzers und reagierte auf unbewusste Signale – nicht auf die Mathematik selbst.

de.wikipedia.org/wiki/Kluger_H

Eine aktuelle Studie in „Nature Machine Intelligence“ zeigt, dass dieser Effekt auch in der Künstlichen Intelligenz ein ernsthaftes Problem darstellt: KI-Modelle liefern manchmal korrekte Ergebnisse, weil sie Muster erkennen, die gar nichts mit der eigentlichen Aufgabe zu tun haben. Zum Beispiel klassifizierte ein medizinisches Modell Lungenbilder als COVID-positiv – nicht wegen der Krankheitssymptome, sondern wegen eines Wasserzeichens auf den Bildern.

nature.com/articles/s42256-025

🧵 1/2

Michael Gisiger :mastodon:

Warum ist das problematisch?

Wenn aufgrund solcher versteckten Muster entscheidet, kann das in kritischen Bereichen – etwa Medizin oder Qualitätskontrolle – zu fatalen Fehlern führen. Und das Fatale: Der Fehler bleibt oft lange unentdeckt, weil die Ergebnisse ja „korrekt“ scheinen.

Was kann man dagegen tun?

1️⃣ Hinterfrage die Ergebnisse einer KI kritisch – auch wenn sie auf den ersten Blick korrekt erscheinen.

2️⃣ Nutze erklärbare KI-Modelle (Explainable AI), um besser zu verstehen, warum die KI zu einer bestimmten Entscheidung gekommen ist.

3️⃣ Kombiniere maschinelle und menschliche Intelligenz – der Mensch bleibt ein wichtiger Kontrollfaktor.

🧵 2/2