RT @HowToAI_: Es stellte sich heraus, dass KI-Modelle keine Mathematik beherrschen können – nicht einmal solche auf Grundschulniveau, wie sie ein 10-Jähriger lösen würde. Apple veröffentlichte eine vernichtende Studie, die eine massive Illusion im Kern der künstlichen Intelligenz aufdeckt. Sie nutzten den standardmäßigen Mathematik-Benchmark (GSM8K), den jede KI-Firma verwendet, um damit zu prahlen, wie intelligent ihr Modell ist. Zuerst änderten sie nur die Namen in den Textaufgaben – die Leistung der Modelle schwankte ohne ersichtlichen Grund. Dann änderten sie die Zahlen. Die Leistung sank sofort. Doch dann führten sie den Test durch, der alles zum Einsturz brachte. Sie fügten der Textaufgabe einen einzigen, völlig irrelevanten Satz hinzu, etwa: „Übrigens waren 5 der Äpfel grün.“ Ein menschliches 10-jähriges Kind ignoriert die grünen Äpfel und löst die zugrunde liegende Mathematikaufgabe. Die KI tat dies nicht. Bei allen aktuellen State-of-the-Art-Modellen brach die Leistung um bis zu 65 % ein. Die KI griff blind nach der irrelevanten Zahl und versuchte, sie in die Gleichung einzubauen. Sie verstand nicht, warum sie die Mathematik durchführte. Sie sah nur eine Zahl und nahm an, sie müsse sie verwenden. Unter der Haube findet kein echtes logisches Schließen statt. Wir setzen diese Systeme ein, um unsere Finanzen zu verwalten, unsere juristischen Dokumente zu analysieren und komplexe strategische Entscheidungen zu treffen. Doch die Modelle verstehen die Logik, die sie ausgeben, nicht wirklich. Sie wissen nur, wie eine intelligente Antwort aussehen soll.
mehr auf Arint.info
#Apple #Forschung #KI #KünstlicheIntelligenz #Mathematik #Technologie #arint_info
https://x.com/HowToAI_/status/2062563580332175400#m