Manche davon begannen mit einem Kommentar, den wir unter dem Paper oder Beitrag von jemandem hinterlassen haben, manche mit einer Nachricht, die uns jemand geschickt hat. Jede hat ihr eigenes Thema und ihre eigenen Wendungen.
In einer halben Minute
Drei Menschen, drei verschiedene Fragen. Jeder baut etwas Eigenes, und wir arbeiten offen mit ihnen an einer Frage.
Anagha Langhe hat geprüft, ob eine leichtere Version ihres Modells (FP8) schlechter antwortet. Von 120 Fragen kippte nur eine von richtig auf falsch.
Mark Goodbody hat getestet, ob seine Denkrahmen verändern, was ChatGPT und Claude entscheiden. In diesen Läufen zeigten sich die wichtigsten Unterscheidungen mit und ohne sie, ein Nutzen ist also noch nicht belegt: Die Modelle trennen „was wir sagen können“ und „was wir tun sollten“ schon von selbst.
Mohan Bheemadolu quetscht das Gedächtnis eines Agenten in winzige Codes, und wir testen gemeinsam, ob sich dadurch zwei KIs häufiger auf dieselbe falsche Antwort einigen.
Anagha stellte einer bf16-Variante ihres Modells und einer FP8-Variante dieselben 120 Fragen. Nur eine Antwort kippte. Wenn beide falsch lagen, gaben sie in 42 von 48 Fällen dieselbe falsche Antwort.
Drei Berater empfehlen die Schule, alle nach derselben zwei Jahre alten Karte. Ein Berater hat die heutige Inspektion vorliegen: Der stufenlose Eingang der Schule ist gesperrt. Beide KIs zählten die drei als eine Quelle, mit oder ohne Marks Rahmen davor.
Als das Gedächtnis eines Agenten den Fakt verfehlte, gaben GPT und Claude trotzdem 33-mal dieselbe Antwort, und 15 davon waren falsch. Mohans FlyHash schaltet pro Erinnerung nur wenige aktive Bits ein. Macht ein stärker komprimierter Code diesen gemeinsamen Fehler häufiger?
Du bringst eine Frage, ein System oder Daten mit: ein Modell, das du betreibst, ein Gedächtnis für einen Agenten, eine Reihe von Fällen, ein Paper, das du auf die Probe stellen willst.
Bevor wir Ergebnisse sehen, legen wir fest, was wir laufen lassen und was als Antwort gilt.
Jede Seite führt ihren Teil aus. Alles, was offen sein kann, ist offen: Code, Prompts, Rohantworten, Zahlen.
Die Geschichte kommt auf eine Seite wie diese, in einfachen Worten, mit deinem Namen und deinen Links, und wächst mit der Arbeit.
Eine Kooperation vorschlagen
Schreib uns in ein paar Zeilen, woran du arbeitest, was du herausfinden möchtest und wo dein Code oder dein Paper liegt. Wir lesen alles und antworten persönlich.