Michael Simons

"KPIs sind unser Verderben"

Ein paar Gedanken mussten raus und ich hab sie in diesem kleinen #rant zu #Challenges #Metriken #Laufen #Running und #Softwareproduktion aufgeschrieben

https://michael-simons.eu/p/kpis-sind-unser-verderben.html

@gjmwoods you are in there my friend.

KPIs sind unser Verderben

Apr 9 at 12:52pmWeb
Show threadEberhard WolffApr 9
@rotnroll666 Zwei Hinweise: Managen nach KPIs ist gefährlich, siehe https://de.wikipedia.org/wiki/Goodharts_Gesetz . Und: Ich habe Talks zu Entwickler:innen-Produktivität gehalten. Am Anfang haben frage ich, ob LoC eine gute Produktivitätsmetrik ist. Ergebnis: Praktisch alle stimmen mit "nein". Die Frage ist, warum es bei LLMs dennoch als Metrik genutzt wird. Eigentlich ist allen klar, dass es Unsinn ist.
Goodharts Gesetz – Wikipedia

Show threadMichael SimonsApr 9
@ewolff ja verrückt, oder?
Show threadMichael SimonsApr 9
@ewolff deinen Link werde ich noch ergänzen. War bekannt, aber weit nach hinten im Kopf gerutscht. Danke.
Show threadMichael SimonsApr 9
@ewolff ✅
Show threadEberhard WolffApr 9
@rotnroll666 Noch absurder sind die Postings mit "GUCK MAL, WIE VIEL GELD WIR FÜR AI AUSGEBEN". Bei dem Nvidia-CEO verstehe ich das ja noch https://www.businessinsider.com/jensen-huang-500k-engineers-250k-ai-tokens-nvidia-compute-2026-3 - aber sonst? Stolz auf Kosten? Wirklich? Ich dachte, wir wollen wirtschaftlich arbeiten und mit möglichst wenig Kosten?
Jensen Huang says he would be 'deeply alarmed' if his $500,000 engineer did not consume at least $250,000 of tokens

"If that $500,000 engineer did not consume at least $250,000 worth of tokens, I am going to be deeply alarmed," says Nvidia CEO Jensen Huang.

Business Insider
Show threadAndré Mellentin 🤍Apr 9

@rotnroll666 Ich kann deine Gedanken nachvollziehen. Als Manager bin ich am Ende aber leider viel Zahlengetrieben und teilweise auch vom Kunden abhängig, wie ich mit denen umgehen kann.

Aus sportlicher Sicht habe ich es zum Glück geschafft mich dem Ganzen nicht zu stark hinzugeben und mein eigenes Ding zu machen. Die ganz krassen Zahlen erreiche ich eh nicht. Und für alles andere, bin ich stolz auf mich selbst was ich noch so erreiche...egal wie andere es sehen.

Show threadAlles klar außer NameApr 9

@rotnroll666 @gjmwoods

Gaming the System ist ja auch Gamification 😂

Bei Salesforce konntest Du nur Code mit einer Mindest-Testcoverage auf der Plattform deployen als Mandant. Damit das Deployment von in dieser Pipeline nicht testbarem Integrationscode überhaupt funktioniert hat, haben Entwickler in der Build-Pipeline daher Formatierungsänderungen durchgeführt, um diesen Code auf möglichst wenig Zeilen zu verdichten. 🤪

Ok, da wären LLMs vermutlich überlegen 🫣

Show threadOliver ⚡Apr 9
@[email protected]
Schöner Rant 🙂
Ich hab zwar beim Job viel mit Kennzahlen zu tun, aber kann es mir auch leisten viel nach Bauchgefühl zu entscheiden (kein ITler). Wenn Controlling mit KPI kommt, konnte ich die bisher immer an die Wand stellen, Erfahrung gewinnt halt fast immer.
Zu Strava: ja. Deshalb bin ich da auch raus.
Und mein Trainingsplan ist bekanntlich kein Trainingsplan, ich hab keine. Ich laufe nach Lust und Laune und das funktioniert bestens. Bzw. besser sogar als früher mit irgendwelchen wilden Plänen, die nur zu Frust geführt haben.
Kennzahlen sind trotzdem ab und zu wichtig, und seit es nur zur Kontrolle der Gesundheit. Ich mag schon was meine Sportuhr so ausspuckt, filtere aber was grade wichtig sein könnte. Metrikauswertung möchte ich das nicht nennen, nur Neugier.
Goodharts Gesetz kannte ich nicht, danke dafür.