Joop Snijder, CTO bij Aigency, ziet organisaties AI-gebruik meten op tokenverbruik en adoptiepercentages, terwijl dat precies de verkeerde metriek is. Zodra tokengebruik een doel wordt, gaan medewerkers prompts verlengen en agents draaien voor taken die ze handmatig sneller doen, puur om hoog te scoren op een dashboard. Dit is Goodhart's law in de praktijk: de metriek stuurt gedrag, maar niet richting betere resultaten.
Joop analyseerde zijn eigen gebruik van Claude over meer dan 2400 berichten en ontdekte dat zijn berichten gemiddeld 84 tekens lang zijn, niet omdat hij weinig doet, maar omdat hij stuurt op richting en bijstuurt op wat hij ziet. Kijk morgen naar de AI-metrics in jouw organisatie: zijn het activiteitsmetrics of outcome-metrics zoals kwaliteit, doorlooptijd en foutreductie? Als het antwoord activiteitsmetrics is, heb je een gesprek te voeren.
Onderwerpen
Tokenmaxxing: het behandelen van AI-tokenverbruik als bewijs van productiviteit
Goodhart's law: hoe meetbare doelen leiden tot verkeerd gedrag
Extrinsieke motivatie en sociale vergelijking in AI-adoptie
Gevolgen van tokenmaxxing: energieverbruik, cognitieve vervuiling en verlies van vakmanschap
Outcomemaxxing: sturen op resultaat in plaats van AI-gebruik
- Artikel: Silicon Valley’s AI ‘tokenmaxxing’ obsession has a big problem – and philosophers saw it comingArtikel: The Pulse: ‘Tokenmaxxing’ as a weird new trend - The Pragmatic EngineerArtikel: Why Vanity Metrics are DangerousArtikel: AI Anxiety: Why So Many Professionals Feel Left Behind Right NowArtikel: Silicon Valley Embraces Tokenmaxxing, Raises Practical Problems | Let's Data ScienceArtikel: Consuming too much AI can be a bad idea. New data on 'tokenmaxxing' reveals a better approach. | Business Insider AfricaArtikel: Is The Cult Of ‘Tokenmaxxing’Just Another Fad Or The New Normal?Artikel: Tokenmaxxing: How CIOs can extract maximum value from AI tokens | TechTargetArtikel: The 'Tokenmaxxing' Trap: Measuring True AI Productivity in an Inference BoomArtikel: 🧠 The Token Economy: Tokenmaxxing Is Stupid Until It Isn’t
Genoemde entiteiten: OpenAI - NVIDIA - Claude - Silicon Valley
Stuur ons een bericht
AigencyAigency ontwerpt en ontwikkelt waardevolle, robuuste en betrouwbare Machine Learning-modellen.
Info Support
Info Support is de specialist in maatwerk software en leidend in kunstmatige intelligentie (AI).
Disclaimer: This post contains affiliate links. If you make a purchase, I may receive a commission at no extra cost to you.
Schrijf je in voor onze nieuwsbrief en ontvang exclusieve toegang tot nieuws, blik achter de schermen en meer!