Een ding waar ik veel over nadenk, is hoe extreem versnelde commerciële adoptie van AI veel standaarden uit de academische wereld heeft overgebracht (zoals evaluaties/benchmarks) die niet nuttig zijn voor de gemiddelde persoon of het gemiddelde bedrijf. Het meten van het gebruik in de echte wereld voor modellen en agenten zal steeds belangrijker worden. Voor coderingsagenten zullen nuttigere gegevens dingen zijn zoals succesvol samengevoegde PR's, kosten per taak, enz.