Guide, Verify, Solve — Anirban Chatterjee, Sonar
En Carnegie Mellon-studie visade att produktivitetsvinsten från AI-kodning försvinner efter tre månader, medan problem och komplexitet stannar kvar — det kallas verifieringsskuld.
En Wharton-studie fann att utvecklare följer AI:s råd 92,7 procent av gången när det är rätt, men också närmare 80 procent när AI är instruerad att ljuga med säkerhet. Anirban Chatterjee från Sonar föreslår en tvåskiktad lösning: noll tillit (verifiera kod med andra metoder än de som skrev den) och flera lager av granskning (både automatisk analys och resonemang-baserad granskning). Sonars jämförelser av olika AI-modeller visar att samma modell är bra på olika saker — en Claude är stark på korrekthet medan en annan är bättre på underhållbarhet och säkerhet.
Sammanfattningen har tagits fram med AI av Vibekollen utifrån källans publicering. Innehållet tillhör AI Engineer.
Mer från AI Engineer
Inside Arca's Long-Horizon Agents That Run the Business - Aman Singh, Arca
AI Engineer 23 okt.
Real AI Agent Attacks and What Would Have Stopped Them — Andrey Rybka, Bloomberg
AI Engineer 23 okt.
Outside of tech there has been no financial payoff to US companies for using AI, now viewed as a margin-hurting cost center, as VC-backed firms burn more tokens
Techmeme för 3 tim sedan
Source: Replit recently moved most AI spend from Anthropic to OpenAI, which gave 30%+ off in a deal worth $100M+/year, after Anthropic discontinued its discount
Techmeme för 5 tim sedan