SimulationMaxxing: How we ship agents 20× faster — Aman Gupta (Nubank) + Shreya Rajpal (Snowglobe)
Nubank, som betjänar 135 miljoner kunder, använde simulerad träning för att skicka fem AI-agenter till produktion 20 gånger snabbare än tidigare.
Problemet var att det tog långt tid att testa agenter — man behövde verklig data från kundsamtal som var långa och kontextberoende, inte bara enkla frågor och svar. Snowglobe löste det genom att generera simulerade kundsamtal automatiskt, med realistiska detaljer som kundkonto, tonfall och syfte. Denna metod fungerade tillräckligt väl — simulerade samtal stämde överens med riktiga i cirka 80 procent av fallen — för att låta Nubanks team testa agenter snabbt och iterera utan att vänta på feedback från produktionen.
Sammanfattningen har tagits fram med AI av Vibekollen utifrån källans publicering. Innehållet tillhör AI Engineer.
Mer från AI Engineer
Inside Arca's Long-Horizon Agents That Run the Business - Aman Singh, Arca
AI Engineer 23 okt.
Real AI Agent Attacks and What Would Have Stopped Them — Andrey Rybka, Bloomberg
AI Engineer 23 okt.
Outside of tech there has been no financial payoff to US companies for using AI, now viewed as a margin-hurting cost center, as VC-backed firms burn more tokens
Techmeme för 3 tim sedan
Source: Replit recently moved most AI spend from Anthropic to OpenAI, which gave 30%+ off in a deal worth $100M+/year, after Anthropic discontinued its discount
Techmeme för 5 tim sedan