Van een startup CTO: "Onze evals test suite kost ons ongeveer $50 om uit te voeren. We draaien het om regressies op te vangen, maar natuurlijk maakt het geen deel uit van CI vanwege deze kosten." Wat een grote verschuiving: ik dacht vroeger aan de kosten van CI/CD in tijd om uit te voeren, en misschien machinekosten. Maar nu kunnen we ook tokenkosten toevoegen!
52,74K