Against vibes: When is a generative model useful
Cet article cherche à déterminer quand une modélisation générative est utile en examinant les coûts et les exigences des tâches. Il identifie trois facteurs clés: le coût d’encodage dans un prompt, le coût de vérification du résultat et la dépendance du travail au processus. Selon l’auteur, l’utilité se produit lorsque l’encodage est peu coûteux ou la vérification est facile, et lorsque le processus n’est pas crucial pour l’objectif. Le texte soutient que l’utilité tend à diminuer avec la complexité des tâches, car les sorties restent plausibles sans garantir le respect des exigences, ce qui complique la vérification. Il distingue enfin entre l’artefact et le processus, affirmant que pour certaines missions, ce qui compte est le résultat et non la méthode employée.