Los LLM Recompensan La Experiencia

Los LLM recompensan la experiencia. En la década de 2010, las brechas técnicas significaban depender de colegas o esperar respuestas en línea. Hoy, los LLM hacen de todos un generalista, pero muchos asumen que el prompting no requiere habilidad.

Eso es incorrecto. La habilidad clave es la experiencia en el dominio. La conversación de Terence Tao con ChatGPT sobre la Conjetura de Jacobi muestra esto: su comprensión matemática le permite dirigir el modelo, hacer preguntas específicas e identificar fallas.

De manera similar, conocer tu código base te permite llevar un LLM más lejos que los principios genéricos. Sin conocimiento del dominio, aún puedes obtener algo de un LLM, pero con él, extraes mucho más valor. La experiencia humana sigue siendo crucial a medida que los modelos mejoran; el cuello de botella es comunicar la solución deseada, no la capacidad del modelo.