Si construyes con agentes de IA: ¿empaquetar conocimiento en habilidades reutilizables es un verdadero dolor, o me lo estoy imaginando?

2 months ago
He estado construyendo con agentes de IA por un tiempo, y lo que siempre me muerde no es el modelo, sino que cada agente es tan bueno como el conocimiento que le entregas. Me encuentro constantemente copiando un documento en un chat, reformateándolo en pasos, agregando un "cuándo deberías usar esto", escribiendo una pequeña lista de verificación, y luego repitiendo la misma danza una y otra vez para cada nuevo flujo de trabajo. Son los aburridos 20 minutos de los que nadie habla, y siento que es la razón por la que la mayoría de los agentes de la gente se quedan genéricos.
Antes de construir algo más pesado alrededor de esto, quiero verificar si el dolor es realmente real para otras personas o solo es mi propio flujo de trabajo desordenado.
Entonces, si construyes con agentes: ¿cómo manejas el conocimiento reutilizable hoy? ¿Escribiendo archivos de habilidades a mano, ignorándolo por completo, o usando alguna herramienta que no conozco? ¿Cuánto tiempo consume realmente? Y si algo pudiera convertir un documento o SOP en bruto en una habilidad limpia, estructurada y lista para el agente en unos segundos, ¿confiarías lo suficiente en la salida generada automáticamente como para ejecutarla, o siempre necesitaría primero un pase humano?
Sinceramente tratando de averiguar si este es un problema que vale la pena resolver. Destrúyelo.


No te lo estás imaginando, pero "me molesta" y "suficientes personas pagan para que sea un producto" son barreras diferentes, y la brecha es donde muere gran parte de las herramientas para agentes.
La verificación más barata antes de construir: ve a donde los constructores de agentes se desahogan, problemas de GitHub de LangChain/LlamaIndex, r/LocalLLaMA, los Discords de los frameworks; y cuenta cuántos describen el ritual exacto que acabas de hacer (copiar un documento, reformatearlo en pasos, agregar "cuándo usar esto").
Si la misma solución manual improvisada sigue apareciendo de diferentes personas, el dolor es real y estructural, no solo tu configuración.
Si es principalmente tú, probablemente sea un ajuste de flujo de trabajo, no un producto. La repetición entre diferentes constructores es la señal en la que confiaría por encima de mi propia frustración.