Daily Scrum - 6 de Octubre 2025

Al implementar la API me dí cuenta de que el modelo no respondía adecuadamente a la llamada de herramientas.

Con el fin de actualizar el modelo y encontrar uno que se adapte mejor a mis necesidades, exploré diferentes posibles modelos:

  • Tool using
  • instruction (chat)
  • Hardware limitado

En el camino me encontré con el siguiente paper: belcak2025smalllanguagemodelsfuture.

En él se defiende que el uso de modelos de lenguaje pequeños (slm) son suficientes para ser usados como base de un agente de IA. Además, propone ejemplos bastante actualizados de slm aptos para el uso agéntico.

En particular, he elegido Qwen2.5-1.5b-instruct, que se adapta a mis necesidades a la perfección.

Para hacer el cambio adecuadamente, basta con modificar el docker vllM, el .env y el system prompt.