Smaug d’Abacus.AI : performances nettes sur plusieurs benchmarks IA

1 min de lecture

Smaug d’Abacus.AI : performances nettes sur plusieurs benchmarks IA

Smaug Flash
Smaug Flash enregistre des gains importants sur les benchmarks LiveBench, AutomationBench et NL2Repo‑Bench.

Smaug Mini
Sur les tests IFBench, JobBench et NL2Repo‑Bench, Smaug Mini dépasse plusieurs modèles fermés, mais montre une légère baisse de performance en codage agentique.

Smaug Agentic
Smaug Agentic mise sur la stabilité lors de longues séquences, affichant peu de variation de score et deux benchmarks où la référence reste supérieure.

Méthodologie commune
Tous les modèles partagent une méthodologie visant la compatibilité et la résolution concrète de problèmes réels.

Source : Brief IA