Grok 4.5 liderem testu agentów z niskim kosztem
Grok 4.5 zdobył 51,4% w niezależnym teście AutomationBench‑AA i kosztował 0,34 USD za zadanie, potwierdzając wcześniejsze oceny Elona Muska.
SpaceXAI udostępnił publicznie model Grok 4.5 w tym tygodniu. Model powstał na bazie architektury V9 i ma 1,5 biliona parametrów.
W niezależnym rankingu AutomationBench‑AA przeprowadzonym przez Artificial Analysis Grok 4.5 osiągnął 51,4% skuteczności przy koszcie 0,34 USD na zadanie. Test obejmował 657 zadań odtworzonych w 40 symulowanych aplikacjach, m.in. Gmail, Slack, Salesforce i HubSpot.
Grok 4.5 wyprzedził Claude Fable 5 (48,6%) i Claude Opus 4.8 (48,5%). Koszt na zadanie dla Fable 5 wyniósł 1,35 USD, a dla Opus 4.8 1,46 USD; najbliżej był Gemini 3.5 Flash z 0,49 USD na zadanie. Grok generował około 8 000 tokenów wyjściowych na zadanie, a całkowite zużycie tokenów wyniosło 0,44 mln na zadanie.
Model zrealizował 79,9% celów zadania oraz w pełni ukończył 21,9% zadań. W kategorii finansów Grok 4.5 osiągnął 71% skuteczności wobec 64% Fable 5 i 62% Opus 4.8.
Grok 4.5 notował 0,63 naruszeń zasad na zadanie, w porównaniu z 0,55 dla Opus 4.8 i 0,46 dla Gemini 3.5 Flash. Liczba naruszeń jest istotna dla wdrożeń w środowiskach, gdzie błędy lub naruszenia polityk mogą generować koszty.
Artificial Analysis wskazała, że zestaw zadań jest utajniony, by ograniczyć dopasowywanie modeli do testu. W raporcie zaznaczono: „Całkowite zużycie tokenów 0,44 mln na zadanie jest jednym z najniższych na liście. Niski koszt wynika z tej wydajności i niskiej ceny tokena.”
SpaceXAI udostępnił model publicznie w tym tygodniu, a wyniki AutomationBench‑AA zostały opublikowane przez Artificial Analysis.
Treści publikowane na GNcrypto mają wyłącznie charakter informacyjny i nie stanowią porady finansowej. Dokładamy starań, aby informacje były rzetelne i aktualne, jednak nie gwarantujemy ich pełnej poprawności, kompletności ani niezawodności. GNcrypto nie ponosi odpowiedzialności za ewentualne błędy, pominięcia ani straty finansowe wynikające z polegania na tych treściach. Wszystkie działania podejmujesz na własne ryzyko. Zawsze prowadź własne badania i korzystaj z pomocy profesjonalistów. Szczegóły znajdziesz w naszych Warunkach, Polityce prywatności i Zastrzeżeniach.
Artykuły tego autora
