fast_tools · Rask med verktøy
Agentisk chat der brukeren venter på et strømmet svar, og modellen må kalle verktøy (hovedchatten, Ekko).
Kvaliteten for P1 er ikke målt ennå: verktøylista må ut av +server.ts i Resonans først. Til da rangeres bare fart og kost, og laben anbefaler bare et bytte når dagens modell slutter å virke.
Definisjonen
Krav: verktøy, parallelle, strøm
Bruk: med verktøy, resonnering lav, tak 1000 tokens
Kvalitet: ikke målt ennå
Vekter: kvalitet 0.4, fart 0.4, kost 0.2. Fart er første token i «chat»; kost er et typisk kall på 34 000 tokens inn og 400 ut.
Rangering
| Modell | Poeng | Kvalitet | TTFT p50 | Total p50 | Per kall | Mangler |
|---|---|---|---|---|---|---|
| openai/gpt-4o-mini | 0,90 | – | 672 ms | 774 ms | $0.0048 | |
| openai/gpt-6-luna | 0,74 | – | 801 ms | 873 ms | $0.0030 | |
| openai/gpt-4o | 0,72 | – | 638 ms | 722 ms | $0.081 | |
| openai/gpt-6-sol | 0,31 | – | 931 ms | 1,06 s | $0.060 | |
| openai/gpt-5.5 | 0,25 | – | 918 ms | 1,02 s | $0.151 | |
| openai/gpt-5.4nå | 0,06 | – | 1,14 s | 1,25 s | $0.076 | |
| google/gemini-3.8-flash | – | – | – | – | $0.022 | verktoy, ingen parametere virker for bruken |
| google/gemini-3.7-flash | – | – | – | – | $0.022 | strom |
| openai/gpt-6.1-sol | – | – | – | – | $0.059 | verktoy, verktoyParallelt, ingen parametere virker for bruken |
Poeng 0–1: vektet sum av kvalitet, fart og kost, der fart og kost er på logaritmisk skala mellom beste og dårligste kandidat. Bare kandidater uten mangler rangeres. Et bytte foreslås når beste kandidat slår dagens modell med minst 0,05, uten å være mer enn 0,02 dårligere på kvalitet.
Det appene får
GET /api/v1/aliaser/fast_tools – modellen, ruten og de parameterne som er målt å virke for denne bruken.
{
"model": "gpt-5.4",
"baseURL": "https://api.openai.com/v1",
"params": {
"reasoning_effort": "none",
"max_completion_tokens": 1000,
"verbosity": "low"
}
} Historikk
Aliaset har pekt på openai/gpt-5.4 siden 8. okt. 2026.