Zurück zu Anfragen
vor etwa 6 Stunden · Anfrage req-004
AgentVersand-ProblemeAgreement 93.0%
„Kannst du die Lieferadresse für Bestellung 882199 auf Musterstr. 12, 10115 Berlin ändern? Bin umgezogen."
System-Prompt anzeigen
Du bist die Customer-Support-KI von Acme. Du hast Zugriff auf Tools für Order-Lookup, Refund-Bearbeitung, Ticket-Anlage und Eskalation an einen Menschen. Sei knapp, sachlich und ruf Tools auf, wenn nötig. Bestätige sensible Aktionen immer vor der Ausführung.
Side-by-Side-Vergleich
GPT-4o🇺🇸🇪🇺PRIMARY
~1.8T (est.)·OpenAI🇪🇺
Tool-Calls
update_shipping_address= Primary
{"order_id":"882199","street":"Musterstr. 12","zip":"10115","city":"Berlin"}
Antwort
Erledigt. Lieferadresse für Bestellung 882199 wurde auf Musterstr. 12, 10115 Berlin aktualisiert. Die Bestellung wird zur neuen Adresse versandt.
Latenz
1480ms
Tokens
78
Kosten
$1.785/k
Haiku 4.5🇺🇸🇪🇺Shadow
~70B (est.)·Anthropic🇪🇺
Tool-Calls
update_shipping_address= Primary
{"order_id":"882199","street":"Musterstr. 12","zip":"10115","city":"Berlin"}
Antwort
Erledigt. Lieferadresse für Bestellung 882199 wurde auf Musterstr. 12, 10115 Berlin aktualisiert. Die Bestellung wird zur neuen Adresse versandt.
Latenz
1480ms
Tokens
78
Kosten
$0.634/k
−65%
Mistral Small 3🇪🇺🏠🇪🇺🛡️Shadow
24B·Mistral AI (EU)🏠🇪🇺🛡️
Tool-Calls
update_shipping_address= Primary
{"order_id":"882199","street":"Musterstr. 12","zip":"10115","city":"Berlin"}
Antwort
Erledigt. Lieferadresse für Bestellung 882199 wurde auf Musterstr. 12, 10115 Berlin aktualisiert. Die Bestellung wird zur neuen Adresse versandt.
Latenz
1480ms
Tokens
78
Kosten
$0.127/k
−93%
Llama 3.2 3B🇺🇸🏠🇪🇺Shadow
3B·Meta / Groq🏠🇪🇺
Tool-Calls
update_shipping_address= Primary
{"order_id":"882199","street":"Musterstr. 12","zip":"10115","city":"Berlin"}
Antwort
Erledigt. Lieferadresse für Bestellung 882199 wurde auf Musterstr. 12, 10115 Berlin aktualisiert. Die Bestellung wird zur neuen Adresse versandt.
Latenz
1480ms
Tokens
78
Kosten
$0.029/k
−98%
1 weitere Shadow-Modelle anzeigen
Gemma 2 2B🇺🇸🏠🇪🇺Shadow
2B·Google🏠🇪🇺
Tool-Calls
update_shipping_address= Primary
{"order_id":"882199","street":"Musterstr. 12","zip":"10115","city":"Berlin"}
Antwort
Erledigt. Lieferadresse für Bestellung 882199 wurde auf Musterstr. 12, 10115 Berlin aktualisiert. Die Bestellung wird zur neuen Adresse versandt.
Latenz
1480ms
Tokens
78
Kosten
$0.010/k
−99%
Trajektorie-Vergleich
Wieviele Tool-Calls jedes Modell bis zum Ergebnis brauchte. Loops werden geflagged.
GPT-4o🇺🇸P
update_shipping_address
1 Calls
Haiku 4.5🇺🇸
update_shipping_address
1 Calls
Mistral Small 3🇪🇺
update_shipping_address
1 Calls
Llama 3.2 3B🇺🇸
update_shipping_address
1 Calls
Gemma 2 2B🇺🇸
update_shipping_address
1 Calls
Embedding-Ähnlichkeits-Matrix
Wie semantisch ähnlich jede Shadow-Antwort dem Primary und der Golden-Referenz ist.
Modell→ Primary→ Golden
GPT-4o🇺🇸1.000.96
Haiku 4.5🇺🇸0.960.95
Mistral Small 3🇪🇺0.950.93
Llama 3.2 3B🇺🇸0.920.89
Gemma 2 2B🇺🇸0.890.86