Tested prompt · Translation
A meeting note into German: every AI model's reply, tested
We sent this everyday translation prompt to all 16 models in llmwise, the same way the app sends a message, and checked every reply the same way. Here's each one as it came, with whether it passed, what it cost and how long it took.
Based on 16 of our test runs on , through OpenRouter with the app's own prompt and settings. Updated .
Short answer
All 16 models passed this translation prompt's check (back-translation). The cheapest reply that passed was GLM 5.3 Flash's, at $0.000076; the fastest, GLM 5.3's in 1.6 s. The dearest reply, GPT-6 Astra's, cost 236 times as much ($0.0180).
The prompt, as sent, and its check
Checked by back-translation, the same way for every model.
A meeting note into German (everyday)
Translate this note into German. Keep names, dates, times and room numbers exactly as they are.
Team, the quarterly review with Dr. Okafor moves from Tuesday to Thursday, 16 October, at 09:15 in room B204. Please send your updated figures to Lena Brandt by Wednesday noon. The call link stays the same, and the meeting will end by 10:45 at the latest.
It must keep “Okafor”, “16”, “09:15”, “B204”, “Lena Brandt”, “10:45”, be in the language asked for, and read back close to the original (chrF of at least 0.4).
Exactly what this prompt's replies are checked against, with every other prompt of our test runs.
Every model's result
All 16 models on this prompt, in catalog order.
| Model | Result | Cost | Time | Reply |
|---|---|---|---|---|
| Claude Fable 5.1Anthropic | Passed: Back-translation chrF 0.72 (pass at 0.4). | $0.0152 | 4.7 s | 159 tokens |
| Claude Opus 5.5Anthropic | Passed: Back-translation chrF 0.80 (pass at 0.4). | $0.0096 | 5.5 s | 140 tokens |
| Claude Sonnet 5.5Anthropic | Passed: Back-translation chrF 0.79 (pass at 0.4). | $0.0038 | 2.3 s | 238 tokens |
| Claude Sonnet 5Anthropic | Passed: Back-translation chrF 0.83 (pass at 0.4). | $0.0027 | 2.8 s | 151 tokens |
| Claude Haiku 4.5Anthropic | Passed: Back-translation chrF 0.97 (pass at 0.4). | $0.0010 | 1.8 s | 114 tokens |
| GPT-6 AstraOpenAI | Passed: Back-translation chrF 0.81 (pass at 0.4). | $0.0180 | 6.1 s | 80 tokens |
| GPT-6 SolOpenAI | Passed: Back-translation chrF 0.84 (pass at 0.4). | $0.0035 | 5.0 s | 81 tokens |
| GPT-6 LunaOpenAI | Passed: Back-translation chrF 0.87 (pass at 0.4). | $0.000081 | 1.7 s | 77 tokens |
| Gemini 3.1 Pro (preview)Google | Passed: Back-translation chrF 0.90 (pass at 0.4). | $0.0158 | 13.0 s | 78 tokens |
| Gemini 3.8 FlashGoogle | Passed: Back-translation chrF 0.97 (pass at 0.4). | $0.00063 | 3.0 s | 77 tokens |
| DeepSeek V4.1 FlashDeepSeek | Passed: Back-translation chrF 0.93 (pass at 0.4). | $0.00015 | 1.8 s | 90 tokens |
| DeepSeek V4 ProDeepSeek | Passed: Back-translation chrF 0.97 (pass at 0.4). | $0.0010 | 22.0 s | 78 tokens |
| Grok 4.7xAI | Passed: Back-translation chrF 0.91 (pass at 0.4). | $0.0060 | 12.6 s | 73 tokens |
| Kimi K3Moonshot | Passed: Back-translation chrF 0.85 (pass at 0.4). | $0.0014 | 3.0 s | 104 tokens |
| GLM 5.3Z.ai | Passed: Back-translation chrF 0.86 (pass at 0.4). | $0.00018 | 1.6 s | 82 tokens |
| GLM 5.3 FlashZ.ai | Passed: Back-translation chrF 0.85 (pass at 0.4). | $0.000076 | 4.2 s | 82 tokens |
Cost: what OpenRouter charged us for the reply. Time: from sending to the whole reply. Reply: its length in tokens, thinking not counted. In llmwise you pay per message, not per token: each of these replies counted as one message on Pro.
Every reply
Every reply passed: here they are from the cheapest up.
GLM 5.3 Flash
Passed: Back-translation chrF 0.85 (pass at 0.4).
Team, das Quartalsreview mit Dr. Okafor verschiebt sich von Dienstag auf Donnerstag, den 16. Oktober, um 09:15 in Raum B204. Bitte sendet eure aktualisierten Zahlen bis Mittwoch mittag an Lena Brandt. Der Call-Link bleibt derselbe, und die Sitzung endet spätestens um 10:45.
440 tokens in, 82 out · 4.2 s · $0.0001 · 1 message on Pro · answered by z-ai/glm-5.3-flash via AtlasCloud ·
GPT-6 Luna
Passed: Back-translation chrF 0.87 (pass at 0.4).
Team, die Quartalsbesprechung mit Dr. Okafor wird von Dienstag auf Donnerstag, 16 October, um 09:15 in Raum B204 verschoben. Bitte sendet eure aktualisierten Zahlen bis Mittwochmittag an Lena Brandt. Der Einwahllink bleibt derselbe, und die Besprechung endet spätestens um 10:45.
425 tokens in, 77 out · 1.7 s · $0.0001 · 1 message on Pro · answered by openai/gpt-6-luna via OpenAI ·
DeepSeek V4.1 Flash
Passed: Back-translation chrF 0.93 (pass at 0.4).
Team, die Quartalsbesprechung mit Dr. Okafor verschiebt sich von Dienstag auf Donnerstag, 16. Oktober, um 09:15 in Raum B204. Bitte sendet eure aktualisierten Zahlen bis Mittwochmittag an Lena Brandt. Der Anruflink bleibt derselbe, und das Meeting endet spätestens um 10:45.
463 tokens in, 110 out (20 of them reasoning) · 1.8 s · $0.0001 · 1 message on Pro · answered by deepseek/deepseek-v4.1-flash via StreamLake ·
GLM 5.3
Passed: Back-translation chrF 0.86 (pass at 0.4).
Hallo Team, das Quartalsmeeting mit Dr. Okafor verschiebt sich von Dienstag auf Donnerstag, 16 October, um 09:15 Uhr in Raum B204. Bitte sendet eure aktualisierten Zahlen bis Mittwoch mittag an Lena Brandt. Der Call-Link bleibt derselbe, und das Meeting endet spätestens um 10:45 Uhr.
439 tokens in, 82 out · 1.6 s · $0.0002 · 1 message on Pro · answered by z-ai/glm-5.3 via Baidu ·
Gemini 3.8 Flash
Passed: Back-translation chrF 0.97 (pass at 0.4).
Team, das Quartals-Review mit Dr. Okafor wird von Dienstag auf Donnerstag, 16 October, um 09:15 in Raum B204 verschoben. Bitte sendet eure aktualisierten Zahlen bis Mittwochmittag an Lena Brandt. Der Link zum Anruf bleibt derselbe, und das Meeting endet spätestens um 10:45.
455 tokens in, 77 out · 3.0 s · $0.0006 · 1 message on Pro · answered by google/gemini-3.8-flash via Google ·
DeepSeek V4 Pro
Passed: Back-translation chrF 0.97 (pass at 0.4).
Team, das Quartalsreview mit Dr. Okafor verschiebt sich von Tuesday auf Thursday, 16 October, um 09:15 in Raum B204. Bitte sendet eure aktualisierten Zahlen bis Wednesday noon an Lena Brandt. Der Anruflink bleibt gleich, und das Meeting endet spätestens um 10:45.
435 tokens in, 1,302 out (1,224 of them reasoning) · 22.0 s · $0.0010 · 1 message on Pro · answered by deepseek/deepseek-v4-pro-0813 via Baidu ·
Claude Haiku 4.5
Passed: Back-translation chrF 0.97 (pass at 0.4).
Here's the German translation: Team, die Quartalsübersicht mit Dr. Okafor verschiebt sich von Dienstag auf Donnerstag, 16 October, um 09:15 in Raum B204. Bitte sendet eure aktualisierten Zahlen bis Mittwoch Mittag an Lena Brandt. Der Call-Link bleibt gleich, und das Meeting endet spätestens um 10:45.
458 tokens in, 114 out · 1.8 s · $0.0010 · 1 message on Pro · answered by anthropic/claude-haiku-4.5 via Amazon Bedrock ·
Kimi K3
Passed: Back-translation chrF 0.85 (pass at 0.4).
Team, das Quartalsgespräch mit Dr. Okafor wird von Dienstag auf Donnerstag, den 16 October, um 09:15 in Raum B204 verschoben. Bitte sendet eure aktualisierten Zahlen bis Mittwoch mittags an Lena Brandt. Der Einwahllink bleibt gleich, und das Meeting endet spätestens um 10:45.
513 tokens in, 122 out (18 of them reasoning) · 3.0 s · $0.0014 · 1 message on Pro · answered by moonshotai/kimi-k3 via Wafer ·
Claude Sonnet 5
Passed: Back-translation chrF 0.83 (pass at 0.4).
Team, die Quartalsbesprechung mit Dr. Okafor wird von Dienstag auf Donnerstag, 16. Oktober, 09:15 Uhr, in Raum B204 verschoben. Bitte sendet eure aktualisierten Zahlen bis Mittwochmittag an Lena Brandt. Der Call-Link bleibt derselbe, und das Meeting endet spätestens um 10:45 Uhr.
587 tokens in, 151 out · 2.8 s · $0.0027 · 1 message on Pro · answered by anthropic/claude-sonnet-5 via Claude Platform on AWS ·
GPT-6 Sol
Passed: Back-translation chrF 0.84 (pass at 0.4).
Team, die Quartalsbesprechung mit Dr. Okafor wird von Dienstag auf Donnerstag, 16 October, um 09:15 in Raum B204 verschoben. Bitte schickt eure aktualisierten Zahlen bis Mittwochmittag an Lena Brandt. Der Link für die Videokonferenz bleibt derselbe, und die Besprechung endet spätestens um 10:45.
425 tokens in, 263 out (182 of them reasoning) · 5.0 s · $0.0035 · 1 message on Pro · answered by openai/gpt-6-sol via OpenAI ·
Claude Sonnet 5.5
Passed: Back-translation chrF 0.79 (pass at 0.4).
Team, die Quartalsbesprechung mit Dr. Okafor wird von Dienstag auf Donnerstag, 16. Oktober, um 09:15 Uhr in Raum B204 verschoben. Bitte schickt Lena Brandt eure aktualisierten Zahlen bis Mittwoch, 12:00 Uhr. Der Link zum Call bleibt derselbe, und das Meeting endet spätestens um 10:45 Uhr. Hinweis: Ich habe „16 October“ in der im Deutschen üblichen Schreibweise „16. Oktober“ wiedergegeben; Namen, Uhrzeiten und Raumnummer sind unverändert.
591 tokens in, 238 out · 2.3 s · $0.0038 · 1 message on Pro · answered by anthropic/claude-sonnet-5.5 via Anthropic ·
Grok 4.7
Passed: Back-translation chrF 0.91 (pass at 0.4).
Team, die Quartalsbesprechung mit Dr. Okafor wird von Tuesday auf Thursday, 16 October, um 09:15 in Raum B204 verlegt. Bitte sendet eure aktualisierten Zahlen bis Wednesday noon an Lena Brandt. Der Call-Link bleibt derselbe, und das Meeting endet spätestens um 10:45.
1,658 tokens in, 981 out (908 of them reasoning) · 12.6 s · $0.0060 · 1 message on Pro · answered by x-ai/grok-4.7 via xAI ·
Claude Opus 5.5
Passed: Back-translation chrF 0.80 (pass at 0.4).
Team, die Quartalsbesprechung mit Dr. Okafor wird von Dienstag auf Donnerstag, 16 October, um 09:15 in Raum B204 verschoben. Bitte schickt eure aktualisierten Zahlen bis Mittwochmittag an Lena Brandt. Der Link zum Call bleibt derselbe, und das Meeting endet spätestens um 10:45.
589 tokens in, 335 out (195 of them reasoning) · 5.5 s · $0.0096 · 1 message on Pro · answered by anthropic/claude-opus-5.5 via Claude Platform on AWS ·
Claude Fable 5.1
Passed: Back-translation chrF 0.72 (pass at 0.4).
Team, das Quartalsgespräch mit Dr. Okafor wird von Dienstag auf Donnerstag, den 16. Oktober, um 09:15 Uhr in Raum B204 verlegt. Bitte schickt eure aktualisierten Zahlen bis Mittwochmittag an Lena Brandt. Der Link zur Telefonkonferenz bleibt unverändert, und das Meeting endet spätestens um 10:45 Uhr.
589 tokens in, 159 out · 4.7 s · $0.0152 · 1 message on Pro · answered by anthropic/claude-fable-5.1 via Anthropic ·
Gemini 3.1 Pro
Passed: Back-translation chrF 0.90 (pass at 0.4).
Team, das vierteljährliche Review mit Dr. Okafor wird von Dienstag auf Donnerstag, 16 October, um 09:15 in Raum B204 verschoben. Bitte sendet eure aktualisierten Zahlen bis Mittwochmittag an Lena Brandt. Der Einwahllink bleibt gleich und das Meeting wird spätestens um 10:45 enden.
455 tokens in, 1,238 out (1,160 of them reasoning) · 13.0 s · $0.0158 · 1 message on Pro · answered by google/gemini-3.1-pro-preview via Google ·
GPT-6 Astra
Passed: Back-translation chrF 0.81 (pass at 0.4).
Team, die Quartalsbesprechung mit Dr. Okafor wird von Dienstag auf Donnerstag, 16 October, um 09:15 in Raum B204 verlegt. Bitte sendet eure aktualisierten Zahlen bis Mittwochmittag an Lena Brandt. Der Link zur Besprechung bleibt unverändert, und die Besprechung endet spätestens um 10:45.
425 tokens in, 275 out (195 of them reasoning) · 6.1 s · $0.0180 · 1 message on Pro · answered by openai/gpt-6-astra via OpenAI ·
More translation prompts
The other translation prompts, each with every model's reply, and the results across all five.
Questions
Which AI does best on “A meeting note into German”?
All 16 models passed this translation prompt's check (back-translation). The cheapest reply that passed was GLM 5.3 Flash's, at $0.000076; the fastest, GLM 5.3's in 1.6 s. The dearest reply, GPT-6 Astra's, cost 236 times as much ($0.0180).
What does a reply to “A meeting note into German” cost?
Through the models' APIs, what OpenRouter charged us ran from $0.000076 (GLM 5.3 Flash) to $0.0180 (GPT-6 Astra) for this prompt. In llmwise you don't pay by the token: a reply like these counts as one message on Pro, whichever model answers.
Claude, GPT, Gemini, DeepSeek, Grok, Kimi, and GLM, in one chat.
See what a message costs before you send it. Free is 5 messages to try; sign in with an email link, no password or card.