Tested prompt · Translation
A meeting note into German: every AI model's reply, tested
We sent this everyday translation prompt to all 20 models in llmwise, the same way the app sends a message, and checked every reply the same way. Here's each one as it came, with whether it passed, what it cost and how long it took.
Based on 20 of our test runs on , through OpenRouter with the app's own prompt and settings. Updated .
Short answer
All 20 models passed this translation prompt's check (back-translation). The cheapest reply that passed was GLM 5.3 Flash's, at $0.000076; the fastest, Claude Haiku 5.5's in 1.3 s. The dearest reply, GPT-6 Astra's, cost 236 times as much ($0.0180).
The prompt, as sent, and its check
Checked by back-translation, the same way for every model.
A meeting note into German (everyday)
Translate this note into German. Keep names, dates, times and room numbers exactly as they are.
Team, the quarterly review with Dr. Okafor moves from Tuesday to Thursday, 16 October, at 09:15 in room B204. Please send your updated figures to Lena Brandt by Wednesday noon. The call link stays the same, and the meeting will end by 10:45 at the latest.
It must keep “Okafor”, “16”, “09:15”, “B204”, “Lena Brandt”, “10:45”, be in the language asked for, and read back close to the original (chrF of at least 0.4).
Exactly what this prompt's replies are checked against, with every other prompt of our test runs.
Every model's result
All 20 models on this prompt, in catalog order.
| Model | Result | Cost | Time | Reply |
|---|---|---|---|---|
| Claude Fable 5.1Anthropic | Passed: Back-translation chrF 0.72 (pass at 0.4). | $0.0152 | 4.7 s | 159 tokens |
| Claude Opus 5.5Anthropic | Passed: Back-translation chrF 0.80 (pass at 0.4). | $0.0096 | 5.5 s | 140 tokens |
| Claude Sonnet 5.5Anthropic | Passed: Back-translation chrF 0.79 (pass at 0.4). | $0.0038 | 2.3 s | 238 tokens |
| Claude Sonnet 5Anthropic | Passed: Back-translation chrF 0.83 (pass at 0.4). | $0.0027 | 2.8 s | 151 tokens |
| Claude Haiku 5.5Anthropic | Passed: Back-translation chrF 0.74 (pass at 0.4). | $0.00015 | 1.3 s | 161 tokens |
| Claude Haiku 4.5Anthropic | Passed: Back-translation chrF 0.97 (pass at 0.4). | $0.0010 | 1.8 s | 114 tokens |
| GPT-6 AstraOpenAI | Passed: Back-translation chrF 0.81 (pass at 0.4). | $0.0180 | 6.1 s | 80 tokens |
| GPT-6.1 SolOpenAI | Passed: Back-translation chrF 0.81 (pass at 0.4). | $0.0017 | 3.9 s | 80 tokens |
| GPT-6 SolOpenAI | Passed: Back-translation chrF 0.84 (pass at 0.4). | $0.0035 | 5.0 s | 81 tokens |
| GPT-6 LunaOpenAI | Passed: Back-translation chrF 0.87 (pass at 0.4). | $0.000081 | 1.7 s | 77 tokens |
| Gemini 4 ArgonGoogle | Passed: Back-translation chrF 0.76 (pass at 0.4). | $0.0012 | 6.8 s | 95 tokens |
| Gemini 3.1 Pro (preview)Google | Passed: Back-translation chrF 0.90 (pass at 0.4). | $0.0158 | 13.0 s | 78 tokens |
| Gemini 3.8 FlashGoogle | Passed: Back-translation chrF 0.97 (pass at 0.4). | $0.00063 | 3.0 s | 77 tokens |
| DeepSeek V4.1 FlashDeepSeek | Passed: Back-translation chrF 0.92 (pass at 0.4). | $0.00055 | 1.3 s | 88 tokens |
| DeepSeek V4 ProDeepSeek | Passed: Back-translation chrF 0.80 (pass at 0.4). | $0.0015 | 4.3 s | 89 tokens |
| Grok 4.7xAI | Passed: Back-translation chrF 0.88 (pass at 0.4). | $0.0121 | 22.4 s | 76 tokens |
| Kimi K3Moonshot | Passed: Back-translation chrF 0.85 (pass at 0.4). | $0.0014 | 3.0 s | 104 tokens |
| GLM 5.3Z.ai | Passed: Back-translation chrF 0.86 (pass at 0.4). | $0.00018 | 1.6 s | 82 tokens |
| GLM 5.3 FlashZ.ai | Passed: Back-translation chrF 0.85 (pass at 0.4). | $0.000076 | 4.2 s | 82 tokens |
| Mistral Large 4Mistral | Passed: Back-translation chrF 0.87 (pass at 0.4). | $0.0022 | 9.9 s | 51 tokens |
Cost: what OpenRouter charged us for the reply. Time: from sending to the whole reply. Reply: its length in tokens, thinking not counted. In llmwise you pay per message, not per token: each of these replies counted as one message on Pro.
Every reply
Every reply passed: here they are from the cheapest up.
GLM 5.3 Flash
Passed: Back-translation chrF 0.85 (pass at 0.4).
Team, das Quartalsreview mit Dr. Okafor verschiebt sich von Dienstag auf Donnerstag, den 16. Oktober, um 09:15 in Raum B204. Bitte sendet eure aktualisierten Zahlen bis Mittwoch mittag an Lena Brandt. Der Call-Link bleibt derselbe, und die Sitzung endet spätestens um 10:45.
440 tokens in, 82 out · 4.2 s · $0.0001 · 1 message on Pro · answered by z-ai/glm-5.3-flash via AtlasCloud ·
GPT-6 Luna
Passed: Back-translation chrF 0.87 (pass at 0.4).
Team, die Quartalsbesprechung mit Dr. Okafor wird von Dienstag auf Donnerstag, 16 October, um 09:15 in Raum B204 verschoben. Bitte sendet eure aktualisierten Zahlen bis Mittwochmittag an Lena Brandt. Der Einwahllink bleibt derselbe, und die Besprechung endet spätestens um 10:45.
425 tokens in, 77 out · 1.7 s · $0.0001 · 1 message on Pro · answered by openai/gpt-6-luna via OpenAI ·
Claude Haiku 5.5
Passed: Back-translation chrF 0.74 (pass at 0.4).
Team, die Quartalsbesprechung mit Dr. Okafor wird von Dienstag auf Donnerstag, 16. Oktober, um 09:15 in Raum B204 verschoben. Bitte senden Sie Ihre aktualisierten Zahlen bis Mittwoch, 12:00 Uhr, an Lena Brandt. Der Call-Link bleibt unverändert, und die Besprechung endet spätestens um 10:45 Uhr.
590 tokens in, 161 out · 1.3 s · $0.0002 · 1 message on Pro · answered by anthropic/claude-haiku-5.5 via Anthropic ·
GLM 5.3
Passed: Back-translation chrF 0.86 (pass at 0.4).
Hallo Team, das Quartalsmeeting mit Dr. Okafor verschiebt sich von Dienstag auf Donnerstag, 16 October, um 09:15 Uhr in Raum B204. Bitte sendet eure aktualisierten Zahlen bis Mittwoch mittag an Lena Brandt. Der Call-Link bleibt derselbe, und das Meeting endet spätestens um 10:45 Uhr.
439 tokens in, 82 out · 1.6 s · $0.0002 · 1 message on Pro · answered by z-ai/glm-5.3 via Baidu ·
DeepSeek V4.1 Flash
Passed: Back-translation chrF 0.92 (pass at 0.4).
Team, die Quartalsbesprechung mit Dr. Okafor verschiebt sich von Dienstag auf Donnerstag, 16. Oktober, um 09:15 in Raum B204. Bitte sendet eure aktualisierten Zahlen bis Mittwochmittag an Lena Brandt. Der Anruflink bleibt gleich, und das Meeting endet spätestens um 10:45.
463 tokens in, 404 out (316 of them reasoning) · 1.3 s · $0.0005 · 1 message on Pro · answered by deepseek/deepseek-v4.1-flash via Together ·
Gemini 3.8 Flash
Passed: Back-translation chrF 0.97 (pass at 0.4).
Team, das Quartals-Review mit Dr. Okafor wird von Dienstag auf Donnerstag, 16 October, um 09:15 in Raum B204 verschoben. Bitte sendet eure aktualisierten Zahlen bis Mittwochmittag an Lena Brandt. Der Link zum Anruf bleibt derselbe, und das Meeting endet spätestens um 10:45.
455 tokens in, 77 out · 3.0 s · $0.0006 · 1 message on Pro · answered by google/gemini-3.8-flash via Google ·
Claude Haiku 4.5
Passed: Back-translation chrF 0.97 (pass at 0.4).
Here's the German translation: Team, die Quartalsübersicht mit Dr. Okafor verschiebt sich von Dienstag auf Donnerstag, 16 October, um 09:15 in Raum B204. Bitte sendet eure aktualisierten Zahlen bis Mittwoch Mittag an Lena Brandt. Der Call-Link bleibt gleich, und das Meeting endet spätestens um 10:45.
458 tokens in, 114 out · 1.8 s · $0.0010 · 1 message on Pro · answered by anthropic/claude-haiku-4.5 via Amazon Bedrock ·
Gemini 4 Argon
Passed: Back-translation chrF 0.76 (pass at 0.4).
Team, das Quartalsgespräch mit Dr. Okafor wird von Dienstag auf Donnerstag, den 16. Oktober, um 09:15 Uhr in Raum B204 verschoben. Bitte sendet eure aktualisierten Zahlen bis Mittwoch um 12:00 Uhr mittags an Lena Brandt. Der Einwahllink bleibt gleich, und das Meeting endet spätestens um 10:45 Uhr.
675 tokens in, 95 out · 6.8 s · $0.0012 · 1 message on Pro · answered by google/gemini-4-argon via Google AI Studio ·
Kimi K3
Passed: Back-translation chrF 0.85 (pass at 0.4).
Team, das Quartalsgespräch mit Dr. Okafor wird von Dienstag auf Donnerstag, den 16 October, um 09:15 in Raum B204 verschoben. Bitte sendet eure aktualisierten Zahlen bis Mittwoch mittags an Lena Brandt. Der Einwahllink bleibt gleich, und das Meeting endet spätestens um 10:45.
513 tokens in, 122 out (18 of them reasoning) · 3.0 s · $0.0014 · 1 message on Pro · answered by moonshotai/kimi-k3 via Wafer ·
DeepSeek V4 Pro
Passed: Back-translation chrF 0.80 (pass at 0.4).
Team, das Quartalsreview mit Dr. Okafor verschiebt sich von Dienstag auf Donnerstag, 16. Oktober, um 09:15 Uhr in Raum B204. Bitte sendet eure aktualisierten Zahlen bis Mittwochmittag an Lena Brandt. Der Anruflink bleibt unverändert, und das Meeting endet spätestens um 10:45 Uhr.
435 tokens in, 333 out (244 of them reasoning) · 4.3 s · $0.0015 · 1 message on Pro · answered by deepseek/deepseek-v4-pro-0813 via Wafer ·
GPT-6.1 Sol
Passed: Back-translation chrF 0.81 (pass at 0.4).
Team, die Quartalsbesprechung mit Dr. Okafor wird von Dienstag auf Donnerstag, 16 October, um 09:15 in Raum B204 verschoben. Bitte sendet eure aktualisierten Zahlen bis Mittwochmittag an Lena Brandt. Der Link zur Besprechung bleibt unverändert, und die Besprechung endet spätestens um 10:45.
427 tokens in, 249 out (169 of them reasoning) · 3.9 s · $0.0017 · 1 message on Pro · answered by openai/gpt-6.1-sol via OpenAI ·
Mistral Large 4
Passed: Back-translation chrF 0.87 (pass at 0.4).
Team, das Quartalsreview mit Dr. Okafor verschiebt sich von Dienstag auf Donnerstag, 16 October, um 09:15 in Raum B204. Bitte senden Sie Ihre aktualisierten Zahlen bis Mittwochmittag an Lena Brandt. Der Anruf-Link bleibt gleich, und das Meeting endet spätestens um 10:45.
430 tokens in, 923 out (872 of them reasoning) · 9.9 s · $0.0022 · 1 message on Pro · answered by mistralai/mistral-large-4-0 via Mistral ·
Claude Sonnet 5
Passed: Back-translation chrF 0.83 (pass at 0.4).
Team, die Quartalsbesprechung mit Dr. Okafor wird von Dienstag auf Donnerstag, 16. Oktober, 09:15 Uhr, in Raum B204 verschoben. Bitte sendet eure aktualisierten Zahlen bis Mittwochmittag an Lena Brandt. Der Call-Link bleibt derselbe, und das Meeting endet spätestens um 10:45 Uhr.
587 tokens in, 151 out · 2.8 s · $0.0027 · 1 message on Pro · answered by anthropic/claude-sonnet-5 via Claude Platform on AWS ·
GPT-6 Sol
Passed: Back-translation chrF 0.84 (pass at 0.4).
Team, die Quartalsbesprechung mit Dr. Okafor wird von Dienstag auf Donnerstag, 16 October, um 09:15 in Raum B204 verschoben. Bitte schickt eure aktualisierten Zahlen bis Mittwochmittag an Lena Brandt. Der Link für die Videokonferenz bleibt derselbe, und die Besprechung endet spätestens um 10:45.
425 tokens in, 263 out (182 of them reasoning) · 5.0 s · $0.0035 · 1 message on Pro · answered by openai/gpt-6-sol via OpenAI ·
Claude Sonnet 5.5
Passed: Back-translation chrF 0.79 (pass at 0.4).
Team, die Quartalsbesprechung mit Dr. Okafor wird von Dienstag auf Donnerstag, 16. Oktober, um 09:15 Uhr in Raum B204 verschoben. Bitte schickt Lena Brandt eure aktualisierten Zahlen bis Mittwoch, 12:00 Uhr. Der Link zum Call bleibt derselbe, und das Meeting endet spätestens um 10:45 Uhr. Hinweis: Ich habe „16 October“ in der im Deutschen üblichen Schreibweise „16. Oktober“ wiedergegeben; Namen, Uhrzeiten und Raumnummer sind unverändert.
591 tokens in, 238 out · 2.3 s · $0.0038 · 1 message on Pro · answered by anthropic/claude-sonnet-5.5 via Anthropic ·
Claude Opus 5.5
Passed: Back-translation chrF 0.80 (pass at 0.4).
Team, die Quartalsbesprechung mit Dr. Okafor wird von Dienstag auf Donnerstag, 16 October, um 09:15 in Raum B204 verschoben. Bitte schickt eure aktualisierten Zahlen bis Mittwochmittag an Lena Brandt. Der Link zum Call bleibt derselbe, und das Meeting endet spätestens um 10:45.
589 tokens in, 335 out (195 of them reasoning) · 5.5 s · $0.0096 · 1 message on Pro · answered by anthropic/claude-opus-5.5 via Claude Platform on AWS ·
Grok 4.7
Passed: Back-translation chrF 0.88 (pass at 0.4).
Team, die Quartalsbesprechung mit Dr. Okafor wird von Dienstag auf Donnerstag, 16 October, um 09:15 in Raum B204 verlegt. Bitte sendet eure aktualisierten Zahlen bis Mittwochmittag an Lena Brandt. Der Call-Link bleibt gleich, und die Besprechung endet spätestens um 10:45.
1,659 tokens in, 1,751 out (1,675 of them reasoning) · 22.4 s · $0.0121 · 1 message on Pro · answered by x-ai/grok-4.7 via xAI ·
Claude Fable 5.1
Passed: Back-translation chrF 0.72 (pass at 0.4).
Team, das Quartalsgespräch mit Dr. Okafor wird von Dienstag auf Donnerstag, den 16. Oktober, um 09:15 Uhr in Raum B204 verlegt. Bitte schickt eure aktualisierten Zahlen bis Mittwochmittag an Lena Brandt. Der Link zur Telefonkonferenz bleibt unverändert, und das Meeting endet spätestens um 10:45 Uhr.
589 tokens in, 159 out · 4.7 s · $0.0152 · 1 message on Pro · answered by anthropic/claude-fable-5.1 via Anthropic ·
Gemini 3.1 Pro
Passed: Back-translation chrF 0.90 (pass at 0.4).
Team, das vierteljährliche Review mit Dr. Okafor wird von Dienstag auf Donnerstag, 16 October, um 09:15 in Raum B204 verschoben. Bitte sendet eure aktualisierten Zahlen bis Mittwochmittag an Lena Brandt. Der Einwahllink bleibt gleich und das Meeting wird spätestens um 10:45 enden.
455 tokens in, 1,238 out (1,160 of them reasoning) · 13.0 s · $0.0158 · 1 message on Pro · answered by google/gemini-3.1-pro-preview via Google ·
GPT-6 Astra
Passed: Back-translation chrF 0.81 (pass at 0.4).
Team, die Quartalsbesprechung mit Dr. Okafor wird von Dienstag auf Donnerstag, 16 October, um 09:15 in Raum B204 verlegt. Bitte sendet eure aktualisierten Zahlen bis Mittwochmittag an Lena Brandt. Der Link zur Besprechung bleibt unverändert, und die Besprechung endet spätestens um 10:45.
425 tokens in, 275 out (195 of them reasoning) · 6.1 s · $0.0180 · 1 message on Pro · answered by openai/gpt-6-astra via OpenAI ·
More translation prompts
The other translation prompts, each with every model's reply, and the results across all five.
Questions
Which AI does best on “A meeting note into German”?
All 20 models passed this translation prompt's check (back-translation). The cheapest reply that passed was GLM 5.3 Flash's, at $0.000076; the fastest, Claude Haiku 5.5's in 1.3 s. The dearest reply, GPT-6 Astra's, cost 236 times as much ($0.0180).
What does a reply to “A meeting note into German” cost?
Through the models' APIs, what OpenRouter charged us ran from $0.000076 (GLM 5.3 Flash) to $0.0180 (GPT-6 Astra) for this prompt. In llmwise you don't pay by the token: a reply like these counts as one message on Pro, whichever model answers.
Claude, GPT, Gemini, DeepSeek, Grok, Kimi, GLM, and Mistral, in one chat.
See what a message costs before you send it. Free is 5 messages to try; sign in with an email link, no password or card.