Tested prompt · AI translator
Museum opening hours into French: every AI model's reply, tested
We ran this everyday AI translator test input on all 19 models in llmwise, the way the tool runs it, and checked every reply the same way. Here's each one as it came, with whether it passed, what it cost and how long it took.
Based on 19 of our test runs on , through OpenRouter with the tool's own instructions and the app's settings. Updated .
Short answer
All 19 models passed this AI translator test input's check (back-translation). The cheapest reply that passed was GPT-6 Luna's, at $0.000030; the fastest, GLM 5.3's in 0.6 s. The dearest reply, Claude Fable 5.1's, cost 307 times as much ($0.0092).
The prompt, as sent, and its check
Checked by back-translation, the same way for every model.
Museum opening hours into French (everyday)
Translate this text. Keep every name and link exactly as it is and every number at its value, and give only the translation. Translate it into French. --- The museum opens at 9:30 and closes at 18:00 every day except Monday. Tickets cost €14, and children under 12 get in free. The last entry is one hour before closing.
Sent with the AI translator's own instructions as the system prompt, as a free run of the tool sends them.
It must keep “9:30”, “18:00”, “14”, “12”, be in the language asked for, and read back close to the original (chrF of at least 0.4).
How the AI translator's test inputs are scored, with every model's results on all five.
Every model's result
All 19 models on this test input, in catalog order.
| Model | Result | Cost | Time | Reply |
|---|---|---|---|---|
| Claude Fable 5.1Anthropic | Passed: Back-translation chrF 0.80 (pass at 0.4). | $0.0092 | 1.9 s | 105 tokens |
| Claude Opus 5.5Anthropic | Passed: Back-translation chrF 0.81 (pass at 0.4). | $0.0056 | 2.9 s | 105 tokens |
| Claude Sonnet 5.5Anthropic | Passed: Back-translation chrF 0.84 (pass at 0.4). | $0.0018 | 1.4 s | 105 tokens |
| Claude Sonnet 5Anthropic | Passed: Back-translation chrF 0.90 (pass at 0.4). | $0.0018 | 2.6 s | 96 tokens |
| Claude Haiku 5.5Anthropic | Passed: Back-translation chrF 0.83 (pass at 0.4). | $0.000089 | 1.2 s | 98 tokens |
| Claude Haiku 4.5Anthropic | Passed: Back-translation chrF 0.89 (pass at 0.4). | $0.00074 | 1.3 s | 82 tokens |
| GPT-6 AstraOpenAI | Passed: Back-translation chrF 0.80 (pass at 0.4). | $0.0031 | 1.6 s | 62 tokens |
| GPT-6.1 SolOpenAI | Passed: Back-translation chrF 0.75 (pass at 0.4). | $0.00061 | 1.8 s | 61 tokens |
| GPT-6 SolOpenAI | Passed: Back-translation chrF 0.75 (pass at 0.4). | $0.00062 | 1.1 s | 62 tokens |
| GPT-6 LunaOpenAI | Passed: Back-translation chrF 0.87 (pass at 0.4). | $0.000030 | 1.0 s | 59 tokens |
| Gemini 3.1 Pro (preview)Google | Passed: Back-translation chrF 0.89 (pass at 0.4). | $0.0051 | 6.7 s | 60 tokens |
| Gemini 3.8 FlashGoogle | Passed: Back-translation chrF 0.80 (pass at 0.4). | $0.00023 | 1.0 s | 60 tokens |
| DeepSeek V4.1 FlashDeepSeek | Passed: Back-translation chrF 0.83 (pass at 0.4). | $0.00030 | 0.9 s | 70 tokens |
| DeepSeek V4 ProDeepSeek | Passed: Back-translation chrF 0.89 (pass at 0.4). | $0.0030 | 8.4 s | 66 tokens |
| Grok 4.7xAI | Passed: Back-translation chrF 0.89 (pass at 0.4). | $0.0050 | 11.4 s | 61 tokens |
| Kimi K3Moonshot | Passed: Back-translation chrF 0.89 (pass at 0.4). | $0.0013 | 5.0 s | 85 tokens |
| GLM 5.3Z.ai | Passed: Back-translation chrF 0.83 (pass at 0.4). | $0.00065 | 0.6 s | 64 tokens |
| GLM 5.3 FlashZ.ai | Passed: Back-translation chrF 0.83 (pass at 0.4). | $0.000081 | 1.4 s | 66 tokens |
| Mistral Large 4Mistral | Passed: Back-translation chrF 0.83 (pass at 0.4). | $0.0054 | 32.7 s | 292 tokens |
Cost: what OpenRouter charged us for the reply. Time: from sending to the whole reply. Reply: its length in tokens, thinking not counted. In llmwise you pay per message, not per token: each of these replies counted as one message on Pro.
Every reply
Every reply passed: here they are from the cheapest up.
GPT-6 Luna
Passed: Back-translation chrF 0.87 (pass at 0.4).
Le musée ouvre à 9:30 et ferme à 18:00 tous les jours sauf le lundi. Les billets coûtent 14 €, et l’entrée est gratuite pour les enfants de moins de 12 ans. La dernière entrée a lieu une heure avant la fermeture.
307 tokens in, 59 out · 1.0 s · $0.0000 · 1 message on Pro · answered by openai/gpt-6-luna via OpenAI ·
GLM 5.3 Flash
Passed: Back-translation chrF 0.83 (pass at 0.4).
Le musée ouvre à 9 h 30 et ferme à 18 h 00 tous les jours sauf le lundi. Les billets coûtent 14 €, et les enfants de moins de 12 ans entrent gratuitement. La dernière entrée se fait une heure avant la fermeture.
317 tokens in, 66 out · 1.4 s · $0.0001 · 1 message on Pro · answered by z-ai/glm-5.3-flash via Friendli ·
Claude Haiku 5.5
Passed: Back-translation chrF 0.83 (pass at 0.4).
Le musée ouvre à 9 h 30 et ferme à 18 h tous les jours sauf le lundi. Les billets coûtent 14 €, et les enfants de moins de 12 ans entrent gratuitement. La dernière entrée a lieu une heure avant la fermeture.
399 tokens in, 98 out · 1.2 s · $0.0001 · 1 message on Pro · answered by anthropic/claude-haiku-5.5 via Anthropic ·
Gemini 3.8 Flash
Passed: Back-translation chrF 0.80 (pass at 0.4).
Le musée ouvre à 9 h 30 et ferme à 18 h tous les jours sauf le lundi. Les billets coûtent 14 €, et l'entrée est gratuite pour les enfants de moins de 12 ans. La dernière entrée a lieu une heure avant la fermeture.
322 tokens in, 60 out · 1.0 s · $0.0002 · 1 message on Pro · answered by google/gemini-3.8-flash via Google AI Studio ·
DeepSeek V4.1 Flash
Passed: Back-translation chrF 0.83 (pass at 0.4).
Le musée ouvre à 9 h 30 et ferme à 18 h 00 tous les jours sauf le lundi. Les billets coûtent 14 €, et les enfants de moins de 12 ans entrent gratuitement. La dernière entrée se fait une heure avant la fermeture.
333 tokens in, 226 out (156 of them reasoning) · 0.9 s · $0.0003 · 1 message on Pro · answered by deepseek/deepseek-v4.1-flash via Together ·
GPT-6.1 Sol
Passed: Back-translation chrF 0.75 (pass at 0.4).
Le musée ouvre à 9 h 30 et ferme à 18 h 00 tous les jours sauf le lundi. Les billets coûtent 14 €, et l’entrée est gratuite pour les enfants de moins de 12 ans. La dernière admission a lieu une heure avant la fermeture.
307 tokens in, 61 out · 1.8 s · $0.0006 · 1 message on Pro · answered by openai/gpt-6.1-sol via OpenAI ·
GPT-6 Sol
Passed: Back-translation chrF 0.75 (pass at 0.4).
--- Le musée ouvre à 9 h 30 et ferme à 18 h 00 tous les jours sauf le lundi. Les billets coûtent 14 €, et l’entrée est gratuite pour les enfants de moins de 12 ans. La dernière admission a lieu une heure avant la fermeture.
307 tokens in, 62 out · 1.1 s · $0.0006 · 1 message on Pro · answered by openai/gpt-6-sol via OpenAI ·
GLM 5.3
Passed: Back-translation chrF 0.83 (pass at 0.4).
Le musée ouvre à 9h30 et ferme à 18h00 tous les jours sauf le lundi. Les billets coûtent 14 €, et les enfants de moins de 12 ans entrent gratuitement. La dernière entrée a lieu une heure avant la fermeture.
317 tokens in, 64 out · 0.6 s · $0.0007 · 1 message on Pro · answered by z-ai/glm-5.3 via Friendli ·
Claude Haiku 4.5
Passed: Back-translation chrF 0.89 (pass at 0.4).
Le musée ouvre à 9 h 30 et ferme à 18 h 00 tous les jours sauf le lundi. Les billets coûtent 14 €, et les enfants de moins de 12 ans entrent gratuitement. La dernière entrée se fait une heure avant la fermeture.
326 tokens in, 82 out · 1.3 s · $0.0007 · 1 message on Pro · answered by anthropic/claude-haiku-4.5 via Anthropic ·
Kimi K3
Passed: Back-translation chrF 0.89 (pass at 0.4).
Le musée ouvre à 9 h 30 et ferme à 18 h 00 tous les jours sauf le lundi. Les billets coûtent 14 €, et les enfants de moins de 12 ans entrent gratuitement. La dernière entrée a lieu une heure avant la fermeture.
394 tokens in, 110 out (25 of them reasoning) · 5.0 s · $0.0013 · 1 message on Pro · answered by moonshotai/kimi-k3 via Wafer ·
Claude Sonnet 5
Passed: Back-translation chrF 0.90 (pass at 0.4).
Le musée ouvre à 9h30 et ferme à 18h00 tous les jours sauf le lundi. Les billets coûtent 14 €, et les enfants de moins de 12 ans entrent gratuitement. La dernière entrée se fait une heure avant la fermeture.
397 tokens in, 96 out · 2.6 s · $0.0018 · 1 message on Pro · answered by anthropic/claude-sonnet-5 via Anthropic ·
Claude Sonnet 5.5
Passed: Back-translation chrF 0.84 (pass at 0.4).
Le musée ouvre à 9 h 30 et ferme à 18 h tous les jours sauf le lundi. Les billets coûtent 14 €, et les enfants de moins de 12 ans bénéficient de l'entrée gratuite. La dernière entrée a lieu une heure avant la fermeture.
399 tokens in, 105 out · 1.4 s · $0.0018 · 1 message on Pro · answered by anthropic/claude-sonnet-5.5 via Anthropic ·
DeepSeek V4 Pro
Passed: Back-translation chrF 0.89 (pass at 0.4).
Le musée ouvre à 9 h 30 et ferme à 18 h tous les jours sauf le lundi. Les billets coûtent 14 € et les enfants de moins de 12 ans entrent gratuitement. La dernière entrée a lieu une heure avant la fermeture.
307 tokens in, 729 out (663 of them reasoning) · 8.4 s · $0.0030 · 1 message on Pro · answered by deepseek/deepseek-v4-pro-0813 via Wafer ·
GPT-6 Astra
Passed: Back-translation chrF 0.80 (pass at 0.4).
--- Le musée ouvre à 9 h 30 et ferme à 18 h 00 tous les jours sauf le lundi. Les billets coûtent 14 €, et l’entrée est gratuite pour les enfants de moins de 12 ans. La dernière entrée se fait une heure avant la fermeture.
307 tokens in, 62 out · 1.6 s · $0.0031 · 1 message on Pro · answered by openai/gpt-6-astra via OpenAI ·
Grok 4.7
Passed: Back-translation chrF 0.89 (pass at 0.4).
Le musée ouvre à 9 h 30 et ferme à 18 h tous les jours sauf le lundi. Les billets coûtent 14 €, et les enfants de moins de 12 ans entrent gratuitement. La dernière entrée a lieu une heure avant la fermeture.
1,544 tokens in, 612 out (551 of them reasoning) · 11.4 s · $0.0050 · 1 message on Pro · answered by x-ai/grok-4.7 via xAI ·
Gemini 3.1 Pro
Passed: Back-translation chrF 0.89 (pass at 0.4).
Le musée ouvre à 9 h 30 et ferme à 18 h 00 tous les jours sauf le lundi. Les billets coûtent 14 €, et les enfants de moins de 12 ans entrent gratuitement. La dernière entrée se fait une heure avant la fermeture.
322 tokens in, 789 out (729 of them reasoning) · 6.7 s · $0.0051 · 1 message on Pro · answered by google/gemini-3.1-pro-preview via Google AI Studio ·
Mistral Large 4
Passed: Back-translation chrF 0.83 (pass at 0.4).
Le musée ouvre à 9 h 30 et ferme à 18 h tous les jours sauf le lundi. Les billets coûtent 14 €, et les enfants de moins de 12 ans entrent gratuitement. La dernière entrée est une heure avant la fermeture.
310 tokens in, 2,489 out (2,197 of them reasoning) · 32.7 s · $0.0054 · 1 message on Pro · answered by mistralai/mistral-large-4-0 via Mistral ·
Claude Opus 5.5
Passed: Back-translation chrF 0.81 (pass at 0.4).
Le musée ouvre à 9 h 30 et ferme à 18 h 00 tous les jours sauf le lundi. Les billets coûtent 14 €, et l'entrée est gratuite pour les enfants de moins de 12 ans. La dernière entrée a lieu une heure avant la fermeture.
399 tokens in, 199 out (94 of them reasoning) · 2.9 s · $0.0056 · 1 message on Pro · answered by anthropic/claude-opus-5.5 via Google ·
Claude Fable 5.1
Passed: Back-translation chrF 0.80 (pass at 0.4).
Le musée ouvre à 9 h 30 et ferme à 18 h 00 tous les jours sauf le lundi. Les billets coûtent 14 €, et l'entrée est gratuite pour les enfants de moins de 12 ans. La dernière entrée a lieu une heure avant la fermeture.
399 tokens in, 105 out · 1.9 s · $0.0092 · 1 message on Pro · answered by anthropic/claude-fable-5.1 via Google ·
More AI translator test inputs
The other AI translator test inputs, each with every model's reply, and the results across all five.
Questions
Which AI does best on “Museum opening hours into French”?
All 19 models passed this AI translator test input's check (back-translation). The cheapest reply that passed was GPT-6 Luna's, at $0.000030; the fastest, GLM 5.3's in 0.6 s. The dearest reply, Claude Fable 5.1's, cost 307 times as much ($0.0092).
What does a reply to “Museum opening hours into French” cost?
Through the models' APIs, what OpenRouter charged us ran from $0.000030 (GPT-6 Luna) to $0.0092 (Claude Fable 5.1) for this test input. In llmwise you don't pay by the token: a reply like these counts as one message on Pro, whichever model answers.
Claude, GPT, Gemini, DeepSeek, Grok, Kimi, GLM, and Mistral, in one chat.
See what a message costs before you send it. Free is 5 messages to try; sign in with an email link, no password or card.