Tested prompt · AI email writer
A hotel booking change, in Spanish: every AI model's reply, tested
We ran this hard AI email writer test input on all 19 models in llmwise, the way the tool runs it, and checked every reply the same way. Here's each one as it came, with whether it passed, what it cost and how long it took.
Based on 19 of our test runs on , through OpenRouter with the tool's own instructions and the app's settings. Updated .
Short answer
All 19 models passed this AI email writer test input's check (key facts). The cheapest reply that passed was GPT-6 Luna's, at $0.000046; the fastest, GLM 5.3's in 1.0 s. The dearest reply, Claude Fable 5.1's, cost 444 times as much ($0.0204).
The prompt, as sent, and its check
Checked by key facts, the same way for every model.
A hotel booking change, in Spanish (hard)
Write this email for me, ready to send. Start with a line that starts "Subject:", and put anything you don't know in [brackets]. Make the tone formal and polite. Write the email in Spanish. --- Email the Hotel Mirador in Seville to move my booking, reference HM-44721, from 14–16 May to 21–23 May: same room type, still 2 guests. Ask them to confirm the new dates and any difference in price.
Sent with the AI email writer's own instructions as the system prompt, as a free run of the tool sends them.
The answer must state “hm-44721”, “14”, “21”, “23”, “mayo”, “estimados”.
How the AI email writer's test inputs are scored, with every model's results on all five.
Every model's result
All 19 models on this test input, in catalog order.
| Model | Result | Cost | Time | Reply |
|---|---|---|---|---|
| Claude Fable 5.1Anthropic | Passed: Stated all 6 facts with the section. | $0.0204 | 7.0 s | 278 tokens |
| Claude Opus 5.5Anthropic | Passed: Stated all 6 facts with the section. | $0.0180 | 7.7 s | 233 tokens |
| Claude Sonnet 5.5Anthropic | Passed: Stated all 6 facts with the section. | $0.0041 | 2.4 s | 281 tokens |
| Claude Sonnet 5Anthropic | Passed: Stated all 6 facts with the section. | $0.0037 | 4.4 s | 263 tokens |
| Claude Haiku 5.5Anthropic | Passed: Stated all 6 facts with the section. | $0.00021 | 2.0 s | 291 tokens |
| Claude Haiku 4.5Anthropic | Passed: Stated all 6 facts with the section. | $0.0013 | 2.3 s | 179 tokens |
| GPT-6 AstraOpenAI | Passed: Stated all 6 facts with the section. | $0.0049 | 4.0 s | 117 tokens |
| GPT-6.1 SolOpenAI | Passed: Stated all 6 facts with the section. | $0.00099 | 2.1 s | 121 tokens |
| GPT-6 SolOpenAI | Passed: Stated all 6 facts with the section. | $0.0013 | 3.0 s | 106 tokens |
| GPT-6 LunaOpenAI | Passed: Stated all 6 facts with the section. | $0.000046 | 1.3 s | 106 tokens |
| Gemini 3.1 Pro (preview)Google | Passed: Stated all 6 facts with the section. | $0.0077 | 10.4 s | 169 tokens |
| Gemini 3.8 FlashGoogle | Passed: Stated all 6 facts with the section. | $0.00042 | 2.1 s | 143 tokens |
| DeepSeek V4.1 FlashDeepSeek | Passed: Stated all 6 facts with the section. | $0.0019 | 5.2 s | 147 tokens |
| DeepSeek V4 ProDeepSeek | Passed: Stated all 6 facts with the section. | $0.0022 | 3.1 s | 130 tokens |
| Grok 4.7xAI | Passed: Stated all 6 facts with the section. | $0.0120 | 23.4 s | 129 tokens |
| Kimi K3Moonshot | Passed: Stated all 6 facts with the section. | $0.0025 | 5.3 s | 232 tokens |
| GLM 5.3Z.ai | Passed: Stated all 6 facts with the section. | $0.00087 | 1.0 s | 174 tokens |
| GLM 5.3 FlashZ.ai | Passed: Stated all 6 facts with the section. | $0.00015 | 1.9 s | 174 tokens |
| Mistral Large 4Mistral | Passed: Stated all 6 facts with the section. | $0.0071 | 45.1 s | 274 tokens |
Cost: what OpenRouter charged us for the reply. Time: from sending to the whole reply. Reply: its length in tokens, thinking not counted. In llmwise you pay per message, not per token: each of these replies counted as one message on Pro.
Every reply
Every reply passed: here they are from the cheapest up.
GPT-6 Luna
Passed: Stated all 6 facts with the section.
Subject: Solicitud de cambio de fechas de reserva HM-44721 Estimado equipo del Hotel Mirador: Les escribo para solicitar el cambio de fechas de mi reserva, referencia HM-44721, del 14–16 de mayo al 21–23 de mayo. Quisiera mantener el mismo tipo de habitación y la reserva para 2 huéspedes. Les agradecería que confirmaran si es posible realizar el cambio e indicaran cualquier diferencia de precio. Atentamente, [Su nombre]
387 tokens in, 106 out · 1.3 s · $0.0000 · 1 message on Pro · answered by openai/gpt-6-luna via OpenAI ·
GLM 5.3 Flash
Passed: Stated all 6 facts with the section.
Subject: Solicitud de cambio de fechas de reserva - Ref. HM-44721 Estimados señores del Hotel Mirador: Me dirijo a ustedes con el objeto de solicitar un cambio en mi reserva, con número de referencia HM-44721. Deseo trasladar mi estancia del 14 al 16 de mayo al 21 al 23 de mayo, manteniendo el mismo tipo de habitación y el mismo número de 2 huéspedes. Les agradecería que me confirmaran la disponibilidad para las nuevas fechas, así como cualquier diferencia en el precio que pudiera surgir como consecuencia del cambio. Agradezco de antemano su atención y quedo a la espera de su confirmación. Atentamente, [su nombre] [teléfono / correo electrónico]
401 tokens in, 174 out · 1.9 s · $0.0001 · 1 message on Pro · answered by z-ai/glm-5.3-flash via Friendli ·
Claude Haiku 5.5
Passed: Stated all 6 facts with the section.
Subject: Solicitud de cambio de fechas de reserva HM-44721 Estimado equipo del Hotel Mirador: Me dirijo a ustedes para solicitar el cambio de fechas de mi reserva, con número de referencia HM-44721, que actualmente está prevista del 14 al 16 de mayo. Le agradecería que modificaran la reserva para las fechas del 21 al 23 de mayo, manteniendo el mismo tipo de habitación y el mismo número de huéspedes (2). Les ruego que me confirmen las nuevas fechas y que me indiquen si existe alguna diferencia de precio con respecto a la reserva original. Quedo a la espera de su respuesta y les agradezco de antemano su atención. Atentamente, [su nombre] [su número de teléfono] [su correo electrónico]
517 tokens in, 291 out · 2.0 s · $0.0002 · 1 message on Pro · answered by anthropic/claude-haiku-5.5 via Anthropic ·
Gemini 3.8 Flash
Passed: Stated all 6 facts with the section.
Subject: Modificación de reserva - Referencia HM-44721 Estimado equipo de Hotel Mirador: Me pongo en contacto con ustedes para solicitar el cambio de fechas de mi reserva con referencia HM-44721. Deseo modificar mi estancia, prevista inicialmente del 14 al 16 de mayo, para las nuevas fechas del 21 al 23 de mayo. Mantendríamos el mismo tipo de habitación para 2 huéspedes. Les agradecería que me confirmaran la disponibilidad para estas nuevas fechas, así como cualquier diferencia de precio aplicable. Quedo a la espera de su respuesta. Atentamente, [Su nombre]
412 tokens in, 143 out · 2.1 s · $0.0004 · 1 message on Pro · answered by google/gemini-3.8-flash via Google AI Studio ·
GLM 5.3
Passed: Stated all 6 facts with the section.
Subject: Solicitud de cambio de fechas en la reserva HM-44721 Estimados señores del Hotel Mirador: Me dirijo a ustedes para solicitar la modificación de las fechas de mi reserva, con referencia HM-44721. Me gustaría trasladar mi estancia del 14 al 16 de mayo a las nuevas fechas del 21 al 23 de mayo. Les agradecería que mantuvieran el mismo tipo de habitación y el mismo número de huéspedes, que sigue siendo de 2 personas. Les ruego que me confirmen las nuevas fechas, así como cualquier diferencia en el precio que pudiera surgir de este cambio. Agradezco de antemano su atención y quedo a la espera de su respuesta. Atentamente, [your name]
401 tokens in, 174 out · 1.0 s · $0.0009 · 1 message on Pro · answered by z-ai/glm-5.3 via Friendli ·
GPT-6.1 Sol
Passed: Stated all 6 facts with the section.
Subject: Solicitud de cambio de fechas de la reserva HM-44721 Estimado equipo del Hotel Mirador en Sevilla: Les escribo para solicitar el cambio de fechas de mi reserva, con referencia HM-44721, del 14–16 de mayo al 21–23 de mayo. Deseo mantener el mismo tipo de habitación y la reserva para 2 huéspedes. Les agradecería que confirmaran la disponibilidad y las nuevas fechas, así como cualquier diferencia de precio que pudiera aplicarse. Muchas gracias por su atención y ayuda. Atentamente, [su nombre]
387 tokens in, 121 out · 2.1 s · $0.0010 · 1 message on Pro · answered by openai/gpt-6.1-sol via OpenAI ·
Claude Haiku 4.5
Passed: Stated all 6 facts with the section.
Subject: Solicitud de cambio de fechas de reserva - Referencia HM-44721 Estimados, Le escribo para solicitar un cambio de fechas en mi reserva en el Hotel Mirador. Quisiera modificar mi booking del 14 al 16 de mayo al 21 al 23 de mayo, manteniendo el mismo tipo de habitación para 2 huéspedes. Mi número de referencia es HM-44721. Le agradecería que me confirmen la disponibilidad para las nuevas fechas y me indiquen si existe alguna diferencia de precio respecto a la reserva original. Quedo atento a sus noticias. Atentamente, [your name]
410 tokens in, 179 out · 2.3 s · $0.0013 · 1 message on Pro · answered by anthropic/claude-haiku-4.5 via Anthropic ·
GPT-6 Sol
Passed: Stated all 6 facts with the section.
Subject: Solicitud de cambio de reserva HM-44721 Estimado equipo del Hotel Mirador: Les escribo para solicitar un cambio en mi reserva HM-44721 en su hotel de Sevilla. Quisiera trasladarla del 14–16 de mayo al 21–23 de mayo, manteniendo el mismo tipo de habitación para 2 huéspedes. Les agradecería que confirmaran las nuevas fechas y me informaran de cualquier diferencia de precio. Atentamente, [Su nombre]
387 tokens in, 191 out (85 of them reasoning) · 3.0 s · $0.0013 · 1 message on Pro · answered by openai/gpt-6-sol via OpenAI ·
DeepSeek V4.1 Flash
Passed: Stated all 6 facts with the section.
Subject: Solicitud de cambio de fechas – Reserva HM-44721 Estimados señores: Me dirijo al Hotel Mirador en Sevilla para solicitar el cambio de las fechas de mi reserva, con referencia HM-44721, del 14 al 16 de mayo al 21 al 23 de mayo. La reserva es para el mismo tipo de habitación y sigue siendo para 2 huéspedes. Les agradecería que me confirmaran las nuevas fechas y me indicaran si hay alguna diferencia de precio. Quedo a la espera de su respuesta. Atentamente, [Su nombre] [Su teléfono o correo electrónico]
419 tokens in, 1,512 out (1,365 of them reasoning) · 5.2 s · $0.0019 · 1 message on Pro · answered by deepseek/deepseek-v4.1-flash via Together ·
DeepSeek V4 Pro
Passed: Stated all 6 facts with the section.
Subject: Solicitud de cambio de fechas de reserva HM-44721 Estimados señores del Hotel Mirador: Les escribo para solicitar un cambio en las fechas de mi reserva con referencia HM-44721. Actualmente la reserva es del 14 al 16 de mayo y deseo trasladarla al 21 al 23 de mayo, manteniendo el mismo tipo de habitación y para 2 huéspedes. Les agradecería que me confirmaran las nuevas fechas y me indicaran si existe alguna diferencia en el precio. Atentamente, [Su nombre]
393 tokens in, 502 out (372 of them reasoning) · 3.1 s · $0.0022 · 1 message on Pro · answered by deepseek/deepseek-v4-pro-0813 via Wafer ·
Kimi K3
Passed: Stated all 6 facts with the section.
Subject: Cambio de fechas de reserva – referencia HM-44721 Estimado equipo del Hotel Mirador: Les escribo para solicitar el cambio de fechas de mi reserva en su establecimiento, con referencia HM-44721. Actualmente la estancia está prevista del 14 al 16 de mayo, y desearía trasladarla al periodo del 21 al 23 de mayo. Les agradecería que mantuvieran el mismo tipo de habitación, así como el número de huéspedes, que sigue siendo de 2 personas. Asimismo, les ruego que me confirmen las nuevas fechas y, en su caso, cualquier diferencia de precio respecto a la reserva original. Quedo a la espera de su respuesta y les agradezco de antemano su atención. Atentamente, [Nombre] [Teléfono de contacto] [Dirección de correo electrónico]
474 tokens in, 252 out (20 of them reasoning) · 5.3 s · $0.0025 · 1 message on Pro · answered by moonshotai/kimi-k3 via Wafer ·
Claude Sonnet 5
Passed: Stated all 6 facts with the section.
Subject: Solicitud de cambio de fechas - Reserva HM-44721 Estimados señores del Hotel Mirador: Les escribo para solicitar un cambio de fechas en mi reserva con referencia HM-44721. Actualmente la reserva está registrada del 14 al 16 de mayo, y me gustaría modificarla al 21 al 23 de mayo, manteniendo el mismo tipo de habitación y el número de huéspedes, que sigue siendo 2. Les agradecería que confirmaran la disponibilidad para las nuevas fechas, así como cualquier posible diferencia de precio derivada de este cambio. Quedo a la espera de su respuesta y les agradezco de antemano su atención. Atentamente, [su nombre]
515 tokens in, 263 out · 4.4 s · $0.0037 · 1 message on Pro · answered by anthropic/claude-sonnet-5 via Anthropic ·
Claude Sonnet 5.5
Passed: Stated all 6 facts with the section.
Subject: Solicitud de cambio de fechas de reserva HM-44721 Estimados señores del Hotel Mirador: Les escribo para solicitar el cambio de fechas de mi reserva, con referencia HM-44721. Actualmente está prevista del 14 al 16 de mayo, y desearía trasladarla del 21 al 23 de mayo. Mantendríamos el mismo tipo de habitación y seguiríamos siendo 2 huéspedes. Les agradecería que me confirmaran la disponibilidad para las nuevas fechas, así como cualquier diferencia de precio que pudiera aplicarse. Quedo a la espera de su respuesta. Muchas gracias de antemano por su amabilidad. Atentamente, [su nombre] [su teléfono o correo de contacto]
517 tokens in, 281 out · 2.4 s · $0.0041 · 1 message on Pro · answered by anthropic/claude-sonnet-5.5 via Anthropic ·
GPT-6 Astra
Passed: Stated all 6 facts with the section.
Subject: Solicitud de cambio de fechas de la reserva HM-44721 Estimado equipo del Hotel Mirador en Sevilla: Les escribo para solicitar el cambio de fechas de mi reserva, con referencia HM-44721, del 14–16 de mayo al 21–23 de mayo. Deseo mantener el mismo tipo de habitación y la ocupación de 2 huéspedes. Les agradecería que me confirmaran la disponibilidad para las nuevas fechas y cualquier diferencia de precio. Muchas gracias por su atención y ayuda. Atentamente, [su nombre]
387 tokens in, 117 out · 4.0 s · $0.0049 · 1 message on Pro · answered by openai/gpt-6-astra via OpenAI ·
Mistral Large 4
Passed: Stated all 6 facts with the section.
Subject: Cambio de fechas reserva HM-44721 Estimados señores del Hotel Mirador de Sevilla: Le escribo para solicitar el cambio de fechas de mi reserva con referencia HM-44721. Deseo trasladar mi estancia del 14 al 16 de mayo para las fechas del 21 al 23 de mayo, manteniendo el mismo tipo de habitación para 2 huéspedes. Le agradecería que me confirmara las nuevas fechas y cualquier diferencia en el precio. Atentamente, [Su nombre]
393 tokens in, 3,274 out (3,000 of them reasoning) · 45.1 s · $0.0071 · 1 message on Pro · answered by mistralai/mistral-large-4-0 via Mistral ·
Gemini 3.1 Pro
Passed: Stated all 6 facts with the section.
Subject: Cambio de fechas para la reserva HM-44721 Estimado equipo del Hotel Mirador, Les escribo para solicitar un cambio en mi reserva en su hotel en Sevilla. El motivo de este correo es modificar las fechas de mi estancia bajo el numero de referencia HM-44721. Originalmente, mi reserva es del 14 al 16 de mayo, y me gustaria moverla del 21 al 23 de mayo. Requiero el mismo tipo de habitacion y la reserva sigue siendo para 2 huespedes. Por favor, confirmenme si el cambio para estas nuevas fechas es posible y avisenme si existe alguna diferencia en el precio. Atentamente, [Su nombre] [Su numero de telefono]
412 tokens in, 1,212 out (1,043 of them reasoning) · 10.4 s · $0.0077 · 1 message on Pro · answered by google/gemini-3.1-pro-preview via Google AI Studio ·
Grok 4.7
Passed: Stated all 6 facts with the section.
Subject: Solicitud de cambio de fechas de la reserva HM-44721 Estimados señores del Hotel Mirador: Les escribo para solicitar el cambio de las fechas de mi reserva. El objeto de este mensaje es trasladar mi estancia en el Hotel Mirador, en Sevilla. La referencia de la reserva es HM-44721. Solicito pasar del 14–16 de mayo al 21–23 de mayo, manteniendo el mismo tipo de habitación y los mismos 2 huéspedes. Les ruego que confirmen las nuevas fechas y cualquier diferencia de precio. Atentamente, [su nombre]
1,623 tokens in, 1,742 out (1,613 of them reasoning) · 23.4 s · $0.0120 · 1 message on Pro · answered by x-ai/grok-4.7 via xAI ·
Claude Opus 5.5
Passed: Stated all 6 facts with the section.
Subject: Solicitud de cambio de fechas – Reserva HM-44721 Estimados señores del Hotel Mirador: Les escribo para solicitar el cambio de fechas de mi reserva con referencia HM-44721. Desearía trasladar mi estancia del 14–16 de mayo al 21–23 de mayo, con el mismo tipo de habitación y para 2 huéspedes. Les agradecería que me confirmaran las nuevas fechas, así como cualquier diferencia de precio que pudiera aplicarse. Quedo a la espera de su respuesta. Muchas gracias de antemano por su amable atención. Atentamente, [su nombre]
517 tokens in, 770 out (537 of them reasoning) · 7.7 s · $0.0180 · 1 message on Pro · answered by anthropic/claude-opus-5.5 via Google ·
Claude Fable 5.1
Passed: Stated all 6 facts with the section.
Subject: Solicitud de cambio de fechas – Reserva HM-44721 Estimado equipo del Hotel Mirador: Les escribo para solicitar el cambio de fechas de mi reserva con referencia HM-44721. Actualmente está confirmada del 14 al 16 de mayo y desearía trasladarla al 21 al 23 de mayo, manteniendo el mismo tipo de habitación y el mismo número de huéspedes (2 personas). Les agradecería que me confirmaran la disponibilidad para las nuevas fechas, así como cualquier diferencia de precio que pudiera aplicarse respecto a la reserva original. Quedo a su disposición para cualquier información adicional que necesiten. Atentamente, [su nombre] [su teléfono o correo electrónico]
517 tokens in, 278 out · 7.0 s · $0.0204 · 1 message on Pro · answered by anthropic/claude-fable-5.1 via Google ·
More AI email writer test inputs
The other AI email writer test inputs, each with every model's reply, and the results across all five.
Questions
Which AI does best on “A hotel booking change, in Spanish”?
All 19 models passed this AI email writer test input's check (key facts). The cheapest reply that passed was GPT-6 Luna's, at $0.000046; the fastest, GLM 5.3's in 1.0 s. The dearest reply, Claude Fable 5.1's, cost 444 times as much ($0.0204).
What does a reply to “A hotel booking change, in Spanish” cost?
Through the models' APIs, what OpenRouter charged us ran from $0.000046 (GPT-6 Luna) to $0.0204 (Claude Fable 5.1) for this test input. In llmwise you don't pay by the token: a reply like these counts as one message on Pro, whichever model answers.
Claude, GPT, Gemini, DeepSeek, Grok, Kimi, GLM, and Mistral, in one chat.
See what a message costs before you send it. Free is 5 messages to try; sign in with an email link, no password or card.