Models
Comparador de precios
ES

Vectara HHEM-2.3

82 modelos con valor. Líder: GPT-5.4 nano con 3,1 %.

Ficha del benchmark
TareaZusammenfassung - Treue zur Vorlage
MétricaAnteil der Zusammenfassungen mit mindestens einer Aussage, die im Quelldokument nicht steht
Dirección↓ menor es mejor
LimitaciónNur Englisch, und die Antwortrate gehoert zur Zahl: wer ein Drittel der Dokumente verweigert, halluziniert auf dem Rest seltener. Gemessen wird Treue zur Vorlage, nicht Nuetzlichkeit - ein Modell, das abschreibt, gewinnt.
Fecha11 may 2026
Fuentegithub.com
LicenciaApache-2.0 — Vectara Hallucination Leaderboard

Clasificación (82)

ModeloPosiciónValorTasa de respuestaDesarrolladorProcesamiento en la UE: EntradaUE entradaProcesamiento en la UE: SalidaUE salidatodos los proveedores: Entradatodos entradatodos los proveedores: Salidatodos salidaPesos abiertosMemoria GPU (4 bits, estimada)Memoria GPU
GPT-5.4 nano13,1 %100 %OpenAI––0,09 €0,56 €– no–
Gemini 2.5 Flash-Lite23,3 %99,5 %Google––0,045 €0,18 €– no–
Phi-433,7 %80,7 %Microsoft––0,063 €0,13 €✓ sídesde 13 GB
Llama 3.3 70B44,1 %99,5 %Meta0,45 €0,65 €0,09 €0,29 €✓ sídesde 43 GB
Gemma 3 12B54,4 %97,4 %Google––0,045 €0,13 €✓ sídesde 11 GB
Mistral Large 2.164,5 %99,9 %Mistral AI––––✓ sídesde 72 GB
Qwen3 8B74,8 %99,9 %Alibaba Cloud––––✓ sídesde 9 GB
Mistral Small 3 24B85,1 %97,9 %Mistral AI––0,045 €0,072 €✓ sídesde 17 GB
Nova 2 Lite85,1 %99,6 %Amazon0,34 €2,82 €0,15 €1,23 €– no–
Nova Pro85,1 %99,3 %Amazon0,82 €3,29 €0,36 €1,43 €– no–
Gemma 4 26B A4B115,2 %99,8 %Google0,11 €0,27 €0,063 €0,30 €––
Granite 4.0 H Small115,2 %100 %IBM––––✓ sídesde 22 GB
Qwen3-14B135,4 %99,9 %Alibaba Cloud0,18 €0,90 €0,11 €0,21 €✓ sídesde 13 GB
DeepSeek V3.1145,5 %94,5 %DeepSeek––0,22 €0,85 €✓ sídesde 374 GB
GPT-5.4 mini145,5 %100 %OpenAI0,74 €4,43 €0,34 €2,02 €– no–
Nova Micro145,5 %100 %Amazon0,036 €0,14 €0,031 €0,13 €– no–
GPT-4.1175,6 %99,9 %OpenAI1,97 €7,87 €0,90 €3,58 €– no–
GPT-4.1-2025-04-14175,6 %99,9 %OpenAI0,99 €3,94 €0,90 €3,58 €– no–
Qwen3-32B195,9 %99,9 %qwen-alibaba0,28 €0,28 €0,072 €0,25 €✓ sídesde 23 GB
DeepSeek-V3206,1 %97,5 %DeepSeek––0,29 €0,80 €✓ sídesde 381 GB
Nova Lite206,1 %99,9 %Amazon0,062 €0,25 €0,054 €0,21 €– no–
deepseek-v3.2226,3 %92,6 %DeepSeek0,35 €0,58 €0,23 €0,34 €✓ sídesde 381 GB
Gemma 3 4B236,4 %67,3 %Google––0,018 €0,036 €✓ sídesde 7 GB
GPT-6 sol246,5 %100 %OpenAI2,15 €10,75 €0,90 €4,48 €– no–
Gemini 2.5 Pro257 %99,1 %Google1,34 €8,94 €0,56 €4,48 €– no–
GPT-5.4257 %99,9 %OpenAI2,60 €13,87 €1,12 €6,72 €– no–
Gemma 3 27B277,4 %98,8 %Google0,089 €0,27 €0,072 €0,14 €✓ sídesde 20 GB
Gemma 4 31B277,4 %92,6 %Google0,09 €0,27 €0,09 €0,27 €✓ sídesde 22 GB
Llama 4 Scout 17B-16E297,7 %99 %Meta––0,09 €0,27 €✓ sídesde 64 GB
Gemini 2.5 Flash307,8 %99 %Google0,27 €2,24 €0,13 €1,12 €– no–
Gemini 3.1 Flash-Lite318,2 %99,6 %Google0,24 €1,46 €0,11 €0,67 €– no–
Llama 4 Maverick318,2 %100 %Meta––0,16 €0,52 €✓ sídesde 225 GB
GPT-5.4 Pro338,3 %100 %OpenAI––13,43 €80,61 €– no–
DeepSeek V4 Pro348,6 %97,2 %DeepSeek0,90 €1,79 €0,90 €1,79 €✓ sídesde 884 GB
MiniMax M2.5359,1 %98,2 %MiniMax0,31 €1,25 €0,13 €0,54 €✓ sídesde 130 GB
GLM 4.7 Flash369,3 %91,6 %Z.ai0,072 €0,43 €0,031 €0,18 €✓ sídesde 21 GB
GPT-5.5369,3 %100 %OpenAI4,93 €29,56 €2,24 €13,43 €– no–
Aya Expanse 8B389,5 %77,5 %–––0,45 €1,34 €––
GLM 4.6389,5 %94,5 %Z.ai––0,39 €1,57 €✓ sídesde 201 GB
GPT-4o409,6 %93,8 %OpenAI2,39 €9,55 €1,12 €4,48 €– no–
GPT-4o-2024-08-06409,6 %93,8 %OpenAI1,23 €4,93 €1,12 €4,48 €– no–
NVIDIA Nemotron 3 Nano 30B409,6 %99,6 %NVIDIA0,054 €0,21 €0,027 €0,11 €✓ sídesde 22 GB
Claude Haiku 4.5439,8 %99,5 %Anthropic0,89 €4,47 €0,45 €2,24 €– no–
GLM-54410,1 %99,7 %Z.ai1,15 €3,68 €0,45 €1,43 €––
Claude Sonnet 4 (retired, except on Claude Models on Google Cloud (Google managed) and Bedrock)4510,3 %98,6 %Anthropic––1,34 €6,72 €– no–
Gemini 3.1 Pro (Vorschau)4610,4 %99,4 %Google––0,90 €5,37 €– no–
GPT-5 nano4710,5 %100 %OpenAI0,049 €0,39 €0,022 €0,18 €– no–
Qwen3.5-35B-A3B4710,5 %99,8 %Alibaba Cloud––0,13 €0,90 €✓ sídesde 24 GB
Claude Sonnet 4.64910,6 %99,9 %Anthropic2,87 €14,31 €1,34 €6,72 €– no–
GPT-5.25010,8 %100 %OpenAI1,72 €13,79 €0,78 €6,27 €– no–
Kimi K2.65010,8 %99,7 %Moonshot AI0,43 €2,67 €0,35 €1,61 €✓ sídesde 569 GB
Aya Expanse 32B5210,9 %99,8 %–––0,45 €1,34 €––
Opus 4.55210,9 %98,7 %Anthropic4,77 €23,85 €2,24 €11,20 €– no–
Qwen3.5-122B-A10B5411,2 %99,8 %Alibaba Cloud0,22 €1,57 €0,22 €1,57 €✓ sídesde 73 GB
GLM 4.75511,7 %99,8 %Z.ai––0,27 €0,99 €✓ sídesde 201 GB
Claude Opus 4.1 (retired, except on Claude Models on Google Cloud (Google managed) and Bedrock)5611,8 %92,4 %Anthropic––6,72 €33,59 €– no–
Minimax M2.15611,8 %98,5 %MiniMax0,32 €1,29 €0,13 €0,54 €✓ sídesde 130 GB
Claude Opus 4 (retired, except on Claude Models on Google Cloud (Google managed))5812 %91 %Anthropic––6,72 €33,59 €– no–
Opus 4.75812 %98 %Anthropic4,88 €24,40 €2,24 €11,20 €– no–
Sonnet 4.55812 %95,6 %Anthropic2,68 €13,42 €1,34 €6,72 €– no–
Gemini 4 Argon6112,1 %99,1 %Google2,02 €10,10 €0,90 €4,48 €– no–
gpt-5.16112,1 %100 %OpenAI1,23 €9,84 €0,56 €4,48 €– no–
Qwen3.5-27B6112,1 %99,8 %Alibaba Cloud––0,23 €2,33 €✓ sídesde 20 GB
Opus 4.66412,2 %99,8 %Anthropic4,77 €23,84 €2,24 €11,20 €– no–
Mercury 26512,3 %100 %inception––0,28 €0,84 €– no–
GPT-5.6 sol6612,4 %99,1 %OpenAI3,94 €19,70 €1,79 €8,96 €– no–
GPT-5 mini6712,9 %99,9 %OpenAI0,25 €1,97 €0,11 €0,90 €– no–
MiniMax M2.76712,9 %99,4 %MiniMax––0,27 €1,07 €✓ sídesde 130 GB
Gemini 3 Flash Preview6913,5 %99,8 %Google––0,22 €1,34 €– no–
gpt-oss-120b7014,2 %99,9 %OpenAI0,026 €0,12 €0,026 €0,12 €✓ sídesde 69 GB
Kimi K2.5 (Retiring)7014,2 %92,2 %Moonshot AI0,58 €3,22 €0,27 €1,34 €✓ sídesde 554 GB
Mistral Large 37214,5 %98,8 %Mistral AI0,55 €1,65 €0,22 €0,67 €✓ sídesde 376 GB
gpt-57315,1 %99,9 %OpenAI0,62 €4,93 €0,56 €4,48 €– no–
GPT-5 2025-08-077315,1 %99,9 %OpenAI––0,56 €4,48 €– no–
Grok 4.1 Fast Non-Reasoning7517,8 %98,5 %xAI––0,18 €0,45 €– no–
Kimi K2 Instruct 09057617,9 %98,6 %Moonshot AI––0,51 €2,06 €✓ sídesde 554 GB
o4-mini 2025-04-167718,6 %99,2 %OpenAI0,54 €2,17 €0,49 €1,97 €– no–
Grok 4.1 Fast Reasoning7819,2 %99,7 %xAI––0,18 €0,45 €– no–
Ministral 3 14B7919,4 %99,6 %Mistral AI0,21 €0,21 €0,09 €0,09 €✓ sídesde 12 GB
Ministral 3 8B8021,7 %99,1 %Mistral AI0,16 €0,16 €0,063 €0,063 €✓ sídesde 9 GB
o3-pro8123,3 %100 %OpenAI––8,96 €35,83 €– no–
Ministral 3 3B8224,2 %74,3 %Mistral AI0,11 €0,11 €0,045 €0,045 €✓ sídesde 7 GB

Valores iguales = misma posición. Al filtrar, la posición sigue siendo la de la lista completa. La memoria GPU «desde …» es un mínimo (parámetros × 0,55 GB + 4 GB). Precios: € por 1 M de tokens. Fuente: páginas de precios de los proveedores, leídas y revisadas por searchit. A 7 nov 2026.

Precio y rendimiento

0 % 10 % 20 % 30 % 40 % 0,01 € 0,10 € 1,00 € 10,00 € 100,00 € Precio combinado de la oferta más barata, € por millón de tokens (log) GPT-5.4 nano · 0,21 € · 3,1 % Gemini 2.5 Flash-Lite · 0,078 € · 3,3 % Phi-4 · 0,078 € · 3,7 % Llama 3.3 70B · 0,14 € · 4,1 % Gemma 3 12B · 0,067 € · 4,4 % Mistral Small 3 24B · 0,052 € · 5,1 % Nova 2 Lite · 0,42 € · 5,1 % Nova Pro · 0,63 € · 5,1 % Gemma 4 26B A4B · 0,12 € · 5,2 % Qwen3-14B · 0,13 € · 5,4 % DeepSeek V3.1 · 0,38 € · 5,5 % GPT-5.4 mini · 0,76 € · 5,5 % Nova Micro · 0,055 € · 5,5 % GPT-4.1 · 1,57 € · 5,6 % GPT-4.1-2025-04-14 · 1,57 € · 5,6 % Qwen3-32B · 0,12 € · 5,9 % DeepSeek-V3 · 0,41 € · 6,1 % Nova Lite · 0,094 € · 6,1 % deepseek-v3.2 · 0,26 € · 6,3 % Gemma 3 4B · 0,022 € · 6,4 % GPT-6 sol · 1,79 € · 6,5 % Gemini 2.5 Pro · 1,54 € · 7 % GPT-5.4 · 2,52 € · 7 % Gemma 3 27B · 0,09 € · 7,4 % Gemma 4 31B · 0,13 € · 7,4 % Llama 4 Scout 17B-16E · 0,13 € · 7,7 % Gemini 2.5 Flash · 0,38 € · 7,8 % Gemini 3.1 Flash-Lite · 0,25 € · 8,2 % Llama 4 Maverick · 0,25 € · 8,2 % GPT-5.4 Pro · 30,23 € · 8,3 % DeepSeek V4 Pro · 1,12 € · 8,6 % MiniMax M2.5 · 0,24 € · 9,1 % GLM 4.7 Flash · 0,068 € · 9,3 % GPT-5.5 · 5,04 € · 9,3 % Aya Expanse 8B · 0,67 € · 9,5 % GLM 4.6 · 0,68 € · 9,5 % GPT-4o · 1,96 € · 9,6 % GPT-4o-2024-08-06 · 1,96 € · 9,6 % NVIDIA Nemotron 3 Nano 30B · 0,047 € · 9,6 % Claude Haiku 4.5 · 0,90 € · 9,8 % GLM-5 · 0,69 € · 10,1 % Claude Sonnet 4 (retired, except on Claude Models on Google Cloud (Google managed) and Bedrock) · 2,69 € · 10,3 % Gemini 3.1 Pro (Vorschau) · 2,02 € · 10,4 % GPT-5 nano · 0,062 € · 10,5 % Qwen3.5-35B-A3B · 0,32 € · 10,5 % Claude Sonnet 4.6 · 2,69 € · 10,6 % GPT-5.2 · 2,16 € · 10,8 % Kimi K2.6 · 0,67 € · 10,8 % Aya Expanse 32B · 0,67 € · 10,9 % Opus 4.5 · 4,48 € · 10,9 % Qwen3.5-122B-A10B · 0,56 € · 11,2 % GLM 4.7 · 0,45 € · 11,7 % Claude Opus 4.1 (retired, except on Claude Models on Google Cloud (Google managed) and Bedrock) · 13,43 € · 11,8 % Minimax M2.1 · 0,24 € · 11,8 % Claude Opus 4 (retired, except on Claude Models on Google Cloud (Google managed)) · 13,43 € · 12 % Opus 4.7 · 4,48 € · 12 % Sonnet 4.5 · 2,69 € · 12 % Gemini 4 Argon · 1,79 € · 12,1 % gpt-5.1 · 1,54 € · 12,1 % Qwen3.5-27B · 0,76 € · 12,1 % Opus 4.6 · 4,48 € · 12,2 % Mercury 2 · 0,42 € · 12,3 % GPT-5.6 sol · 3,58 € · 12,4 % GPT-5 mini · 0,31 € · 12,9 % MiniMax M2.7 · 0,47 € · 12,9 % Gemini 3 Flash Preview · 0,50 € · 13,5 % gpt-oss-120b · 0,049 € · 14,2 % Kimi K2.5 (Retiring) · 0,54 € · 14,2 % Mistral Large 3 · 0,34 € · 14,5 % gpt-5 · 1,54 € · 15,1 % GPT-5 2025-08-07 · 1,54 € · 15,1 % Grok 4.1 Fast Non-Reasoning · 0,25 € · 17,8 % Kimi K2 Instruct 0905 · 0,90 € · 17,9 % o4-mini 2025-04-16 · 0,86 € · 18,6 % Grok 4.1 Fast Reasoning · 0,25 € · 19,2 % Ministral 3 14B · 0,09 € · 19,4 % Ministral 3 8B · 0,063 € · 21,7 % o3-pro · 15,67 € · 23,3 % Ministral 3 3B · 0,045 € · 24,2 %
79 modelos con precio: en vertical el valor (arriba = mejor), en horizontal el precio mixto de la oferta más barata. Los puntos rellenos también están disponibles con procesamiento en la UE.

Valores: Vectara HHEM-2.3, Apache-2.0 — Vectara Hallucination Leaderboard. Tomados sin cambios de la fuente.