Benchmark reports
999 reports · Newest first · Page 7 / 40
Qwen3.8-27B-NVFP4
RadixArk/Qwen3.8-27B-NVFP4
RTX PRO 6000 Blackwell Server Edition · 96 GB
Text generation · NVFP4 · vllm
Qwen3.8-27B-NVFP4
RadixArk/Qwen3.8-27B-NVFP4
RTX PRO 6000 Blackwell Server Edition · 96 GB
Text generation · NVFP4 · vllm
Qwen3-0.6B-FP8
Qwen/Qwen3-0.6B-FP8
L4 · 24 GB
Text generation · FP8 · vllm
Qwen3-0.6B-FP8
Qwen/Qwen3-0.6B-FP8
L4 · 24 GB
Text generation · FP8 · vllm
Qwen3-0.6B-FP8
Qwen/Qwen3-0.6B-FP8
L4 · 24 GB
Text generation · FP8 · vllm
NVIDIA-Nemotron-Nano-12B-v2-VL-NVFP4-QAD
nvidia/NVIDIA-Nemotron-Nano-12B-v2-VL-NVFP4-QAD
RTX PRO 6000 Blackwell Server Edition · 96 GB
Text generation · NVFP4 · vllm
NVIDIA-Nemotron-Nano-12B-v2-VL-NVFP4-QAD
nvidia/NVIDIA-Nemotron-Nano-12B-v2-VL-NVFP4-QAD
RTX PRO 6000 Blackwell Server Edition · 96 GB
Text generation · NVFP4 · vllm
Qwen3-4B-AWQ
Qwen/Qwen3-4B-AWQ
T4 · 16 GB
Text generation · AWQ · vllm
NVIDIA-Nemotron-Nano-9B-v2-NVFP4
nvidia/NVIDIA-Nemotron-Nano-9B-v2-NVFP4
RTX PRO 6000 Blackwell Server Edition · 96 GB
Text generation · NVFP4 · vllm
Qwen3-1.7B-FP8
Qwen/Qwen3-1.7B-FP8
L4 · 24 GB
Text generation · FP8 · vllm
NVIDIA-Nemotron-Nano-9B-v2-NVFP4
nvidia/NVIDIA-Nemotron-Nano-9B-v2-NVFP4
RTX PRO 6000 Blackwell Server Edition · 96 GB
Text generation · NVFP4 · vllm
NVIDIA-Nemotron-Nano-9B-v2-NVFP4
nvidia/NVIDIA-Nemotron-Nano-9B-v2-NVFP4
RTX PRO 6000 Blackwell Server Edition · 96 GB
Text generation · NVFP4 · vllm
Qwen3-1.7B-FP8
Qwen/Qwen3-1.7B-FP8
L4 · 24 GB
Text generation · FP8 · vllm
Qwen3-1.7B-FP8
Qwen/Qwen3-1.7B-FP8
L4 · 24 GB
Text generation · FP8 · vllm
Qwen3-0.6B-GPTQ-Int8
Qwen/Qwen3-0.6B-GPTQ-Int8
T4 · 16 GB
Text generation · GPTQ · vllm
Llama-3.1-8B-Instruct-NVFP4
nvidia/Llama-3.1-8B-Instruct-NVFP4
RTX PRO 6000 Blackwell Server Edition · 96 GB
Text generation · NVFP4 · vllm
Llama-3.1-8B-Instruct-NVFP4
nvidia/Llama-3.1-8B-Instruct-NVFP4
RTX PRO 6000 Blackwell Server Edition · 96 GB
Text generation · NVFP4 · vllm
Llama-3.1-8B-Instruct-NVFP4
nvidia/Llama-3.1-8B-Instruct-NVFP4
RTX PRO 6000 Blackwell Server Edition · 96 GB
Text generation · NVFP4 · vllm
Qwen3-0.6B-FP8
Qwen/Qwen3-0.6B-FP8
L4 · 24 GB
Text generation · FP8 · vllm
Qwen3-8B-NVFP4
RedHatAI/Qwen3-8B-NVFP4
RTX PRO 6000 Blackwell Server Edition · 96 GB
Text generation · NVFP4 · vllm
Qwen3-0.6B-GPTQ-Int8
Qwen/Qwen3-0.6B-GPTQ-Int8
T4 · 16 GB
Text generation · GPTQ · vllm
Qwen3-0.6B-FP8
Qwen/Qwen3-0.6B-FP8
L4 · 24 GB
Text generation · FP8 · vllm
Qwen3-8B-NVFP4
RedHatAI/Qwen3-8B-NVFP4
RTX PRO 6000 Blackwell Server Edition · 96 GB
Text generation · NVFP4 · vllm
Qwen3-8B-NVFP4
RedHatAI/Qwen3-8B-NVFP4
RTX PRO 6000 Blackwell Server Edition · 96 GB
Text generation · NVFP4 · vllm
Qwen3-0.6B-FP8
Qwen/Qwen3-0.6B-FP8
L4 · 24 GB
Text generation · FP8 · vllm
Updated