Benchmark reports
999 reports · Newest first · Page 34 / 40
qwen3:0.6b
qwen3:0.6b
Apple M2 Max GPU (38-core) · 48 GB
Text generation · Ollama · vLLM
Qwen3-VL-2B-FP8
/root/.cache/modelscope/hub/models/Qwen/Qwen3-VL-2B-Instruct-FP8
RTX 4090D · 48 GB
Text generation · FP8 · vLLM
Qwen3-0.6B
/root/.cache/modelscope/hub/models/Qwen/Qwen3-0___6B
RTX 4090D · 48 GB
Text generation · BF16 · vLLM
Qwen3-1.7B
/root/.cache/modelscope/hub/models/Qwen/Qwen3-1___7B
RTX 4090D · 48 GB
Text generation · BF16 · vLLM
Qwen3-4B
/root/.cache/modelscope/hub/models/Qwen/Qwen3-4B
RTX 4090D · 48 GB
Text generation · BF16 · vLLM
Qwen3-32B-AWQ
/root/.cache/modelscope/hub/models/Qwen/Qwen3-32B-AWQ
RTX 4090D · 48 GB
Text generation · AWQ · vLLM
Qwen3-14B-AWQ
/root/.cache/modelscope/hub/models/Qwen/Qwen3-14B-AWQ
RTX 4090D · 48 GB
Text generation · AWQ · vLLM
Qwen3-8B-AWQ
/root/.cache/modelscope/hub/models/Qwen/Qwen3-8B-AWQ
RTX 4090D · 48 GB
Text generation · AWQ · vLLM
Qwen3-4B-AWQ
/root/.cache/modelscope/hub/models/Qwen/Qwen3-4B-AWQ
RTX 4090D · 48 GB
Text generation · AWQ · vLLM
Qwen3-32B-FP8
/root/.cache/modelscope/hub/models/Qwen/Qwen3-32B-FP8
RTX 4090D · 48 GB
Text generation · FP8 · vLLM
Qwen3-30B-A3B-FP8
/root/.cache/modelscope/hub/models/Qwen/Qwen3-30B-A3B-Instruct-2507-FP8
RTX 4090D · 48 GB
Text generation · FP8 · vLLM
Qwen3-14B-FP8
/root/.cache/modelscope/hub/models/Qwen/Qwen3-14B-FP8
RTX 4090D · 48 GB
Text generation · FP8 · vLLM
Qwen3-30B-A3B-Thinking-FP8
/root/.cache/modelscope/hub/models/Qwen/Qwen3-30B-A3B-Thinking-2507-FP8
RTX 4090D · 48 GB
Text generation · FP8 · vLLM
Qwen3-1.7B-FP8
/root/autodl-tmp/modelscope/Qwen/Qwen3-1___7B-FP8
RTX 4090 · 24 GB
Text generation · FP8 · vLLM
Qwen3-8B-FP8
/root/.cache/modelscope/hub/models/Qwen/Qwen3-8B-FP8
RTX 4090D · 48 GB
Text generation · FP8 · vLLM
Qwen3-4B-Instruct-FP8
/root/.cache/modelscope/hub/models/Qwen/Qwen3-4B-Instruct-2507-FP8
RTX 4090D · 48 GB
Text generation · FP8 · vLLM
Qwen3-0.6B-FP8
/root/autodl-tmp/modelscope/Qwen/Qwen3-0___6B-FP8
RTX 4090 · 24 GB
Text generation · FP8 · vLLM
Qwen3-4B-Thinking-FP8
/root/.cache/modelscope/hub/models/Qwen/Qwen3-4B-Thinking-2507-FP8
RTX 4090D · 48 GB
Text generation · FP8 · vLLM
Qwen3-4B-FP8
/root/.cache/modelscope/hub/models/Qwen/Qwen3-4B-FP8
RTX 4090D · 48 GB
Text generation · FP8 · vLLM
Qwen3-4B-AWQ
/home/obscura/.cache/modelscope/hub/models/Qwen/Qwen3-4B-AWQ
7 × RTX 3080 · 10 GB
Text generation · AWQ · vLLM
Qwen3-1.7B-FP8
/root/.cache/modelscope/hub/models/Qwen/Qwen3-1___7B-FP8
RTX 4090D · 48 GB
Text generation · FP8 · vLLM
Qwen3-1.7B
/home/obscura/.cache/modelscope/hub/models/Qwen/Qwen3-1___7B
7 × RTX 3080 · 10 GB
Text generation · BF16 · vLLM
Qwen3-0.6B-FP8
/root/.cache/modelscope/hub/models/Qwen/Qwen3-0___6B-FP8
RTX 4090D · 48 GB
Text generation · FP8 · vLLM
Qwen3-0.6B
/home/obscura/.cache/modelscope/hub/models/Qwen/Qwen3-0___6B
7 × RTX 3080 · 10 GB
Text generation · BF16 · vLLM-DP7
Qwen3-14B-FP8
/root/autodl-tmp/modelscope/Qwen/Qwen3-14B-FP8
2 × RTX 5090 · 32 GB
Text generation · FP8 · vLLM-DP2
Updated