32GB DDR5 RAM.
unsloth/Qwen3.6-35B-A3B-GGUF Q8_0 : 36.9 GB
LM Studioの設定:
- GPU Offload: 40
- Offload MoE Experts to CPU: 26
- mmapを試す: オン
- Kキャッシュ: Q8_0
- Vキャッシュ: Q8_0
llama.cpp の方が良いでしょう。
[リンク] [コメント]
Reddit r/LocalLLaMA / 2026/4/24
32GB DDR5 RAM.
unsloth/Qwen3.6-35B-A3B-GGUF Q8_0 : 36.9 GB
LM Studioの設定:
- GPU Offload: 40
- Offload MoE Experts to CPU: 26
- mmapを試す: オン
- Kキャッシュ: Q8_0
- Vキャッシュ: Q8_0
llama.cpp の方が良いでしょう。