Hermes Agentのバックエンド高速化シリーズ第2回。Qwen3-Coder-30B-A3BからQwen3.6-35B-A3B-Optiqへの移行により、推論の最適化を図る実践的な技術レポートです。
OptiQ 移行で長文 ingest が 1.85 倍速 — Qwen3.6-35B-A3B の mixed-precision KV
編集メモ: Qwen3.6-35B-A3Bへの移行によるKVキャッシュ最適化の事例から、推論速度を大幅に改善する最新の技術アプローチを理解し、実務への応用可能性を探ることができます。