【動画】同じQwen 27Bでも使い心地が変わる?――32GBのMacで量子化モデルを比較

くまごろう
2026/10/18
2026/10/18

同じAIなのに、配布ファイルが違うと使い心地も変わる?ふじもったチャンネルが2026年10月17日に公開した約14分の動画は、メモリ32GBのM6 Mac miniと推論エンジン「Splash」で、Qwen 27Bの量子化モデルを比較する実機検証です。


量子化は、AIのデータを小さくして必要なメモリを減らす工夫。動画ではGGUFファイル名の読み方から説明し、標準モデルとBartowski・Unslothによる配布モデルの計7つを、Neural Engineのオン・オフを含む14条件で試しています。


今回の情報検索テストでは差が小さい一方、日本語表現やコーディングでは低いビット数のモデルに課題が見られたと報告。最後に残った4bitの2モデルは評価が近く、決め手は約2GBの容量差でした。小さく収まる分、一度に扱う文章の量を多く確保できたとして、UnslothのUD-IQ4_XSを常用に選んでいます。


これは投稿者が用意した課題と機材での結果です。モデルの容量だけで決めず、任せたい仕事、回答の質、文章を保持する余裕を見比べる。自分のPCに合うAIを探すときの、選び方が分かる一本です。


コメント

コメントはまだありません。

このサイトの内容について質問してください。