MENU
導入戦略・はじめ方
AI
社内でAIを動かす手順と判断材料 | AI技術ラボ
AI技術ラボ
導入戦略・はじめ方
AI
AI技術ラボ
導入戦略・はじめ方
AI
ホーム
MoE
MoE
– tag –
ローカルLLM
FreeTokenは8GB GPUで35B動く、RAM 32GBなら
FreeTokenをarXiv論文とGitHub公式ドキュメントで検証。8GB GPUで35Bが39.3 tok/s動くのは事実ですが、同じ機材にhost RAM 32GBが載っています。報道の速度比較表が別モデルの数値だった件と、macOS非対応の現状を実測ベースで解説します。
2026年8月24日
1
閉じる