MENU
  • 導入戦略・はじめ方
  • AI
社内でAIを動かす手順と判断材料 | AI技術ラボ
AI技術ラボ
  • 導入戦略・はじめ方
  • AI
AI技術ラボ
  • 導入戦略・はじめ方
  • AI
  1. ホーム
  2. Bonsai2

Bonsai2– tag –

  • 27Bを6GBに潰すBonsai 2を16GB Macで回した
    ローカルLLM

    27Bを6GBに潰すBonsai 2を16GB Macで回した

    16GB Macで27BクラスのローカルLLMは動くのか。Q4のQwen3.8-27Bはスワップ死した実測から、三値量子化のBonsai 2 27B(5.95GB)なら14.6 tok/sで動くまでを形式別ベンチ3種で解説。llama.cpp fork必須の落とし穴も。
    2026年9月20日
1

Recent Posts

  • Ollamaの安全性、社外へ何を送るか宛先を実測
  • PDFを外に出せないとき自己ホストは要るか
  • 日本語ローカルLLMの選び方:16GB Macは速さで選ばない
  • メーカーの違う搬送ロボットを1画面で動かす——富士ソフトMixFlitに見る、AMR混在運用の導入前チェック
  • Geminiオンプレは要る?機密データの置き場所で選ぶ

Recent Comments

表示できるコメントはありません。

ご支援お待ちしております