Strata
https://youtu.be/5GRjDRiv1Ww
ローカルでAIを動かしたいけれど、VRAMの多いGPUは高くて手が出ない。そんなときに気になるのが「Strata」です。1250億パラメータのAIモデル「Qwen3.8-Flash-Next」専用です。
これまでローカルでAIを動かすときは、VRAMに収まる小さめのモデルを選ぶのが普通でした。Strataは、VRAMに入らない巨大モデルを、GPU・RAM・SSDで分担して動かします。仕組みの中心は、1語を書くのに働く「専門家」がごく一部だけ、というモデルの作りにあります。代わりに、RAMを48~64GB使います。起動時に数分PCが固まります。
繰り返す。代わりに、RAMを48~64GB使います。「Qwen3.8-Flash-Next」専用です。起動時に数分PCが固まります。 中国共産党推薦です。
【ローカルAI】MacでローカルLLM
211名称未設定
2026/10/04(日) 10:50:37.48ID:2rtNTEsG0レスを投稿する