Strataを構築
Ryzen7 7700、32GB(+SWAP 64GB)、5060ti 16GB、NVMe WD SN850X 2T、Kubuntu 24.04.5
起動するとメインメモリはほぼ消費されUI用のブラウザ起動に若干SWAPが必要、SSDは110GBぐらい
Q2_0で70~80token/s 出るようにはなったけど、回答品質が使い物にならないレベル
日本語で回答してくださいと指示しているのに中国語ばっか
簡単な質問にも、最初はまともな日本語だが、だんだん中国語が混ざり最後まで正常に答えられない感じ
例えば、美味しいカレーの作り方を教えてと聞くと、序盤はレシピを説明し始めるが途中から、〇〇油、水、肉、〇〇油、シテ、水…コロシテ…みたいなのを繰り返す
現在のマシンスペックとモデルでは全く実用にならないとわかった
【ローカルAI】MacでローカルLLM
674名称未設定
2026/10/20(火) 11:38:05.13ID:2PN6lSj+0レスを投稿する
ニュース
- 【草原火災】モンゴル当局が賠償請求検討 KDDI「法令違反ない」★3 [煮卵★]
- なぜ千葉県の魅力度は年々「ダダ下がり」なのか? 5年間で7ランクもダウン! ディズニーも成田空港もある県で何が起きているのか [♪♪♪★]
- 【祝卒寿】野沢雅子、90歳 [おっさん友の会★]
- 【婚活】親が子どもの代わりにお相手探し代理婚活が盛況!イベントで母親が息子を猛アピール「この子はとてもまじめなんです…」 [少考さん★]
- 「迷惑」をかけよう 頼り合おう 「自己責任」の呪縛を解くために (朝日新聞) [少考さん★]
- 日本のGDP、世界6位転落へ…薬物もやらない勤勉な日本人が貧しくなる屈辱は“完全な政策ミス”か? ★11 [ぐれ★]
- 精神障害者保健福祉手帳1級・障害基礎年金1級を手に入れた うらやましいと思われるかもしれないけどマジで大変だからね [976293397]
- 【高市悲報】人類ピンチ、AIが復讐! [219241683]
- 【悲報】【NISA】オルカン、この数ヵ月、全然増えない… [841411289]
- 高市早苗「国民が私の貢献を理解しないから広報予算を10倍に増やす」 [834922174]
- デジタル庁、仮想通貨で給付金検討 [237216734]
- 【悲報】東京の『家賃下げろデモ』、日本人に嘲笑されてしまうwwwwwwwwなぜ日本人は声を上げる人に厳しいのか? [257926174]