日本のlocal llmの投稿を見るとよくollamaを使っているのがみられますが、やめましょう。
ollamaを使用していながら速度が遅いというのは、軽自動車で130km/hでないといってるのと同じです。
linux+llama.cppに乗り換えましょう。
数十%速度上がるよ
Sending doesn't need an account. Sign in if you want a private collection.
Preview another link
Works with X, Instagram, TikTok & YouTube.
Sending doesn't need an account. Sign in if you want a private collection.
Preview another link
Works with X, Instagram, TikTok & YouTube.






