最終更新 2026/11/10 06:30
ランキング
AIニュース
AIブログ
開発
組織・キャリア
企業テックブログ
すべて
原文著者: @kohei /
7日前
古代のグラボ(GTX 1080)でも動くローカルLLMを動かしてみた
#生成AI・LLM
#AIエージェント
#RAG
AIで作成し、掲載基準に基づいて自動選定した要約です。
GTX 1080で動くローカルLLMがドラえもんの道具選択タスクを実行
4〜9Bパラメータモデルを量子化して8GBVRAMに載せ、道具の説明をプロンプトで渡すことで正答率を40%に改善
特別ルールや罠のある問題は道具の説明を渡してもほぼ解けず、思考力が試される問題には限界がある
古代のグラボ(GTX 1080)でも動くローカルLLMを動かしてみた
Zenn / 原文を読む
同じカテゴリの記事
AIアシスタント「Grok Bot」をセットアップして、メール整理から献立・買い物エージェントまで作ってみた
@junko105106 / 1日前 / Grok Botでメール整理から献立・買い物エージェントまでを20分で作成した
社長の一言は重い。RAGにも忖度させてみた(重み付け検索)
@kikuziro / 1日前 / RAGに重要タグを付けて検索結果の重みを調整した
あなたのAIはまだ、「ものの調べ方」を知らない。──調査スキルを作ってバズった話
@BaspisKawaE / 1日前 / AIに調べものをさせるスキルを公開し、GitHubで人気になった