タグ: ローカルLLM

PrismML Bonsaiとは?1ビット・三値(ternary)量子化でローカルLLMの常識を変えるモデル【2026年】

はじめに 「ローカルLLMをMacで動かしたいけど、メモリが足りなくて大きなモデルが動かない…」 この悩みを持ったことがある人は少なくないでしょう。実際、私が使っているM4 MacBook Air(24GBメモリ)でも、

続きを読む

デジタル庁のガバメントAI「源内」をローカルで動かす非公式プロジェクト「open-genai」とは

「源内(GENAI)は全部AWS依存でしょ?うちの環境じゃムリ…」 そう思っている自治体のICT担当者や、セキュリティポリシーが厳しい企業の情シス担当者は少なくありません。 結論から言えば、デジタル庁が公開したガバメント

続きを読む

AIエージェントとAIモデルの違いとは?今さら聞けない最新AI用語をわかりやすく解説

はじめに 「AIエージェント」や「AIモデル」といった言葉を最近よく耳にするけれど、その違いを正しく説明できる人は意外と少ないものです。特にこれからのAI活用を考える上で、この違いを理解しているかどうかは非常に重要なポイ

続きを読む