PrismML、小さなLLMでAIの使い方を変える
- PrismMLが小さなLLMを開発し、PCやスマートフォンで動作させることを目指している
- モデルの重みを三値化することでメモリ使用量を9〜10倍削減し、Qwen3.8 27Bを5.9GBに圧縮した
- モデルのサイズが小さくなることで、プライバシーが保たれ、クラウドに依存しなくなる可能性がある
PrismML hopes its tiny LLM will change how we all use AI | TechCrunch


