トークン課金を気にせず生成AIを使いたい!OpenAI互換APIで“社内生成AI”を構築できるOracle Private AI Services Containerを試してみた
- Oracle Private AI Services Containerは、機密データを外部に送らずに生成AIを社内に構築できるプライベートな推論基盤
- OpenAI互換APIとRAG、Vector Searchをサポートし、LLMによる文章生成やEmbedding、VLMも可能
- トークン課金を気にせず利用できるが、インフラコストは必要で、モデルのロードにはメモリと時間が必要な点に注意するべき
トークン課金を気にせず生成AIを使いたい!OpenAI互換APIで“社内生成AI”を構築できるOracle Private AI Services Containerを試してみた - Qiita


