生成AI
レッドハットは、スケーラブルな生成AI推論を強化するための新しいオープンソースプロジェクト「llm-d」を導入しました。このプロジェクトは、単一サーバーを超えた生産規模の展開に向けてvLLMの機能を拡張します。大規模言語モデル操作のための統一プラットフォームを提供することを目指しています。
レッドハットは、スケーラブルな生成AI推論を強化するための新しいオープンソースプロジェクト「llm-d」を導入しました。このプロジェクトは、単一サーバーを超えた生産規模の展開に向けてvLLMの機能を拡張します。大規模言語モデル操作のための統一プラットフォームを提供することを目指しています。