すべてのクイズに戻るガイド連動クイズ レベル6 質問

LLM 推論ルーティングとロード バランシングのクイズ

LLM サービスを提供するバックエンド間でリクエストがどのように誘導され、バランスが保たれているかを把握していることを確認してください。

質問 1 6正解: 0

単純なラウンドロビンが LLM 推論の負荷分散戦略として不適切であることが多いのはなぜですか?