Bài kiểm tra có liên kết hướng dẫn · Cứng Cấp độ

Multi-Model Serving and Model Multiplexing Quiz

Balance shared model utilization with routing, on-demand loading, caching, eviction, GPU memory limits and tenant isolation.

Đường dẫn hướng dẫn liên quanMulti Model Serving And Multiplexing
Câu hỏi 1 của 8

What does model multiplexing commonly allow a shared serving worker to do?