Co jest Punkt końcowy wnioskowania?
Definicja
Wdrożony interfejs API, który odbiera żądania modelu i zwraca prognozy w środowisku produkcyjnym.
Powiązane terminy
Dowiedz się więcej z naszych bezpłatnych przewodników
AI InferenceAI Inference OptimizationLLM Inference Routing and Load BalancingSeldon Core and Inference Graphs