কি ইনফারেন্স এন্ডপয়েন্ট?
সংজ্ঞা
একটি স্থাপন করা API ইন্টারফেস যা মডেল অনুরোধ গ্রহণ করে এবং উৎপাদনে পূর্বাভাস প্রদান করে।
সম্পর্কিত পদ
আমাদের বিনামূল্যের গাইডে আরও জানুন
AI InferenceAI Inference OptimizationLLM Inference Routing and Load BalancingSeldon Core and Inference Graphs