What is Eval Harness? Definition | AI Understanding

Tanım

Model sürümleri genelinde istemleri, veri kümelerini ve puanlama mantığını çalıştıran tekrarlanabilir bir değerlendirme çerçevesi.

İlgili terimler

Değerlendirme Seti

Eğitimden sonra model kalitesini ölçmek için kullanılan uzatılmış bir veri kümesi.

AGI (Yapay Genel İstihbarat)

Birçok alanda insan düzeyinde çoğu entelektüel görevi yerine getirebilen varsayımsal bir yapay zeka sistemi.

Algoritmik Şeffaflık

Bir yapay zeka sisteminin mantığının, veri kaynaklarının ve sınırlamalarının ne kadar net bir şekilde belgelendiği ve anlaşıldığı.

Ölçeklenebilir depolama ve işleme teknikleri gerektiren çok büyük ve karmaşık veri kümeleri.

Bellek (Ajan Belleği)

Bir AI aracısının sürekliliği artırmak için adımlar veya oturumlar boyunca kullandığı kayıtlı bağlam.

Prompt Engineering

Çıktı kalitesini, güvenilirliğini ve kontrol edilebilirliğini iyileştirmeye yönelik istemlerin tasarlanması.

Ücretsiz kılavuzlarımızdan daha fazlasını öğrenin

AI Evaluation Basics LLM Evaluations Retrieval Quality Linear Probing and Frozen Feature Evaluation

See also

Embedding Model Feature Store Distilled Model Groundedness Differential Privacy Guarded Decoding Data Provenance Human Preference Model

Yapay Zeka Sözlüğünün tamamına göz atın Tüm ücretsiz AI kılavuzlarını keşfedin