Termin ze słownika AI

Czym jest Pass@k?

Definicja

Metryka oceny kodu mierząca szansę, że co najmniej jedna z k wygenerowanych próbek przejdzie testy.

Przejrzyj pełny słownik AIPrzeglądaj wszystkie bezpłatne przewodniki AI

Powiązane terminy

PerplexityMetryka modelu językowego mierząca stopień zaskoczenia modelu prawdziwymi następnymi tokenami.Koder krzyżowyModel, który ocenia zapytanie i dokument jednocześnie w jednym przebiegu, co pozwala na bardzo dokładną ocenę trafności.HumanEvalTest porównawczy problemów programistycznych w języku Python używany do pomiaru poprawności generowania kodu za pomocą testów jednostkowych.API (interfejs programowania aplikacji)Ustrukturyzowany sposób wysyłania żądań przez jeden system oprogramowania i otrzymywania odpowiedzi z innego systemu.KlasyfikacjaZadanie, w którym model przypisuje dane wejściowe do jednej lub większej liczby predefiniowanych kategorii.Adaptacja domenyMetody, które przenoszą model wyszkolony w jednej domenie, aby działał lepiej w innej domenie.

Dowiedz się więcej z naszych bezpłatnych przewodników

Dense Passage RetrievalPass@k Metric ExplainedGenerative AI for First-Pass Document ReviewAI for Leveled Reading Passages

Zobacz także

LLM-as-JudgeMMLUBi-EncoderGSM8KHybrid SearchFactualityRerankerCitations