Kí ni Pass@k? Ìtumọ̀ | AI Understanding

Itumọ

Metiriki igbelewọn koodu kan ti o nwọn aye pe o kere ju ọkan ninu awọn ayẹwo ti ipilẹṣẹ k kọja awọn idanwo naa.

Awọn ofin ti o jọmọ

Awoṣe ede-ede ti o ni wiwọn bi o ṣe jẹ iyalẹnu awoṣe nipasẹ awọn ami atẹle otitọ.

Agbekọja-Encoder

Awoṣe ti o ṣe iṣiro ibeere kan ati iwe papọ ni iwe-iwọle kan fun awọn idajọ ibaramu deede-giga.

Aṣepari ti awọn iṣoro siseto Python ti a lo lati wiwọn deede-iran koodu nipasẹ awọn idanwo ẹyọkan.

API (Àwòrán Ètò Ìlò)

Ọna ti a ṣeto fun eto sọfitiwia kan lati firanṣẹ awọn ibeere si ati gba awọn idahun lati eto miiran.

Iṣẹ-ṣiṣe nibiti awoṣe kan ti n fi igbewọle si ọkan tabi diẹ ẹ sii awọn ẹka ti a ti ni asọye.

Awọn ọna ti o gbe awoṣe ikẹkọ ni agbegbe kan lati ṣe daradara ni agbegbe miiran.

Kọ ẹkọ diẹ sii ninu awọn itọsọna ọfẹ wa

Dense Passage Retrieval

Wo tun

LLM-as-Judge MMLU Bi-Encoder GSM8K Hybrid Search Factuality Reranker Citations

Ṣawakiri ni kikun AI Gilosari Ṣawari gbogbo awọn itọsọna AI ọfẹ