MUONGOZO wa Misingi

ROC Curves na AUC

Mzunguko wa ROC hupanga jinsi kiainishi hutenganisha vyema madarasa mawili katika kila kizingiti cha uamuzi kinachowezekana, na AUC inabana msafara huo wote kuwa nambari moja.

dk 2 kusomaIlisasishwa mwisho

Muhtasari

Together they tell you ranking quality independent of where you draw the cutoff.

Dive ya kina

Mviringo wa Sifa ya Uendeshaji ya Kipokeaji (ROC) hupanga Kiwango Chanya cha Kweli (unyeti, kwenye mhimili y) dhidi ya Kiwango cha Uongo Chanya (maalum 1, kwenye mhimili wa x) unapotelezesha kiwango cha juu cha uainishaji kutoka 1 hadi 0. Kila kizingiti kinatoa pointi moja; kuziunganisha hufuata mkunjo. Muundo unaoorodhesha kila chanya juu ya kila hasi hukumbatia kona ya juu kushoto. Eneo la Chini ya Mviringo (AUC) hupima jumla ya eneo chini ya mstari huu, kuanzia 0.5 (kubahatisha bila mpangilio, ulalo) hadi 1.0 (kamili). Ufafanuzi unaofaa: AUC ni sawa na uwezekano kwamba muundo hupata alama chanya iliyochaguliwa nasibu zaidi kuliko hasi iliyochaguliwa nasibu. Neno hili linatokana na waendeshaji rada wa Vita vya Kidunia vya pili kutofautisha ishara kutoka kwa kelele.

Ufahamu wa Kiufundi

AUC haitegemei kiwango cha juu kwa sababu inaunganisha utendakazi kwenye vipunguzi vyote, kwa hivyo haiathiriwi na mahali unapoweka mpaka wa uamuzi. Kihisabati ni sawa na takwimu za Mann-Whitney U na jaribio la jumla la kiwango cha Wilcoxon, kumaanisha kwamba inategemea tu upangaji wa daraja la alama zilizotabiriwa, si thamani zao kamili. Hii huifanya kuwa dhabiti chini ya mabadiliko ya alama za monotoni lakini pia kutojali urekebishaji: muundo ulioorodheshwa vizuri lakini ambao haujasawazishwa vizuri bado unaweza kupata AUC ya juu.

Athari za kimkakati

Maamuzi ya wazi zaidi

Inakusaidia kutenganisha madai ya wazi ya kiufundi kutoka kwa lugha ya uuzaji.

Cost and budget

Unaweza kuuliza maswali ya utekelezaji bora kabla ya kutumia pesa au wakati.

Timu na mtiririko wa kazi

Timu zenye uelewa wa pamoja hufanya maamuzi bora ya bidhaa, sera na mafunzo.

Mustakabali wa ROC Curves na AUC

ROC-AUC inasalia kuwa kipimo chaguo-msingi cha kuripoti, lakini wataalamu wanazidi kuioanisha na curve za Precision-Recall kwa data isiyo na usawaziko, ambapo ROC inaweza kuonekana kuwa na matumaini kwa njia ya udanganyifu. Tarajia kupitishwa kwa sehemu kubwa kwa AUC (ikizingatia eneo la hali ya chini-chanya ambalo ni muhimu kiutendaji), uchanganuzi nyeti wa gharama na wa uamuzi, na kuripoti kwa AUC kwa kila kikundi kwa mapengo ya usawa. Miundo inapolisha maamuzi halisi, vipimo vya urekebishaji na AUC vitazidi kuripotiwa bega kwa bega badala ya AUC pekee.

Utekelezaji wa Ulimwengu Halisi

Kulinganisha miundo miwili ya ugunduzi wa ulaghai kwa benki na AUC yao ili kuchagua ile inayoorodhesha vyema miamala ya ulaghai juu ya ile halali.

Kutathmini uchunguzi wa uchunguzi wa ugonjwa (k.m., kitengo cha uchunguzi wa saratani) ambapo wataalamu wa radiolojia wanahitaji kubadilishana kupata kesi zaidi dhidi ya kengele za uwongo.

Kurekebisha kizingiti cha kichujio cha barua taka kwa kutumia curve ya ROC kuweka chanya za uwongo (barua halali iliyoalamishwa kama barua taka) chini sana.

Kulinganisha muundo wa bao chaguomsingi wa mkopo ambapo AUC inatoa muhtasari wa jinsi inavyotenganisha wakopaji ambao hulipa kutoka kwa wale ambao hawajalipa.

Hatari & Walinzi

Timu tofauti zinaweza kutumia neno moja tofauti, kwa hivyo fafanua upeo mapema.

Vigezo vinaweza kuonekana kuwa na nguvu ilhali utendakazi wa ulimwengu halisi haufanani.

Kupuuza ubora wa data na mipango ya tathmini mara nyingi huleta matokeo tete.

Ramani ya Utekelezaji

1

Anza na ufafanuzi wa lugha rahisi wa matokeo unayohitaji.

2

Chagua kipimo kimoja cha mafanikio na hali moja ya kutofaulu kabla ya kujaribu.

3

Tekeleza majaribio madogo yenye data wakilishi, si seti ya onyesho iliyoboreshwa.

4

Hati ambapo ROC Curves na AUC husaidia na ambapo mbinu rahisi ni bora zaidi.

Endelea Kuchunguza

Free newsletter

Get the daily AI briefing

Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.

One email each weekday. Unsubscribe in one click. We never sell or share your address.

Test yourself

Take the ROC Curves and AUC quiz

Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.

Anza chemsha bongo

Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation

Mwongozo unaofuata

Biashara ya Tofauti ya Upendeleo

Maswali yanayoulizwa mara kwa mara

What is ROC Curves and AUC?

Mzunguko wa ROC hupanga jinsi kiainishi hutenganisha vyema madarasa mawili katika kila kizingiti cha uamuzi kinachowezekana, na AUC inabana msafara huo wote kuwa nambari moja. Kwa pamoja wanakuambia ubora wa kupanga bila kutegemea mahali unapochora mkato.

Je, ROC inapanga njama gani dhidi ya kila mmoja?

Mbero wa ROC hupanga Kiwango Chanya cha Kweli (unyeti) kwenye mhimili wa y dhidi ya Kiwango Chanya cha Uongo (1 - umaalum) kwenye mhimili wa x kwenye vizingiti.

Ni thamani gani ya AUC inalingana na kiainishaji ambacho hakifanyi kazi bora kuliko kubahatisha bila mpangilio?

Kiainishi cha nasibu hufuata mstari wa ulalo, na kutoa AUC ya 0.5. AUC ya 1.0 ni kamili, na 0.0 inamaanisha inapata kila nafasi nyuma haswa.

Kwa nini AUC inaelezewa kama 'kizingiti-huru'?

AUC ni muhtasari wa safu nzima ya ROC, ambayo hutolewa kwa kufagia kila kizingiti, kwa hivyo haitegemei mkato wowote uliochaguliwa.

Kwa mkusanyiko wa data usio na usawa, ni curve ipi inayopendekezwa mara nyingi kando au badala ya ROC kwa sababu ROC inaweza kuonekana kuwa na matumaini kupita kiasi?

Juu ya matatizo chanya nadra idadi kubwa ya hasi za kweli huweka Kiwango cha Uongo cha Uongo, na kuongeza ROC. Mikondo ya Precision-Recall inalenga darasa chanya na kufichua utendaji kwa uaminifu zaidi.