ROC ekoro ati AUC
Ohun ti tẹ ROC n ṣe igbero bawo ni olutọpa kan ṣe ya awọn kilasi meji sọtọ ni gbogbo iloro ipinnu ti o ṣee ṣe, ati pe AUC rọ gbogbo ohun ti tẹ sinu nọmba kan.
Akopọ
Together they tell you ranking quality independent of where you draw the cutoff.
Jin Dive
Ohun ti tẹ Olugba ti nṣiṣẹ Abuda (ROC) ṣe igbero Oṣuwọn Rere Otitọ (ifamọ, lori y-axis) lodi si Oṣuwọn Rere Eke (1 iyokuro pato, lori ipo-x) bi o ṣe rọra ala isọdi lati 1 si isalẹ 0. Ibalẹ kọọkan n funni ni aaye kan; pọ wọn tọpasẹ awọn ti tẹ. Awoṣe ti o ni ipo gbogbo rere loke gbogbo odi famọra igun apa osi. Agbegbe Labẹ Curve (AUC) ṣe iwọn agbegbe lapapọ labẹ laini yii, lati 0.5 (lairotẹlẹ lairotẹlẹ, diagonal) si 1.0 (pipe). Itumọ ti o ni ọwọ: AUC dọgba iṣeeṣe pe awoṣe ṣe Dimegilio rere ti a yan laileto ti o ga ju odi ti a yan laileto. Oro naa wa lati awọn oniṣẹ radar Ogun Agbaye II ti o ṣe iyatọ ifihan agbara lati ariwo.
Imọ-imọ-ẹrọ
AUC jẹ ominira ala-ilẹ nitori pe o ṣepọ iṣẹ ṣiṣe lori gbogbo awọn gige, nitorinaa ko ni ipa nipasẹ ibiti o ṣeto aala ipinnu. O jẹ deede mathematiki si iṣiro Mann-Whitney U ati idanwo ipo-apao Wilcoxon, afipamo pe o da lori aṣẹ ipo ti awọn ikun asọtẹlẹ, kii ṣe awọn iye pipe wọn. Eyi jẹ ki o jẹ iduroṣinṣin labẹ awọn iyipada Dimegilio monotonic ṣugbọn tun ṣe aibalẹ si isọdiwọn: ipo ti o ni ipo daradara ṣugbọn awoṣe ti ko dara le tun ṣe Dimegilio AUC giga kan.
Ipa Ilana
Awọn ipinnu diẹ sii
O ṣe iranlọwọ fun ọ lati ya sọtọ awọn iṣeduro imọ-ẹrọ lati ede tita.
Iye owo ati isuna
O le beere awọn ibeere imuse to dara julọ ṣaaju lilo owo tabi akoko.
Ẹgbẹ ati ṣiṣan iṣẹ
Awọn ẹgbẹ pẹlu oye pinpin ṣe ọja to dara julọ, eto imulo, ati awọn ipinnu ikẹkọ.
Ojo iwaju ti ROC ekoro ati AUC
ROC-AUC si maa wa metiriki iroyin aifọwọyi, ṣugbọn awọn oṣiṣẹ n pọ si pọ si pẹlu awọn iwoye-ipetunpe fun data ti ko ni iwọntunwọnsi, nibiti ROC le wo ireti arekereke. Reti isọdọmọ jakejado ti apakan AUC (idojukọ lori agbegbe-eke-rere ti o ṣe pataki ni ṣiṣe), iye owo-kókó ati igbekale ipinnu-ipinnu, ati ijabọ ẹgbẹ-ẹgbẹ AUC si awọn ela ododo dada. Gẹgẹbi awọn awoṣe ṣe ifunni awọn ipinnu gidi, awọn metiriki isọdọtun ati AUC yoo pọ si ni ijabọ ẹgbẹ nipa ẹgbẹ ju AUC nikan.
Real-World imuse
Ṣe afiwe awọn awoṣe wiwa-jegudujera meji fun ile-ifowopamọ nipasẹ AUC wọn lati yan eyi ti o dara julọ ni ipo awọn iṣowo arekereke ju awọn ti o tọ
Ṣiṣayẹwo idanwo aisan fun arun kan (fun apẹẹrẹ, olutọpa iboju alakan) nibiti awọn onimọ-jinlẹ nilo lati ṣowo ni pipa mimu awọn ọran diẹ sii lodi si awọn itaniji eke.
Ṣiṣatunṣe ẹnu-ọna àlẹmọ àwúrúju nipa lilo ọna ROC lati tọju awọn idaniloju eke (meeli ti o tọ ti a fihan bi àwúrúju) kekere pupọ
Iṣatunṣe awoṣe igbelewọn aiyipada-kirẹditi nibiti AUC ṣe akopọ bawo ni o ṣe ya awọn oluyawo ti o san pada kuro lọdọ awọn ti o ṣe aifọwọyi.
Awọn ewu & Awọn ọna iṣọ
Awọn ẹgbẹ oriṣiriṣi le lo ọrọ kanna ni oriṣiriṣi, nitorinaa ṣalaye iwọn ni kutukutu.
Awọn aṣepari le wo lagbara lakoko ti iṣẹ-aye gidi ko ṣe deede.
Aibikita didara data ati awọn ero igbelewọn nigbagbogbo ṣẹda awọn abajade ẹlẹgẹ.
Ilana Ilana imuse
Bẹrẹ pẹlu itumọ-ede itele ti abajade ti o nilo.
Mu metiriki aṣeyọri kan ati ipo ikuna kan ṣaaju idanwo.
Ṣiṣe awakọ kekere kan pẹlu data aṣoju, kii ṣe eto demo didan.
Iwe-ipamọ nibiti ROC Curves ati AUC ṣe iranlọwọ ati nibiti awọn ọna ti o rọrun jẹ dara julọ.
Tesiwaju Ṣiṣawari
Free newsletter
Get the daily AI briefing
Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.
One email each weekday. Unsubscribe in one click. We never sell or share your address.
Test yourself
Take the ROC Curves and AUC quiz
Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.
Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation
Itọsọna atẹle
Iyatọ-Itọpa Iṣowo
Awọn ibeere ti a beere nigbagbogbo
What is ROC Curves and AUC?
Ohun ti tẹ ROC n ṣe igbero bawo ni olutọpa kan ṣe ya awọn kilasi meji sọtọ ni gbogbo iloro ipinnu ti o ṣee ṣe, ati pe AUC rọ gbogbo ohun ti tẹ sinu nọmba kan. Papọ wọn sọ fun ọ didara didara ni ominira ti ibiti o ti fa gige naa.
Awọn iwọn meji wo ni ohun ti tẹ ROC ṣe idite si ara wọn?
Ohun ti tẹ ROC ṣe igbero Oṣuwọn Rere Otitọ (ifamọ) lori y-axis lodi si Oṣuwọn Rere Eke (1 - pato) lori ipo-x kọja awọn iloro.
Ohun ti AUC iye ni ibamu si a classifier ti o ṣe ko dara ju ID lafaimo?
Kilasifata laileto tọpasẹ laini akọ-rọsẹ, fifun AUC ti 0.5. AUC ti 1.0 jẹ pipe, ati 0.0 tumọ si pe o gba gbogbo ipo ni deede sẹhin.
Kini idi ti AUC ṣe apejuwe bi 'ominira ala'?
AUC ṣe akopọ gbogbo ọna ti ROC, eyiti o jẹ ipilẹṣẹ nipasẹ gbigba gbogbo ala, nitorinaa ko dale lori gige gige kan ti a yan.
Fun data ti ko ni iwọntunwọnsi pupọ, iru ọna wo ni a ṣe iṣeduro nigbagbogbo lẹgbẹẹ tabi dipo ROC nitori ROC le wo ireti aṣeju?
Lori toje-rere isoro awọn ti o tobi nọmba ti otito Odi ntọju awọn eke Rere Oṣuwọn kekere, inflating ROC. Precision-ÌRÁNTÍ ekoro idojukọ lori awọn rere kilasi ati ki o han išẹ siwaju sii nitootọ.