Usahihi na Kukumbuka
Usahihi na kukumbuka ni vipimo viwili vya ziada vya kutathmini viainishi, hasa wakati madarasa hayana usawa.
Muhtasari
Together they reveal what plain accuracy hides — how often a model's positive predictions are right, and how many real positives it actually catches.
Dive ya kina
Wakati mfano unaashiria vitu kuwa vyema, maswali mawili ni muhimu. Precision inauliza: kati ya kila kitu tulichoalamisha, ni kiasi gani kilikuwa chanya kweli? Inalingana na chanya za kweli zilizogawanywa na chanya zote zilizotabiriwa, ikiadhibu kengele za uwongo. Recall (sensitivity) inauliza: kati ya chanya zote za kweli huko nje, ni ngapi tulishika? Ni sawa na chanya za kweli zilizogawanywa na chanya zote halisi, kuadhibu makosa. Hizi kwa kawaida hubadilishana: kupunguza kiwango cha uamuzi hupata chanya zaidi (kumbukumbu ya juu) lakini huripoti takataka zaidi (usahihi wa chini), na kinyume chake. Ambayo ya kuyapa kipaumbele inategemea gharama - kichujio cha barua taka kinapendelea usahihi (usitupe barua pepe halisi), huku skrini ya saratani ikipendelea kumbukumbu (usikose uvimbe). Alama ya F1, maana yao ya usawa, inasawazisha zote kwa nambari moja.
Ufahamu wa Kiufundi
Vipimo vyote viwili vinatoka kwa chanya za kweli za tumbo la mkanganyiko (TP), chanya za uwongo (FP), na hasi za uwongo (FN): Precision = TP / (TP + FP), Recall = TP / (TP + FN). Hasa, wala hawatumii hasi za kweli, ndiyo sababu wanabaki na taarifa wakati hasi huzidi chanya kwa kiasi kikubwa. Kufagia kizingiti cha uainishaji hufuata mkondo wa kukumbuka kwa usahihi; eneo lililo chini yake (usahihi wa wastani) ni muhtasari wa utendakazi na inapendekezwa zaidi ya ROC-AUC kwenye data isiyo na usawaziko.
Athari za kimkakati
Maamuzi ya wazi zaidi
Inakusaidia kutenganisha madai ya wazi ya kiufundi kutoka kwa lugha ya uuzaji.
Cost and budget
Unaweza kuuliza maswali ya utekelezaji bora kabla ya kutumia pesa au wakati.
Timu na mtiririko wa kazi
Timu zenye uelewa wa pamoja hufanya maamuzi bora ya bidhaa, sera na mafunzo.
Mustakabali wa Usahihi na Kukumbuka
AI inapoingia katika vikoa vya hatari kubwa - utambuzi wa matibabu, udhibiti wa maudhui, ulaghai - timu zinazidi kuripoti usahihi na kukumbuka (na miingo yao) badala ya usahihi pekee, na kurekebisha vizingiti ili kulingana na gharama za ulimwengu halisi na vikwazo vya haki. Ukaguzi wa usahihi/kumbuka kwa kila kikundi unazidi kuwa kawaida katika kugundua viwango vya makosa tofauti katika idadi ya watu. Tarajia vipimo bora vinavyogharamiwa, uwezekano uliorekebishwa na utumiaji wa zana unaowaruhusu washikadau kuchagua pointi za uendeshaji kwa maingiliano badala ya kukubali kiwango cha juu kabisa cha 0.5.
Utekelezaji wa Ulimwengu Halisi
Vichungi vya barua taka hutengeneza kwa usahihi wa hali ya juu ili barua pepe halali zisitumwe kimakosa kwenye folda ya barua taka.
Vipimo vya uchunguzi wa kimatibabu vinatanguliza kumbukumbu ya hali ya juu ili kuzuia kukosa wagonjwa ambao wana ugonjwa huo, kukubali chanya zaidi za uwongo kwa ufuatiliaji.
Mifumo ya utafutaji na mapendekezo inaripoti precision@k (ni kiasi gani cha matokeo ya k bora yanafaa) ili kupima ubora wa nafasi.
Ugunduzi wa ulaghai husawazisha usahihi na kukumbuka kupitia alama ya F1, kwa kuwa kengele za uwongo na ulaghai uliokosa ni ghali.
Hatari & Walinzi
Timu tofauti zinaweza kutumia neno moja tofauti, kwa hivyo fafanua upeo mapema.
Vigezo vinaweza kuonekana kuwa na nguvu ilhali utendakazi wa ulimwengu halisi haufanani.
Kupuuza ubora wa data na mipango ya tathmini mara nyingi huleta matokeo tete.
Ramani ya Utekelezaji
Anza na ufafanuzi wa lugha rahisi wa matokeo unayohitaji.
Chagua kipimo kimoja cha mafanikio na hali moja ya kutofaulu kabla ya kujaribu.
Tekeleza majaribio madogo yenye data wakilishi, si seti ya onyesho iliyoboreshwa.
Hati ambapo Usahihi na Kukumbuka husaidia na ambapo mbinu rahisi ni bora zaidi.
Endelea Kuchunguza
Free newsletter
Get the daily AI briefing
Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.
One email each weekday. Unsubscribe in one click. We never sell or share your address.
Test yourself
Take the Precision and Recall quiz
Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.
Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation
Mwongozo unaofuata
Tempus AI katika Dawa ya Usahihi
Maswali yanayoulizwa mara kwa mara
What is Precision and Recall?
Usahihi na kukumbuka ni vipimo viwili vya ziada vya kutathmini viainishi, haswa wakati madarasa hayana usawa. Kwa pamoja hufichua usahihi wa dhahiri unaoficha - ni mara ngapi utabiri chanya wa modeli ni sahihi, na ni chanya ngapi halisi ambazo hupata.
What is next for Precision and Recall?
AI inapoingia katika vikoa vya hatari kubwa - utambuzi wa matibabu, udhibiti wa maudhui, ulaghai - timu zinazidi kuripoti usahihi na kukumbuka (na miingo yao) badala ya usahihi pekee, na kurekebisha vizingiti ili kulingana na gharama za ulimwengu halisi na vikwazo vya haki. Ukaguzi wa usahihi/kumbuka kwa kila kikundi unazidi kuwa kawaida katika kugundua viwango vya makosa tofauti katika idadi ya watu. Tarajia vipimo bora vinavyogharamiwa, uwezekano uliorekebishwa na utumiaji wa zana unaowaruhusu washikadau kuchagua pointi za uendeshaji kwa maingiliano badala ya kukubali kiwango cha juu kabisa cha 0.5.
Usahihi hujibu swali gani?
Usahihi = TP / (TP + FP) hupima usahihi wa ubashiri chanya wa modeli - jinsi bendera chanya inavyoaminika.
Kwa nini usahihi na ukumbusho hupendelewa kuliko usahihi wazi kwa hifadhidata zisizo na usawa?
Kwa sababu hakuna kipimo kinachotumia alama hasi za kweli, hazijachangiwa na tabaka hasi kubwa na rahisi kutabiri jinsi usahihi ulivyo.