አጠቃላይ እይታ
ትክክለኝነት እና ማስታወስ ክላሲፋየሮችን ለመገምገም ሁለት ተጨማሪ መለኪያዎች ናቸው፣በተለይም ክፍሎች ሚዛናዊ ባልሆኑበት። አንድ ላይ ሆነው ግልጽ ትክክለኛነት ምን እንደሚደብቅ ያሳያሉ-የአምሳያው አወንታዊ ትንበያዎች ምን ያህል ጊዜ ትክክል እንደሆኑ እና ምን ያህል እውነተኛ አወንታዊ ውጤቶችን እንደሚይዝ ያሳያሉ።
ትክክለኝነት እና ትውስታ በዋናው AI የመሳሪያ ስብስብ ውስጥ ተቀምጧል። ሲረዱት ሌሎች AI ርዕሶች ለመገምገም እና ለማነጻጸር ቀላል ይሆናሉ።
ጥልቅ ዳይቭ
አንድ ሞዴል እቃዎችን በአዎንታዊ መልኩ ሲጠቁም ሁለት ጥያቄዎች አስፈላጊ ናቸው. ትክክለኛነት ይጠይቃል፡- ከጠቆምናቸው ነገሮች ውስጥ ምን ያህል አዎንታዊ ነበር? የሐሰት ማንቂያዎችን በመቅጣት በሁሉም የተገመቱ አወንታዊዎች የተከፋፈሉ እውነተኛ አወንታዊዎችን እኩል ነው። አስታውስ (ትብነት) ይጠይቃል፡ እዚያ ካሉት እውነተኛ አወንታዊ ነገሮች፣ ስንቱን ያዝን? በሁሉም ትክክለኛ አወንታዊ ነገሮች የተከፋፈለ፣ የጠፉትን የሚቀጣ እውነተኛ አወንታዊዎችን እኩል ነው። እነዚህ ብዙውን ጊዜ ይለዋወጣሉ፡ የውሳኔውን ገደብ ዝቅ ማድረግ የበለጠ አወንታዊ ነገሮችን ይይዛል (ከፍተኛ ማስታወስ) ነገር ግን የበለጠ ቆሻሻን (ዝቅተኛ ትክክለኛነትን) ያሳያል፣ እና በተቃራኒው። የትኛውን ማስቀደም በወጪዎች ላይ የተመሰረተ ነው - የአይፈለጌ መልእክት ማጣሪያ ትክክለኛነትን ይደግፋል (እውነተኛ መልዕክቶችን አታስቀምጡ) ፣ የካንሰር ማያ ገጽ ግን ማስታወስን ይደግፋል (እጢ እንዳያመልጥዎት)። የF1 ነጥብ፣ የእነርሱ ሃርሞኒክ አማካኝ፣ ሁለቱንም በአንድ ቁጥር ያመጣቸዋል።
ቴክኒካዊ ግንዛቤ
ሁለቱም መለኪያዎች ከግራ መጋባት ማትሪክስ እውነተኛ አወንታዊ (ቲፒ)፣ የውሸት አወንታዊ (ኤፍፒ) እና የውሸት አሉታዊ (FN): ትክክለኛነት = TP / (TP + FP) ፣ Recall = TP / (TP + FN) ይመጣሉ። በተለይም፣ ሁለቱም እውነተኛ አሉታዊ ነገሮችን አይጠቀሙም፣ ለዛም ነው አሉታዊ ጎኖቹ ከአዎንታዊው ቁጥር ሲበልጡ መረጃ ሰጪ ሆነው የሚቆዩት። የምደባ ጣራውን መጥረግ ትክክለኛ የማስታወስ ኩርባን ይከታተላል፤ በእሱ ስር ያለው ቦታ (አማካይ ትክክለኛነት) አፈፃፀሙን ያጠቃልላል እና ከ ROC-AUC በጣም ሚዛናዊ ባልሆነ መረጃ ላይ ይመረጣል።
ትክክለኛነትን መቆጣጠር እና ማስታወስ
ትክክለኝነት እና ማስታወስ ክላሲፋየሮችን ለመገምገም ሁለት ተጨማሪ መለኪያዎች ናቸው፣በተለይም ክፍሎች ሚዛናዊ ባልሆኑበት። አንድ ላይ ሆነው ግልጽ ትክክለኛነት ምን እንደሚደብቅ ያሳያሉ-የአምሳያው አወንታዊ ትንበያዎች ምን ያህል ጊዜ ትክክል እንደሆኑ እና ምን ያህል እውነተኛ አወንታዊ ውጤቶችን እንደሚይዝ ያሳያሉ። ትክክለኝነት እና ትውስታ በዋናው AI የመሳሪያ ስብስብ ውስጥ ተቀምጧል። ሲረዱት ሌሎች AI ርዕሶች ለመገምገም እና ለማነጻጸር ቀላል ይሆናሉ። ጥልቅ ግንዛቤን ለመገንባት፣ Precision and Recallን እንደ ኦፕሬሽን ሞዴል እንጂ አንድ ባህሪ አይደለም፡ የሚፈለጉትን ውጤቶች ይግለጹ፣ ግምቶችን ያብራሩ እና ስርዓቱ አሁንም የባለሙያዎችን ፍርድ ከሚያስፈልገው ነገር ለይ።
በተግባር፣ Precision እና Recallን የሚጠቀሙ ጠንካራ ቡድኖች መጀመሪያ ጠንካራ ሃሳባዊ ሞዴሎችን ይገነባሉ፣ ከዚያም እነዚያን ሞዴሎች በእውነተኛ የምርት ገደቦች ላይ ያርሙ። ግልጽ የስኬት መስፈርቶችን ይመዘግባሉ፣ በተጨባጭ መረጃ እና የስራ ፍሰቶች ላይ ይፈትሻሉ፣ እና የአንድ ጊዜ ቤንችማርክ ከማሸነፍ ይልቅ በተስተዋሉ የውድቀት ቅጦች ላይ ተመስርተው ይደግማሉ። ይህ የንድፈ ሃሳባዊ ግንዛቤ በምርት፣ ፖሊሲ እና ኦፕሬሽኖች ላይ ወደ ዘላቂ አቅም የሚቀየርበት ነው።
ግልጽ ቴክኒካዊ የይገባኛል ጥያቄዎችን ከገበያ ቋንቋ እንዲለዩ ያግዝዎታል። በተመሳሳይ ጊዜ፣ የተለያዩ ቡድኖች ተመሳሳይ ቃል በተለያየ መንገድ ሊጠቀሙ ይችላሉ፣ ስለዚህ ወሰንን ቀደም ብለው ይግለጹ። በጣም ጠንካራው አካሄድ የሙከራ ፍጥነትን ከአስተዳደር ዲሲፕሊን ጋር ማጣመር ነው፡ አብራሪዎችን ማስኬድ፣ ማስረጃን መያዝ፣ የውሳኔ ምዝግብ ማስታወሻዎችን ማተም እና የሞዴል ባህሪ፣ የተጠቃሚ የሚጠበቁ እና የቁጥጥር መስፈርቶች ሲዳብሩ ጥበቃዎችን ያለማቋረጥ ማዘመን ነው።
ስልታዊ ተጽእኖ
ግልጽ ቴክኒካዊ የይገባኛል ጥያቄዎችን ከገበያ ቋንቋ እንዲለዩ ያግዝዎታል።
ግልጽ ቴክኒካዊ የይገባኛል ጥያቄዎችን ከገበያ ቋንቋ እንዲለዩ ያግዝዎታል። ከፍተኛ ጥራት ባለው ማሰማራት ውስጥ፣ ይህ ወደሚለካ የአሠራር ደንቦች፣ የባለቤትነት ወሰኖች እና ተደጋጋሚ የግምገማ ሥነ ሥርዓቶች ይተረጎማል ስለዚህ ቡድኖች አሻሚነትን ከማስፋት ይልቅ በራስ መተማመንን ሊጨምሩ ይችላሉ።
ገንዘብን ወይም ጊዜን ከማጥፋትዎ በፊት የተሻሉ የትግበራ ጥያቄዎችን መጠየቅ ይችላሉ።
ገንዘብን ወይም ጊዜን ከማጥፋትዎ በፊት የተሻሉ የትግበራ ጥያቄዎችን መጠየቅ ይችላሉ። ከፍተኛ ጥራት ባለው ማሰማራት ውስጥ፣ ይህ ወደሚለካ የአሠራር ደንቦች፣ የባለቤትነት ወሰኖች እና ተደጋጋሚ የግምገማ ሥነ ሥርዓቶች ይተረጎማል ስለዚህ ቡድኖች አሻሚነትን ከማስፋት ይልቅ በራስ መተማመንን ሊጨምሩ ይችላሉ።
የጋራ ግንዛቤ ያላቸው ቡድኖች የተሻለ ምርት፣ ፖሊሲ እና የመማር ውሳኔዎችን ያደርጋሉ።
የጋራ ግንዛቤ ያላቸው ቡድኖች የተሻለ ምርት፣ ፖሊሲ እና የመማር ውሳኔዎችን ያደርጋሉ። ከፍተኛ ጥራት ባለው ማሰማራት ውስጥ፣ ይህ ወደሚለካ የአሠራር ደንቦች፣ የባለቤትነት ወሰኖች እና ተደጋጋሚ የግምገማ ሥነ ሥርዓቶች ይተረጎማል ስለዚህ ቡድኖች አሻሚነትን ከማስፋት ይልቅ በራስ መተማመንን ሊጨምሩ ይችላሉ።
የእውነተኛ-ዓለም አተገባበር
አይፈለጌ መልእክት ከፍተኛ ትክክለኛነትን ያጣራል ስለዚህ ህጋዊ ኢሜይሎች በጭራሽ በስህተት ወደ አይፈለጌ መልእክት አቃፊ አይላኩም።
የሕክምና የማጣሪያ ምርመራዎች በበሽታው የተያዙ በሽተኞችን ላለማጣት እና ለክትትል ተጨማሪ የውሸት አወንታዊ ውጤቶችን ለመቀበል ለከፍተኛ ማስታወስ ቅድሚያ ይሰጣሉ።
የፍለጋ እና የምክር ስርዓቶች የደረጃ ጥራትን ለመለካት precision@k (ከከፍተኛ k ውጤቶች ውስጥ ምን ያህሉ ተዛማጅ ናቸው) ሪፖርት ያደርጋሉ።
ሁለቱም የውሸት ማንቂያዎች እና ያመለጡ ማጭበርበር ብዙ ወጪ የሚጠይቁ በመሆናቸው የማጭበርበር ፈልጎ ማግኘቱ ትክክለኛነትን እና ማስታወስን በF1 ነጥብ በኩል ያስተካክላል።
የትግበራ ቅጦች
ትክክለኛነት እና ማስታወስ በተግባር
አይፈለጌ መልእክት ከፍተኛ ትክክለኛነትን ያጣራል ስለዚህ ህጋዊ ኢሜይሎች በጭራሽ በስህተት ወደ አይፈለጌ መልእክት አቃፊ አይላኩም።
አይፈለጌ መልእክት ከፍተኛ ትክክለኛነትን ያጣራል ስለዚህ ህጋዊ ኢሜይሎች በጭራሽ በስህተት ወደ አይፈለጌ መልእክት አቃፊ አይላኩም ቡድኖች ብዙውን ጊዜ የጥራት ደረጃዎችን ፊት ለፊት ሲገልጹ የተሻሉ ውጤቶችን ያገኛሉ ፣ ለጫፍ ጉዳዮች የሰውን እድገት መንገድ ሲይዙ እና ሁለቱንም የምርታማነት ግኝቶችን እና የስህተት ወጪዎችን በጊዜ ሂደት ይከታተላሉ።
ትክክለኛነት እና ማስታወስ በተግባር
የሕክምና የማጣሪያ ምርመራዎች በበሽታው የተያዙ በሽተኞችን ላለማጣት እና ለክትትል ተጨማሪ የውሸት አወንታዊ ውጤቶችን ለመቀበል ለከፍተኛ ማስታወስ ቅድሚያ ይሰጣሉ።
የሕክምና የማጣሪያ ምርመራዎች በበሽታው የተያዙ በሽተኞችን ላለማጣት ለከፍተኛ መታሰቢያ ቅድሚያ ይሰጣሉ ፣ለተከታታይ ቡድኖች ብዙ የውሸት አዎንታዊ ውጤቶችን መቀበል ብዙውን ጊዜ የጥራት ደረጃዎችን ከፊት ሲገልጹ የተሻለ ውጤት ያገኛሉ ፣ለጫፍ ጉዳዮች የሰው ልጅ እድገት መንገድን ይጠብቃሉ ፣ እና ሁለቱንም የምርታማነት ትርፍ እና የስህተት ወጪዎችን በጊዜ ሂደት ይከታተላሉ።
ትክክለኛነት እና ማስታወስ በተግባር
የፍለጋ እና የምክር ስርዓቶች የደረጃ ጥራትን ለመለካት precision@k (ከከፍተኛ k ውጤቶች ውስጥ ምን ያህሉ ተዛማጅ ናቸው) ሪፖርት ያደርጋሉ።
የፍለጋ እና የምክር ሥርዓቶች የደረጃ ጥራትን ለመለካት precision@k (ምን ያህሉ ከፍተኛ የ k ውጤቶች ተዛማጅ ናቸው) ሪፖርት ያደርጋሉ ቡድኖች ብዙውን ጊዜ የጥራት ደረጃዎችን ከፊት ሲገልጹ የተሻለ ውጤት ያገኛሉ፣ ለዳር ጉዳዮች የሰው ልጅ መሻሻል መንገድን ይጠብቁ እና ሁለቱንም የምርታማነት ግኝቶች እና የስህተት ወጪዎችን በጊዜ ሂደት ይከታተላሉ።
ትክክለኛነት እና ማስታወስ በተግባር
ሁለቱም የውሸት ማንቂያዎች እና ያመለጡ ማጭበርበር ብዙ ወጪ የሚጠይቁ በመሆናቸው የማጭበርበር ፈልጎ ማግኘቱ ትክክለኛነትን እና ማስታወስን በF1 ነጥብ በኩል ያስተካክላል።
ሁለቱም የውሸት ማንቂያዎች እና ያመለጡ ማጭበርበሮች ውድ ስለሆኑ የማጭበርበር ማወቂያ ትክክለኛነትን እና ማስታወስን በF1 ነጥብ በኩል ያስተካክላል።
አደጋዎች እና የጥበቃ መንገዶች
የተለያዩ ቡድኖች ተመሳሳይ ቃል በተለያየ መንገድ ሊጠቀሙ ይችላሉ፣ ስለዚህ ወሰንን ቀደም ብለው ይግለጹ።
የገሃዱ ዓለም አፈጻጸም ያልተስተካከለ ሆኖ ሳለ ማመሳከሪያዎች ጠንካራ ሊመስሉ ይችላሉ።
የውሂብ ጥራት እና የግምገማ እቅዶችን ችላ ማለት ብዙውን ጊዜ ደካማ ውጤቶችን ይፈጥራል.
የትግበራ ፍኖተ ካርታ
የሚፈልጉትን ውጤት በግልፅ ቋንቋ ትርጉም ይጀምሩ።
የሚፈልጉትን ውጤት በግልፅ ቋንቋ ትርጉም ይጀምሩ። እያንዳንዱን እርምጃ እንደማስረጃ በር ያዙት፡ መመዘኛዎቹ ካልተሟሉ፣ መልቀቅን ለአፍታ አቁም፣ ክፍተቱን ይዝጉ እና ከዚያ ብቻ አጠቃቀምን ያስፋፉ።
ከመሞከርዎ በፊት አንድ የስኬት መለኪያ እና አንድ የውድቀት ሁኔታ ይምረጡ።
ከመሞከርዎ በፊት አንድ የስኬት መለኪያ እና አንድ የውድቀት ሁኔታ ይምረጡ። እያንዳንዱን እርምጃ እንደማስረጃ በር ያዙት፡ መመዘኛዎቹ ካልተሟሉ፣ መልቀቅን ለአፍታ አቁም፣ ክፍተቱን ይዝጉ እና ከዚያ ብቻ አጠቃቀምን ያስፋፉ።
አንድ ትንሽ አብራሪ በተወካይ ውሂብ ያሂዱ እንጂ የተጣራ ማሳያ ስብስብ አይደለም።
አንድ ትንሽ አብራሪ በተወካይ ውሂብ ያሂዱ እንጂ የተጣራ ማሳያ ስብስብ አይደለም። እያንዳንዱን እርምጃ እንደማስረጃ በር ያዙት፡ መመዘኛዎቹ ካልተሟሉ፣ መልቀቅን ለአፍታ አቁም፣ ክፍተቱን ይዝጉ እና ከዚያ ብቻ አጠቃቀምን ያስፋፉ።
Precision and Recall የሚረዳበት እና ቀለል ያሉ ዘዴዎች የሚሻሉበት ሰነድ።
Precision and Recall የሚረዳበት እና ቀለል ያሉ ዘዴዎች የሚሻሉበት ሰነድ። እያንዳንዱን እርምጃ እንደማስረጃ በር ያዙት፡ መመዘኛዎቹ ካልተሟሉ፣ መልቀቅን ለአፍታ አቁም፣ ክፍተቱን ይዝጉ እና ከዚያ ብቻ አጠቃቀምን ያስፋፉ።