የቴክኒክ መመሪያ

ሞዴሎችን ማስተካከል

ሬራንከር ለጥያቄው ተዛማጅነት ያላቸውን የፍለጋ ውጤቶች ዝርዝር እንደገና የሚያስመዘግብ ሁለተኛ ደረጃ ሞዴል ነው፣ ፈጣን ሰርስሪ እጩዎችን ከጎተተ በኋላ ትዕዛዙን በማሳየት።

2 ሚን አንብብለመጨረሻ ጊዜ የዘመነው

አጠቃላይ እይታ

It is a key ingredient in modern search and retrieval-augmented generation (RAG).

ጥልቅ ዳይቭ

የፍለጋ እና RAG ስርዓቶች አብዛኛውን ጊዜ በሁለት ደረጃዎች ይሰራሉ. በመጀመሪያ ፈጣን መልሶ ማግኛ (ብዙውን ጊዜ ቬክተር/መክተት ፍለጋ ወይም BM25 ቁልፍ ቃል) ምናልባት 50-100 እጩ ሰነዶችን ከሚሊዮኖች ይጎትታል - ለማስታወስ እና ለፍጥነት የተመቻቸ። ነገር ግን ያ መጀመሪያ ማለፊያ መጠይቁን እና ሰነዶችን ለየብቻ ስለሚያስቆጥር ልዩነቱን ሊያጣ ይችላል። ሪራንከር ትክክለኛው ደረጃ ነው፡ መጠይቁን እና እያንዳንዱን እጩ አንድ ላይ ወስዶ ጥሩ ጥራት ያለው ተዛማጅነት ያለው ነጥብ ያስወጣል፣ ከዚያም ዝርዝሩን እንደገና በማዘዝ ምርጡ ውጤቶች ወደ ላይ ይወጣሉ። ዋናው አርክቴክቸር የመስቀል ኢንኮደር ነው፡ መጠይቁን እና ሰነዱን በጋራ ወደ ትራንስፎርመር ይመገባል፣ ይህም እያንዳንዱ የጥያቄ ቶከን በእያንዳንዱ ሰነድ ቶከን ላይ እንዲገኝ ያስችለዋል። ይህ ጥልቅ መስተጋብር በአንድ እጩ አንድ ጊዜ ለመሮጥ በሚያስከፍለው ዋጋ፣ ተመሳሳይነትን ከመክተት ይልቅ ሬራንከሮችን የበለጠ ትክክለኛ ያደርገዋል።

ቴክኒካዊ ግንዛቤ

ተቃርኖው ባለሁለት ኢንኮደር እና መስቀል ኢንኮደር ነው። ባለ ሁለት ኢንኮደር መጠይቅን እና ሰነድን በራሱ ወደ ቬክተር ያስገባል፣ ስለዚህ መመሳሰል ርካሽ የነጥብ ምርት ነው - ፈጣን እና አስቀድሞ ሊሰላ የሚችል፣ ግን ጥልቀት የሌለው። ተሻጋሪ ኢንኮደር መጠይቁን እና ሰነድን ወደ አንድ ግብአት ያዋህዳል እና ሙሉ የትራንስፎርመር ማለፊያ ያስኬዳል፣ ይህም የበለጸገ የማስመሰያ ደረጃ ትኩረት ያለው አንድ ተዛማጅ ነጥብ ያስገኛል። አስቀድሞ ሊሰላ አይችልም፣ ስለዚህ ትንሽ የእጩ ዝርዝርን ለመቀየር ተይዟል። እንደ Cohere Rerank እና BGE-reranker ያሉ ሞዴሎች ለዚህ ምሳሌ ይሆናሉ።

ስልታዊ ተጽእኖ

ወጪ እና በጀት

የስነ-ህንፃ ውሳኔዎች ለዓመታት አፈጻጸምን እና የሥራ ማስኬጃ ወጪዎችን ያንቀሳቅሳሉ.

ግልጽ ውሳኔዎች

የቴክኒክ ትምህርት ቡድኖች አዲሱን ብቻ ሳይሆን ትክክለኛውን ቁልል እንዲመርጡ ይረዳል።

የጥራት ቁጥጥር

የተሻሉ የምህንድስና ምርጫዎች በምርት ውስጥ አስተማማኝነት ክስተቶችን ይቀንሳሉ.

ሞዴሎችን የመቀየር የወደፊት ዕጣ

በተሻለ ሁኔታ የተስተካከለ አውድ የኤልኤልኤም ምላሽ ጥራትን ስለሚያሻሽል እና ቅዠትን ስለሚቀንስ ሬራንከርስ በ RAG ቧንቧዎች ውስጥ መደበኛ እየሆኑ ነው። ሙሉ ሰነዶች ነጥብ ማግኘት እንዲችሉ ቀላል፣ ፈጣን መስቀል-ኢንኮደሮች፣ ባለብዙ ቋንቋ እና መልቲሞዳል ሪራንከሮች (ጽሑፍ እና ምስሎች ወይም ሰንጠረዦች) እና ረጅም አውድ መስኮቶችን ይጠብቁ። በኤል ኤም ኤል ላይ የተመሰረቱ በ‹‹listwise› ሬራንከሮች በአንድ ጊዜ በተዘጋጀው ሙሉ እጩ ላይ የሚፈርዱ ናቸው፣ እና አንዳንድ ስርዓቶች ትክክለኛነትን ወደ መጀመሪያው ደረጃ ለመቅረብ የመቀየሪያ አቋራጭ ፍርዶችን ወደ ርካሽ ሰርስሮዎች ይመለሳሉ።

የእውነተኛ-ዓለም አተገባበር

አንድ RAG ቻትቦት ፍለጋን በማካተት 50 ቁርጥራጮችን ሰርስሯል፣ከዚያም በጣም አስፈላጊ የሆኑትን 5 ዋና ዋና ክፍሎችን ወደ LLM አውድ ለመመገብ ደረጃውን ቀይሯል።

የኢ-ኮሜርስ ፍለጋ የምርት ውጤቶችን እንደገና በማዘዝ ከገዢው ሙሉ መጠይቅ ሐረግ ጋር የሚዛመዱ ዕቃዎች መጀመሪያ እንዲታዩ

Cohere Rerank ወይም BGE-reranker በሺዎች በሚቆጠሩ የፖሊሲ ፒዲኤፎች የድርጅት ሰነድ ፍለጋ ትክክለኛነትን ያሳድጋል

የደንበኛ ድጋፍ የእውቀት መሠረቶች የተገኙ የእርዳታ መጣጥፎችን ደረጃ በመቀየር ተወካዩ ብቸኛው በጣም ተገቢ የሆነውን መልስ ከላይ በኩል እንዲያሳይ

አደጋዎች እና የጥበቃ መንገዶች

አንድ ቤንችማርክን ማሳደግ ሰፋ ያሉ የስርዓት ድክመቶችን ሊደብቅ ይችላል።

የመሠረተ ልማት እና የጥገና ወጪዎች ብዙ ጊዜ ዝቅተኛ ናቸው.

ስርዓቶች ይበልጥ ውስብስብ ሲሆኑ የደህንነት እና የታዛቢነት ክፍተቶች ሊያድጉ ይችላሉ።

የትግበራ ፍኖተ ካርታ

1

ከመተግበሩ በፊት የቆይታ፣ የጥራት እና የወጪ ግቦችን ይግለጹ።

2

ቤንችማርክ በእውነተኛ ጭነት እና የውሂብ ሁኔታዎች።

3

ለስህተቶች፣ ተንሸራታች እና የተጠቃሚ ተጽእኖ የመሳሪያ ክትትል።

4

ከመጠኑ በፊት የመመለሻ እና የአደጋ ምላሽ መንገዶችን ያዘጋጁ።

ማሰስዎን ይቀጥሉ

Free newsletter

Get the daily AI briefing

Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.

One email each weekday. Unsubscribe in one click. We never sell or share your address.

Test yourself

Take the Reranking Models quiz

Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.

ጥያቄ ጀምር

Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation

ቀጣይ መመሪያ

ለኤምኤል ሞዴሎች A/B ሙከራ

በተደጋጋሚ የሚጠየቁ ጥያቄዎች

What is Reranking Models?

ሬራንከር ለጥያቄው ተዛማጅነት ያላቸውን የፍለጋ ውጤቶች ዝርዝር እንደገና የሚያስመዘግብ ሁለተኛ ደረጃ ሞዴል ነው፣ ፈጣን ሰርስሪ እጩዎችን ከጎተተ በኋላ ትዕዛዙን በማሳየት። በዘመናዊ ፍለጋ እና መልሶ ማግኛ-የተጨመረ ትውልድ (RAG) ውስጥ ቁልፍ ንጥረ ነገር ነው።

በተለመደው ባለ ሁለት-ደረጃ ሰርስሮ ቧንቧ መስመር፣ የሬራንከር ስራው ምንድነው?

ፈጣን መልሶ ማግኛ እጩዎችን ያመጣል; በጣም ተዛማጅ የሆኑ ውጤቶችን ወደላይ ለመግፋት ሬራንከር ያን እጩዎች ዝርዝር በድጋሚ አስቆጥሯል።

አብዛኞቹ ሪራንተሮች ምን ዓይነት አርክቴክቸር ይጠቀማሉ?

ሬራንከሮች በተለምዶ ተሻጋሪ ኢንኮደሮችን፣ የመመገብ ጥያቄን እና ሰነድን በጋራ ይጠቀማሉ ስለዚህ ትኩረት ግንኙነታቸውን ሞዴል ማድረግ ይችላል።

ለምንድነው ተሻጋሪ ኢንኮደር ሪራንከር በሚሊዮን የሚቆጠሩ ሰነዶችን በቀጥታ ለመፈለግ ጥቅም ላይ ሊውል አይችልም?

ቀድሞ ሊሰሉ ከሚችሉ መክተቻዎች በተለየ፣ መስቀል ኢንኮደር በአንድ ጥንድ ሙሉ ትራንስፎርመር ማለፊያ ማስኬድ አለበት፣ ስለዚህ ለትንሽ የእጩዎች ዝርዝር ተይዟል።

የሁለት ኢንኮደር በመስቀል-ኢንኮደር ላይ ያለው ዋነኛ ጥቅም ምንድነው?

ባለ ሁለት ኢንኮደሮች ሰነዶችን በተናጥል እና በቅድሚያ አካትተዋል፣ ይህም በትላልቅ ስብስቦች ውስጥ ፈጣን ተመሳሳይነት መፈለግን ያስችላል።

ሬራንከሮች በRAG ሲስተሞች ውስጥ ቅዠትን ለመቀነስ እንዴት ይረዳሉ?

በተሻለ ሁኔታ የታዘዘ፣ ይበልጥ ተዛማጅነት ያለው አውድ ለኤል.ኤም.ኤም ትክክለኛ መሬት ይሰጣል፣ ይህም የተፈጠሩ መልሶችን ይቀንሳል።