MWONGOZO wa Kiufundi

Kuweka upya Miundo

Reranker ni muundo wa hatua ya pili ambao hupata tena orodha fupi ya matokeo ya utafutaji kwa umuhimu wa hoja, kuimarisha upangaji baada ya kirudishaji haraka kuvuta watahiniwa.

dk 2 kusomaIlisasishwa mwisho

Muhtasari

It is a key ingredient in modern search and retrieval-augmented generation (RAG).

Dive ya kina

Utafutaji na mifumo ya RAG kawaida hufanya kazi katika hatua mbili. Kwanza, kirudishaji cha haraka (mara nyingi ni utafutaji wa vekta/upachikaji au neno muhimu BM25) huchota hati 50-100 za mgombea kutoka kwa mamilioni - zilizoboreshwa kwa kumbukumbu na kasi. Lakini pasi hiyo ya kwanza huweka alama kwenye hoja na hati kando, kwa hivyo inaweza kukosa nuance. Kupanga upya ni hatua ya usahihi: inachukua hoja na kila mgombea kwa pamoja na kutoa alama ya umuhimu iliyosawazishwa, kisha kupanga upya orodha ili matokeo bora zaidi yapande juu. Usanifu mkuu ni kisimbaji mtambuka: hulisha hoja na hati kwa pamoja kwenye kibadilishaji, ikiruhusu kila tokeni ya hoja kuhudhuria kila tokeni ya hati. Mwingiliano huu wa kina huwafanya wapangaji upya kuwa sahihi zaidi kuliko kupachika ufanano, kwa gharama ya kukimbia mara moja kwa kila mgombea.

Ufahamu wa Kiufundi

Tofauti ni encoder mbili dhidi ya msalaba-encoder. Kisimbaji-mbili hupachika hoja na hati kivyake katika vidhibiti, kwa hivyo mfanano ni bidhaa ya bei nafuu ya nukta - haraka na inayoweza kutayarishwa awali, lakini haina kina. Kisimbaji cha kusimba huambatanisha hoja na hati katika ingizo moja na huendesha pasi kamili ya kibadilishaji, na kutoa alama moja ya umuhimu kwa umakini mkubwa wa kiwango cha tokeni. Haiwezi kukokotwa mapema, kwa hivyo imehifadhiwa kwa kupanga upya orodha fupi ndogo. Miundo kama Cohere Rerank na BGE-reranker ni mfano wa hili.

Athari za kimkakati

Cost and budget

Maamuzi ya usanifu huendesha utendaji na gharama ya uendeshaji kwa miaka.

Maamuzi ya wazi zaidi

Elimu ya kiufundi husaidia timu kuchagua safu sahihi, sio tu mpya zaidi.

Quality control

Chaguo bora za uhandisi hupunguza matukio ya kuaminika katika uzalishaji.

Mustakabali wa Kuweka Miundo Upya

Rerankers zinazidi kuwa za kawaida katika mabomba ya RAG kwa sababu muktadha uliopangwa vyema huboresha moja kwa moja ubora wa majibu ya LLM na kupunguza hisia. Tarajia visimbaji pingamizi vyepesi zaidi, vyenye kasi zaidi, vibadilishaji upya vya lugha nyingi na vya aina nyingi (maandishi pamoja na picha au jedwali), na madirisha marefu ya muktadha ili hati nzima ziweze kupigwa alama. Wafanyaji upyaji wa 'listwise' wa msingi wa LLM wanaohukumu mgombeaji mzima kwa wakati mmoja wanaongezeka, na baadhi ya mifumo hutoa hukumu za kisimbaji mtambuka katika virejeshi vya bei nafuu ili kupata usahihi karibu na hatua ya kwanza.

Utekelezaji wa Ulimwengu Halisi

Gumzo la RAG likileta vipande 50 kwa kupachika utafutaji, kisha kupanga upya ili kulisha sehemu 5 za juu tu zinazofaa zaidi katika muktadha wa LLM.

Utafutaji wa E-commerce wa kupanga upya matokeo ya bidhaa ili bidhaa zinazolingana vyema na neno kamili la swali la mnunuzi kuonekana kwanza

Cohere Rerank au BGE-reranker inakuza usahihi wa utafutaji wa hati ya biashara juu ya maelfu ya sera za PDF.

Misingi ya maarifa ya usaidizi kwa mteja inayoweka upya nafasi ya makala ya usaidizi yaliyorejeshwa ili wakala atoe jibu moja muhimu zaidi hapo juu.

Hatari & Walinzi

Kuboresha kiwango kimoja kunaweza kuficha udhaifu mkubwa wa mfumo.

Gharama za miundombinu na matengenezo mara nyingi hupunguzwa.

Mapengo ya usalama na uonekanaji yanaweza kukua kadiri mifumo inavyozidi kuwa ngumu.

Ramani ya Utekelezaji

1

Bainisha muda, ubora na malengo ya gharama kabla ya utekelezaji.

2

Benchmark chini ya mzigo halisi na hali ya data.

3

Ufuatiliaji wa ala kwa makosa, kuteleza, na athari za mtumiaji.

4

Tayarisha njia za urejeshaji na majibu ya matukio kabla ya kuongeza ukubwa.

Endelea Kuchunguza

Free newsletter

Get the daily AI briefing

Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.

One email each weekday. Unsubscribe in one click. We never sell or share your address.

Test yourself

Take the Reranking Models quiz

Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.

Anza chemsha bongo

Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation

Mwongozo unaofuata

Jaribio la A/B la Miundo ya ML

Maswali yanayoulizwa mara kwa mara

What is Reranking Models?

Reranker ni muundo wa hatua ya pili ambao hupata tena orodha fupi ya matokeo ya utafutaji kwa umuhimu wa hoja, kuimarisha upangaji baada ya kirudishaji haraka kuvuta watahiniwa. Ni kiungo muhimu katika utafutaji wa kisasa na kizazi kilichoboreshwa (RAG).

Katika bomba la kawaida la urejeshaji wa hatua mbili, kazi ya mpangaji upya ni nini?

Retriever haraka hupata wagombea; mpangaji upya kisha anaweka alama kwenye orodha hiyo fupi ili kusukuma matokeo muhimu zaidi hadi juu.

Wafanyabiashara wengi wa usanifu hutumia usanifu gani?

Waweka upya kwa kawaida hutumia visimbaji-tofauti, hoja ya kulisha na hati kwa pamoja ili umakini uweze kuiga mwingiliano wao.

Kwa nini kiweka upya kisimbaji upya hakiwezi kutumiwa kutafuta mamilioni ya hati moja kwa moja?

Tofauti na upachikaji wa awali, kisimbaji cha msalaba lazima kiendeshe pasi kamili ya kibadilishaji kwa kila jozi, kwa hivyo imehifadhiwa kwa orodha fupi ndogo.

Je, ni faida gani kuu ya kisimbaji-mbili juu ya kisimbaji-mkataba?

Visimbaji viwili hupachika hati kwa kujitegemea na mapema, kuwezesha utafutaji wa haraka wa kufanana kwenye mikusanyiko mikubwa.

Wauzaji upya husaidiaje kupunguza hisia katika mifumo ya RAG?

Muktadha uliopangwa vyema na unaofaa zaidi huipa LLM msingi sahihi, ambao hupunguza majibu yaliyotungwa.