Mweghachite oke ngafe
Mweghachi nke oke osote (DPR) na-achọta ederede dabara adaba site n'ịtụle nkọwa ajụjụ na akụkụ dị ka ọnụọgụ ọnụọgụgụ, ọ bụghị okwu dabara adaba.
Nchịkọta
It matters because it can retrieve correct answers even when the query and the document share zero vocabulary.
Ime miri emi
DPR, nke Facebook AI webatara na 2020, na-eji ihe ngbanwe BERT abụọ dị iche iche: ihe ngbanwe ajụjụ na ntinye akwụkwọ. Nke ọ bụla na-atụgharị ederede ka ọ bụrụ vector nwere nnukwu ogologo ogologo (na-abụkarị akụkụ 768). Mkpa bụ ngwaahịa ntụpọ dị n'etiti vector ajuju na vector akụkụ, yabụ iweghachite na-aghọ ọchụchọ agbataobi kacha nso maka ntinye akwụkwọ agbagoro agbagoro. A zụrụ ihe nlereanya ahụ na ebumnuche dị iche: dọpụta vector nke ziri ezi nso na ajụjụ a wee kwapụ ndị na-ezighi ezi, na-eji ihe ndị dị n'ime batch gbakwunyere ihe ndị siri ike sitere na BM25. N'elu akara QA mepere emepe dị ka ajụjụ eke, DPR meriri BM25 ogologo oge site n'akụkụ buru ibu, na-egosi na mmụkọ semantic dakọtara nwere ike karịa ọchụchọ isiokwu maka ịza ajụjụ.
Nghọta nka nka
DPR bụ ihe ngbanwe bi-encoder: ọ na-edobe ajụjụ a na akụkụ ọ bụla n'onwe ya, ya mere a na-agbakọ vectors akụkụ niile otu ugboro ma chekwaa ya na ndeksi vector (dịka, FAISS). N'oge njụ-ajụjụ, ị na-edobe ajụjụ a naanị, wee mee ọchụchọ agbataobi kacha nso. Ọzụzụ na-adabere na-adịghị mma n'ime-batch - akụkụ ndị ọzọ dị n'otu obere obere na-eje ozi dị ka ihe atụ na-adịghị mma nke fọrọ nke nta ka ọ bụrụ n'efu, nke na-ahapụ otu ụzọ dị mma ịmepụta ọtụtụ ntụnyere dị iche iche nke ọma.
Mmetụta atụmatụ
Ọsọ na ọnụ ọgụgụ
Usoro ọrụ asụsụ nwere ike ịga ngwa ngwa n'achụghị nkwụsi ike.
Nweta na iru
Ọ na-agbasawanye ohere n'ofe asụsụ na ụdị nzikọrịta ozi.
Mkpebi doro anya
Ndị otu nwere ike itinyekwu oge na ikpe ebe akpaaka na-ejikwa nkwughachi.
Ọdịnihu nke iweghachite ngafe dị oke egwu
Mweghachi nke ukwuu ugbu a na-akwado ọtụtụ ọkpọkọ ọgbọ eweghachite na-enye nnukwu ụdị asụsụ. Nchọpụta na-aga n'ihu na sistemụ ngwakọ nke na-ejikọta ọnụ ọgụgụ dị ukwuu na nke nkọwa, ụdị mmekọrịta oge dị ka ColBERT nke na-edobe vectors nke ọ bụla maka nkwekọ kacha mma, yana ntinye ntụziaka na-emegharị na-adaba n'ọtụtụ ọrụ. Na-atụ anya ihe ngbanwe dị ọnụ ala karịa, asụsụ ọtụtụ asụsụ na ogologo oge, gbakwunyere nkwado siri ike nke ndị na-eweghachite ya na igwe ọkụ ha na-eje ozi.
Mmejuputa n'ezie n'ụwa
Sistemụ azịza ajụjụ meghere ngalaba na-adọta akwado akụkụ Wikipedia tupu LLM edee azịza ya
Achọ akwụkwọ ụlọ ọrụ ebe ndị ọrụ na-ajụ ajụjụ eke wee nweta paragraf ndị dị mkpa ọbụlagodi na enweghị mkpụrụokwu kpọmkwem
Bots na-akwado ndị ahịa na-eweghachite akụkọ etiti enyemaka ziri ezi site na mkpesa edegharịrị
Nzaghachi mkparịta ụka na-eweghachite na-agbadata na ntọala ihe ọmụma nkeonwe iji belata nhụsianya
Ihe ize ndụ & okporo ụzọ nche
Eziokwu ndị e chepụtara echepụta nwere ike jiri nwayọ tinye akụkọ, nkwado nkwado, ma ọ bụ nsonaazụ nyocha.
Mmetụta ngwa ngwa nwere ike ịmepụta nsonaazụ na-ekwekọghị ekwekọ n'ofe arịrịọ ndị yiri ya.
Enwere ike ikpughe data ederede nwere mmetụta ma ọ bụrụ na njikwa ohere adịghị ike.
Map mmejuputa
Kọwaa usoro mmepụta, ụda, na ụkpụrụ ịdịmma tupu ibugharị.
Weghachite nzaghachi site na isi mmalite ntụkwasị obi mgbe ọ bụla izi ezi dị mkpa.
Debe ebe nleba anya mmadụ maka mpụta dị elu.
Sochie ụkpụrụ ọdịda ma na-azụghachi mkpali ma ọ bụ usoro ọrụ mgbe niile.
Nọgide na-eme nchọpụta
Free newsletter
Get the daily AI briefing
Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.
One email each weekday. Unsubscribe in one click. We never sell or share your address.
Test yourself
Take the Dense Passage Retrieval quiz
Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.
Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation
Ntuziaka na-esote
Mweghachite mmekọrịta ikpeazụ nke ColBERT
Ajụjụ a na-ajụkarị
What is Dense Passage Retrieval?
Mweghachi nke oke osote (DPR) na-achọta ederede dabara adaba site n'ịtụle nkọwa ajụjụ na akụkụ dị ka ọnụọgụ ọnụọgụgụ, ọ bụghị okwu dabara adaba. Ọ dị mkpa n'ihi na ọ nwere ike iweghachite azịza ziri ezi ọbụlagodi mgbe ajụjụ na akwụkwọ na-ekekọrịta efu okwu.
How does Dense Passage Retrieval decide which passages match a query?
Maapụ DPR ma ajụjụ na akụkụ dị iche iche n'ime nnukwu vectors wee tụọ mkpa ọ dị site na myirịta ha (ntụpọ ngwaahịa), na-ewepụta ihe ọ pụtara kama ịgbakọ okwu.
DPR na-eji ihe owuwu 'bi-encoder'. Kedu ihe nke ahụ pụtara?
Ihe mkpuchi bi-encoder nwere koodu nzuzo nọọrọ onwe ya maka ajụjụ na akụkụ Akwụkwọ Nsọ, yabụ enwere ike ibu ụzọ gbakọọ ma depụta ndenye akara n'ihu oge.
Kedu ihe kpatara enwere ike ịgbakọ vectors ụzọ na DPR?
Ebe ọ bụ na koodu ntinye akwụkwọ anaghị adabere na ajụjụ a, enwere ike ịhazi ma chekwaa ihe ntinye akwụkwọ niile, na-ahapụ naanị ajụjụ ka itinye koodu n'oge ọchụchọ.
Kedu aghụghọ ọzụzụ na-ahapụ DPR iwepụta ọtụtụ ihe atụ na-adịghị mma dị ọnụ ala?
Ihe na-adịghị mma n'ime batch na-ewere akụkụ ndị ọzọ dị na obere ogbe dị ka ihe na-adịghị mma maka ajụjụ enyere, na-emepụta ọtụtụ ụzọ abụọ dị iche iche nke ọma.
Kedu ngwá ọrụ a na-ejikarị eme ka ndị agbata obi DPR kacha nso na-achọ ngwa ngwa n'ogo?
Ndekọ vector dị ka FAISS na-eme nchọta ndị agbata obi kacha nso ngwa ngwa karịa nde ndenye ntinye akwụkwọ eburu ụzọ gbakọọ.