SeterusnyaPanduan seterusnya
Penindasan Bukan Maksimum
AI Visual
PANDUAN AI Bahasa
Perkaitan Marginal Maksimum (MMR) ialah kaedah penarafan semula yang mengimbangi sejauh mana relevan sesuatu hasil berbanding perbezaannya daripada hasil yang telah dipilih.
Dengar panduan iniAI-diceritakan · ~2 min
It matters because pure relevance ranking often returns near-duplicate passages that waste space in a RAG context window.
Apabila sistem carian menjaringkan dokumen semata-mata berdasarkan kaitan dengan pertanyaan, hasil teratas selalunya berlebihan — lima petikan semuanya menyatakan perkara yang sama. MMR, yang diperkenalkan oleh Carbonell dan Goldstein pada tahun 1998, membetulkannya dengan memilih hasil satu demi satu. Pada setiap langkah ia memilih calon yang memaksimumkan adunan berwajaran: lambda menggandakan kaitannya dengan pertanyaan, tolak (1 tolak lambda) digandakan kesamaan maksimumnya dengan apa-apa sahaja yang telah dipilih. Lambda dekat 1 mengutamakan perkaitan tulen; dekat 0 ia memihak kepada kepelbagaian. Dalam penjanaan ditambah perolehan, MMR popular kerana mengambil set potongan yang pelbagai supaya model bahasa melihat bukti pelengkap dan bukannya fakta yang sama berulang, meningkatkan liputan tanpa membesarkan konteks.
Bot sembang RAG menggunakan pengambilan MMR supaya 5 bahagian teratasnya merangkumi aspek dasar yang berbeza dan bukannya lima perenggan perenggan yang sama.
Alat ringkasan penyelidikan menggunakan MMR untuk memilih petikan yang meminimumkan pertindihan, menghasilkan ringkasan yang lebih luas dan kurang berulang.
Agregator berita menyusun artikel dengan MMR untuk menunjukkan liputan yang berbeza-beza tentang sesuatu acara dan bukannya sepuluh saluran mengulangi satu berita.
Retriever kedai vektor LangChain mendedahkan search_type='mmr' dengan fetch_k dan lambda_mult untuk mempelbagaikan dokumen yang dikembalikan.
MMR kekal sebagai lalai ringan dalam pelanggan pangkalan data vektor seperti LangChain dan Chroma, di mana ia ditawarkan sebagai mod dapatkan semula satu baris. Sistem masa hadapan semakin memadankannya dengan objektif kepelbagaian yang dipelajari, pemilihan berasaskan kluster dan penaraf semula pengekod silang yang menilai kebaharuan lebih semantik daripada jarak kosinus. Apabila tetingkap konteks berkembang, penekanan beralih daripada menjimatkan ruang kepada menyusun bukti yang benar-benar pelengkap, memastikan pemilihan sedar kepelbagaian seperti MMR relevan walaupun kapasiti mentah adalah banyak.
Newsletter percuma
Tiga cerita AI yang disahkan setiap pagi hari bekerja, ditulis dalam Bahasa Inggeris biasa. Percuma selamanya, tiada iklan.
Satu e-mel setiap hari bekerja. Berhenti melanggan dalam satu klik. Kami tidak pernah menjual atau berkongsi alamat anda.
Uji diri anda
Maklum balas segera pada setiap jawapan, dan sijil yang boleh dikongsi dengan ID yang boleh disahkan sebaik sahaja anda lulus kursus.
Sokong pendidikan AI percuma. AI Understanding ialah pertubuhan bukan keuntungan 501(c)(3) — tiada iklan, tiada bayaran dinding, selamanya. Buat derma
Perkaitan Marginal Maksimum (MMR) ialah kaedah penarafan semula yang mengimbangi sejauh mana relevan sesuatu hasil berbanding perbezaannya daripada hasil yang telah dipilih. Ini penting kerana kedudukan perkaitan tulen sering mengembalikan petikan hampir pendua yang membuang ruang dalam tetingkap konteks RAG.
MMR menangani kecenderungan kedudukan perkaitan sahaja untuk memaparkan banyak hasil yang menyatakan perkara yang sama, dengan memberi ganjaran kepada kebaharuan.
Perkaitan pemberat Lambda; dekat 1 istilah perkaitan mendominasi, manakala dekat 0 istilah kepelbagaian (persamaan rendah) mendominasi.
MMR ialah kaedah lelaran tamak: setiap pilihan memaksimumkan perkaitan tolak persamaan maksimum dengan item yang telah dipilih.
The general algorithm permits suitable similarity functions; cosine is a common choice for vector representations.
Dengan mempelbagaikan ketulan yang diperoleh semula, MMR membantu model melihat pelbagai bukti dan bukannya fakta yang sama berulang, meningkatkan liputan.
Teruskan belajar
Lebih banyak panduan dipilih untuk topik ini
SeterusnyaPanduan seterusnya
Penindasan Bukan Maksimum
AI Visual