সংবাদে ফিরে যান
উদ্ভাবনAI Understanding ব্রিফিং

স্টাইল-ডিবিয়াসড ডিপিও: বাস্তবতা-সচেতন সিন্থেটিক পছন্দ ডেটা সহ এলএলএম জ্ঞান আপডেট করা

গবেষকরা সঞ্চিত জ্ঞান পুনরুদ্ধার করার জন্য বৃহৎ ভাষার মডেলের (LLMs) নির্ভুলতা উন্নত করার জন্য স্টাইল-ডিবিয়াসড ডাইরেক্ট প্রেফারেন্স অপ্টিমাইজেশান (SD-DPO) প্রস্তাব করেছেন।

4 min readRead the primary source
Source-provided image accompanying Style-Debiased DPO: Updating LLM Knowledge with Factuality-Aware Synthetic Preference Data
প্রাথমিক-উৎস নথিউৎস রেকর্ড করা হয়েছে
প্রকাশক
arxiv.org
উৎস লিঙ্ক
arxiv.orghttps://arxiv.org/abs/2609.16532
উত্স প্রকার
প্রাথমিক নথি - একটি অফিসিয়াল ঘোষণা, কাগজ, ফাইলিং বা প্রথম পক্ষের পৃষ্ঠা যা আমরা সরাসরি পড়ি।
প্রসঙ্গএটি 60 সেকেন্ডে বুঝুন

এখানে শুরু করুন

মূল পদ

ডিপিও (ডাইরেক্ট প্রেফারেন্স অপ্টিমাইজেশান)
একটি প্রশিক্ষণ পদ্ধতি যা একটি পৃথক পুরস্কার মডেলের প্রয়োজন ছাড়াই সরাসরি পছন্দের জোড়ায় মডেলগুলিকে সূক্ষ্ম-টিউন করে৷
বড় ভাষা মডেল (LLM)
টেক্সট তৈরি এবং বিশ্লেষণ করার জন্য বিশাল টেক্সট কর্পোরার উপর প্রশিক্ষিত একটি ভাষা মডেল।
বাস্তবতা
একটি মডেলের দাবি কতটা সঠিকভাবে যাচাইযোগ্য বাস্তব-বিশ্বের তথ্যের সাথে মেলে।
নিজেকে পরীক্ষা করুনAI কি? কুইজ

কি হয়েছে

Researchers proposed style-debiased direct preference optimization (SD-DPO) to improve the accuracy of large language models (LLMs) in retrieving stored knowledge. They tested SD-DPO on top of EntiGraph, a representative storing-side method that runs continued pretraining (CPT) on text synthesized from the corpus. The results showed that SD-DPO exceeds a baseline CPT on EntiGraph's synthetic data from the same base model and evaluates with the same procedure.

Researchers proposed style-debiased direct preference optimization (SD-DPO) to improve the accuracy of large language models (LLMs) in retrieving stored knowledge.

They tested SD-DPO on top of EntiGraph, a representative storing-side method that runs continued pretraining (CPT) on text synthesized from the corpus.

The results showed that SD-DPO exceeds a baseline CPT on EntiGraph's synthetic data from the same base model and evaluates with the same procedure.

উত্স বিবরণ: arxiv.org ↗

কেন এটা গুরুত্বপূর্ণ

The proposed method, SD-DPO, can improve the accuracy of LLMs in retrieving stored knowledge. This is particularly important for applications that require accurate and up-to-date knowledge, such as knowledge updating and editing. SD-DPO has the potential to improve the performance of LLMs in these applications.

The proposed method, SD-DPO, can improve the accuracy of LLMs in retrieving stored knowledge.

This is particularly important for applications that require accurate and up-to-date knowledge, such as knowledge updating and editing.

SD-DPO has the potential to improve the performance of LLMs in these applications.

Interactive Mechanism

ইন্টারেক্টিভ মেকানিজম: এটা আসলে কিভাবে কাজ করে

এই বিকাশের পিছনে অন্তর্নিহিত প্রযুক্তিটি ইন্টারেক্টিভভাবে অন্বেষণ করুন।

Thinking Budget (Test-Time Tokens):1,024 tokens
Complex Accuracy79%Math & Code Logic
Latency3.2sTime to first full output
Inference Cost$0.0092Per query estimated
Reasoning StyleStep VerificationInternal chain depth
Active Thinking Trace:
1Deconstruct user problem into formal constraints
2Propose candidate hypotheses & step-by-step calculation
3Self-correction: Backtrack and refute subtle edge cases
4Exhaustive consistency check & final output synthesis
Core takeaway: Test-time compute fundamentally changes AI economics. Instead of only scaling during pre-training, giving reasoning models more tokens at inference time allows them to systematically solve PhD-level STEM problems.
ইন্টারেক্টিভ কনসেপ্ট চেক+10 Points
What is AI? Quiz

A route planner searches possible journeys using explicit rules. What does this illustrate about AI?

পরবর্তী কি দেখতে

The proposed method, SD-DPO, has the potential to improve the performance of LLMs in knowledge updating and editing applications. Further research is needed to fully evaluate the effectiveness of SD-DPO and to explore its potential applications.

The proposed method, SD-DPO, has the potential to improve the performance of LLMs in knowledge updating and editing applications.

Further research is needed to fully evaluate the effectiveness of SD-DPO and to explore its potential applications.

The results of the study suggest that SD-DPO can improve the accuracy of LLMs in retrieving stored knowledge.

সম্পর্কিত গাইড এবং কুইজ

AI কি?এআই নীতিশাস্ত্রএআই এজেন্টএআই মডেল ব্যাখ্যা করা হয়েছেট্রান্সফরমারআপনি যা জানেন তা পরীক্ষা করুন - একটি বিনামূল্যের এআই কুইজ চেষ্টা করুনআমাদের শব্দকোষে একটি AI শব্দ দেখুনএআই মডেল রিলিজ ট্র্যাকার অনুসরণ করুন
এই দরকারী পাওয়া গেছে?