পরবর্তী আপপরবর্তী গাইড
অনলাইন এবং অফলাইন বৈশিষ্ট্য Skew পরিবেশন
টেকনিক্যাল
প্রযুক্তিগত গাইড
হার্ড নেগেটিভ মাইনিং সবচেয়ে তথ্যপূর্ণ, কঠিন থেকে আলাদা করার উদাহরণ বেছে নেয় সহজে যে মডেলটি ইতিমধ্যেই সঠিক হয়েছে তার জন্য প্রচেষ্টা নষ্ট করার পরিবর্তে প্রশিক্ষণের জন্য।
এই নির্দেশিকা শুনুনএআই-বর্ণিত · ~2 min
It is the trick that makes metric learning and object detection converge fast and accurately.
ট্রিপলেট বা বিপরীত ক্ষতির সাথে প্রশিক্ষণের সময়, বেশিরভাগ এলোমেলোভাবে নমুনা করা নেতিবাচকগুলি ইতিমধ্যেই অ্যাঙ্কর থেকে অনেক দূরে থাকে, তাই তারা শূন্য ক্ষয় এবং কোন গ্রেডিয়েন্ট তৈরি করে না, প্রশিক্ষণ স্টল। নেতিবাচক খনির কঠিন নেতিবাচক নির্বাচন করে এটি ঠিক করে: উদাহরণ যেগুলি ভুলভাবে অ্যাঙ্করের কাছাকাছি। অফলাইন মাইনিংয়ে, আপনি পর্যায়ক্রমে এইগুলি খুঁজে পেতে ডেটাসেট স্ক্যান করেন, যা ধীর এবং বাসি হয়ে যায়। অনলাইন মাইনিং প্রতিটি মিনি-ব্যাচের মধ্যে ফ্লাইতে তাদের গণনা করে: একটি ফরোয়ার্ড পাসের পরে, আপনি ব্যাচের সমস্ত জোড়া দূরত্বের দিকে তাকান এবং সবচেয়ে কঠিন লঙ্ঘনকারীদের বেছে নিন। ফেসনেট আধা-হার্ড মাইনিং চালু করেছে, ইতিবাচকের চেয়ে অনেক বেশি নেতিবাচককে বেছে নিয়েছে কিন্তু তারপরও মার্জিনের ভিতরে, অস্থিরতাকে এড়িয়ে যে একেবারে কঠিনতম নেতিবাচকগুলি প্রশিক্ষণের প্রথম দিকে হতে পারে।
মুখ শনাক্তকরণ প্রশিক্ষণ: FaceNet আধা-হার্ড অনলাইন মাইনিং ব্যবহার করে এমন এমবেডিং শিখতে যা দেখতে একই রকম ব্যক্তিদের আলাদা করে।
অবজেক্ট ডিটেকশন: SSD এবং অনুরূপ ডিটেক্টরগুলি বিরল বস্তুর বাক্সগুলির বিরুদ্ধে সহজ ব্যাকগ্রাউন্ড বাক্সগুলির বন্যাকে ভারসাম্য বজায় রাখতে হার্ড নেগেটিভ মাইনিং প্রয়োগ করে।
ঘন প্যাসেজ পুনরুদ্ধার: অনুসন্ধান এবং আরএজি সিস্টেমগুলি হার্ড নেগেটিভ ডকুমেন্টগুলি খনি করে যা প্রাসঙ্গিক দেখায় কিন্তু নয়, পুনরুদ্ধারকে তীক্ষ্ণ করে।
সুপারিশ সিস্টেম: মডেল মাইন আইটেম যা ব্যবহারকারী ক্লিক করেননি কিন্তু ক্লিক করা আইটেমগুলির সাথে সাদৃশ্যপূর্ণ, স্বাদে সূক্ষ্ম পার্থক্য শেখায়।
নীতি, যা কঠিন তার উপর প্রশিক্ষণ, এখন বৈপরীত্য স্ব-তত্ত্বাবধানে শিক্ষা চালায়, যেখানে বড় ইন-ব্যাচ নেগেটিভ পুল (এবং MoCo এর মতো মেমরি ব্যাঙ্ক) লেবেল ছাড়াই কঠিন তুলনা সরবরাহ করে। গবেষকরা একটি নেতিবাচক কতটা কঠিন হওয়া উচিত তা পরিমার্জন করছেন, যেহেতু খুব-কঠিন নেতিবাচকগুলি প্রায়শই ভুল লেবেলযুক্ত বা প্রায়-সদৃশ ইতিবাচক হতে পরিণত হয় যা প্রশিক্ষণকে নষ্ট করে। স্মার্ট, অনিশ্চয়তা-সচেতন মাইনিং এবং মডেল নিজেই তৈরি করা সিন্থেটিক হার্ড নেগেটিভের আশা করুন, সেইসাথে পুনরুদ্ধার সিস্টেমের সাথে আরও কঠোর একীকরণ যা প্রকৃত ব্যবহারকারীর প্রশ্নগুলি থেকে কঠিন নেতিবাচক খনি।
ফ্রি নিউজলেটার
প্রতি সপ্তাহের কাজের দিন সকালে তিনটি যাচাইকৃত এআই স্টোরি, সহজ ইংরেজিতে লেখা। চিরকালের জন্য ফ্রি, কোনো বিজ্ঞাপন নেই।
প্রতি সপ্তাহের কাজের দিনে একটি ইমেল। এক ক্লিকেই আনসাবস্ক্রাইব করুন। আমরা কখনোই আপনার ঠিকানা বিক্রি বা শেয়ার করি না।
নিজেকে পরীক্ষা করুন
প্রতিটি উত্তরের তাৎক্ষণিক ফিডব্যাক, এবং কোর্স পাস করার পর যাচাইযোগ্য আইডি সহ একটি শেয়ারযোগ্য সার্টিফিকেট।
ফ্রি এআই শিক্ষাকে সমর্থন করুন। AI Understanding একটি 501(c)(3) অলাভজনক প্রতিষ্ঠান — কোনো বিজ্ঞাপন নেই, কোনো পেওয়াল নেই, কখনোই না। একটি দান করুন
হার্ড নেগেটিভ মাইনিং সবচেয়ে তথ্যপূর্ণ, কঠিন থেকে আলাদা করার উদাহরণ বেছে নেয় সহজে যে মডেলটি ইতিমধ্যেই সঠিক হয়েছে তার জন্য প্রচেষ্টা নষ্ট করার পরিবর্তে প্রশিক্ষণের জন্য। এটি এমন একটি কৌশল যা মেট্রিক শিক্ষা এবং বস্তু সনাক্তকরণকে দ্রুত এবং সঠিকভাবে একত্রিত করে।
সহজ নেতিবাচকগুলি মার্জিনের বাইরে ভালভাবে বসে, ইতিমধ্যেই ক্ষতি পূরণ করে, এবং মূলত কোন গ্রেডিয়েন্ট অবদান রাখে না, তাই প্রশিক্ষণ স্টল।
অনলাইন মাইনিং প্রতিটি ধাপে বর্তমান ব্যাচের মধ্যে জোড়ার মতো দূরত্ব গণনা করে, যখন অফলাইন মাইনিং পর্যায়ক্রমে পুরো ডেটাসেট স্ক্যান করে এবং বাসি হয়ে যেতে পারে।
আধা-হার্ড নেগেটিভগুলি ইতিবাচকের চেয়ে নোঙ্গর থেকে অনেক দূরে কিন্তু মার্জিনের ভিতরে পড়ে, যা পরম কঠিনতম ক্ষেত্রে অস্থিরতা ছাড়াই দরকারী, স্থিতিশীল গ্রেডিয়েন্ট দেয়।
ব্যাচ-হার্ড মাইনিং সবচেয়ে কঠিন কেস বাছাই করে: প্রতিটি অ্যাঙ্করের জন্য এটি ব্যাচের সবচেয়ে দূরবর্তী ইতিবাচক এবং নিকটতম (সবচেয়ে বিভ্রান্তিকর) নেতিবাচক লাগে।
একটি বড় ব্যাচ একটি বৃহত্তর পেয়ারওয়াইজ দূরত্ব ম্যাট্রিক্স দেয়, তাই প্রতিটি ধাপ থেকে সবচেয়ে কঠিন খননের জন্য আরও বেশি প্রার্থী নেতিবাচক রয়েছে।
শিখতে থাকুন
এই বিষয়ের জন্য বাছাই করা আরও গাইড
পরবর্তী আপপরবর্তী গাইড
অনলাইন এবং অফলাইন বৈশিষ্ট্য Skew পরিবেশন
টেকনিক্যাল