পরবর্তী আপপরবর্তী গাইড
DETR ট্রান্সফরমার সনাক্তকরণ
ভিজ্যুয়াল এআই
ভিজ্যুয়াল এআই গাইড
স্থানিক ট্রান্সফরমার নেটওয়ার্ক
স্থানিক ট্রান্সফরমার নেটওয়ার্ক (STNs) হল শেখার যোগ্য মডিউল যা একটি নিউরাল নেটওয়ার্ককে সক্রিয়ভাবে বিকৃত করতে, ঘোরাতে, ক্রপ করতে, অথবা গুরুত্বপূর্ণ বিষয়গুলির উপর ফোকাস করার জন্য তার ইনপুটকে পুনরায় স্কেল করতে দেয়।
এই নির্দেশিকা শুনুনএআই-বর্ণিত · ~2 min
এই পৃষ্ঠায়2 মিনিট পঠিত
ওভারভিউ
তারা সিএনএনকে স্থানিক মনোযোগ এবং অপরিবর্তনীয়তার একটি অন্তর্নির্মিত ধারণা দেয়।
গভীর ডুব
স্ট্যান্ডার্ড কনভোলিউশনাল নেটওয়ার্কগুলি অবস্থান, স্কেল এবং ঘূর্ণনের পরিবর্তনের জন্য দুর্বলভাবে অপরিবর্তনীয়, সামান্য সহনশীলতার জন্য পুলিংয়ের উপর নির্ভর করে। স্থানিক ট্রান্সফরমার নেটওয়ার্ক, জাডারবার্গ এট আল দ্বারা প্রবর্তিত। 2015 সালে, বৈশিষ্ট্য মানচিত্রে একটি সুস্পষ্ট জ্যামিতিক রূপান্তর সম্পাদন করে এমন একটি পার্থক্যযোগ্য মডিউল সন্নিবেশ করে এটি ঠিক করুন৷ মডিউলটির তিনটি অংশ রয়েছে: একটি স্থানীয়করণ নেটওয়ার্ক যা রূপান্তর পরামিতিগুলির পূর্বাভাস দেয়, একটি গ্রিড জেনারেটর যা এই পরামিতিগুলি থেকে একটি নমুনা গ্রিড তৈরি করে এবং একটি নমুনা যা গ্রিড পয়েন্টগুলিতে ইনপুটকে ইন্টারপোলেট করে৷ যেহেতু প্রতিটি ধাপে পার্থক্য করা যায়, পুরো ট্রান্সফরমারকে কোনো অতিরিক্ত তত্ত্বাবধান ছাড়াই ব্যাকপ্রপাগেশনের মাধ্যমে এন্ড-টু-এন্ড প্রশিক্ষিত করা হয়। নেটওয়ার্ক শিখে, উদাহরণস্বরূপ, কাত অঙ্কগুলিকে সোজা করা বা প্রাসঙ্গিক অঞ্চলে জুম বাড়াতে, নির্ভুলতা এবং দৃঢ়তা বৃদ্ধি করে৷
বাস্তব-বিশ্ব বাস্তবায়ন
দৃশ্য-পাঠ্য OCR সিস্টেমে স্বীকৃতির আগে বাঁকা বা ঘোরানো পাঠ্যকে সোজা এবং সারিবদ্ধ করা
সূক্ষ্ম-দানাযুক্ত চিত্র শ্রেণীবিভাগের জন্য বৈষম্যমূলক অঞ্চলে (যেমন পাখির চঞ্চু বা ডানা) জুম করা
ফেস-রিকগনিশন পাইপলাইনে একটি প্রিপ্রসেসিং ধাপ হিসেবে মুখের ভঙ্গি এবং সারিবদ্ধকরণকে স্বাভাবিক করা
মেডিকেল ইমেজ রেজিস্ট্রেশনে বিকৃতি সংশোধন এবং স্ক্যান সারিবদ্ধ করা
স্থানিক ট্রান্সফরমার নেটওয়ার্কের ভবিষ্যত
STNগুলি প্রভাবিত করে কীভাবে নেটওয়ার্কগুলি জ্যামিতি এবং মনোযোগ পরিচালনা করে, বিকৃতযোগ্য কনভোল্যুশন এবং শেখা-ওয়ার্পিং মডিউলগুলিতে খাওয়ানো হয়। স্ব-মনোযোগী ট্রান্সফরমার এখন আধিপত্য করলে, STN-শৈলীর ডিফারেনশিয়াবল স্যাম্পলিং সুস্পষ্ট জ্যামিতিক সারিবদ্ধকরণের প্রয়োজনের কাজগুলিতে অব্যাহত থাকে: পাঠ্য স্বীকৃতি, সূক্ষ্ম শ্রেণীবিভাগ, এবং পোজ স্বাভাবিককরণ। 3D দৃষ্টি, নিউরাল রেন্ডারিং এবং মেডিকেল ইমেজ রেজিস্ট্রেশনে প্রদর্শিত হওয়া অব্যাহত রাখার জন্য ডিফারেনশিয়াবল ওয়ার্পিং আশা করুন, প্রায়শই এটি দ্বারা প্রতিস্থাপিত না হয়ে মনোযোগের সাথে মিলিত হয়।
এটাকে বাস্তবে প্রয়োগ করা হচ্ছে
কেন এটা গুরুত্বপূর্ণ
- গতি এবং স্কেল. ভিজ্যুয়াল এআই স্কেলে পরিদর্শন, সনাক্তকরণ এবং ট্যাগিং কাজগুলি স্বয়ংক্রিয়ভাবে করতে পারে।
- পছন্দগুলি তৈরি করুন. সৃজনশীল দলগুলি কম ম্যানুয়াল সংশোধন সহ ধারণাগুলিকে দ্রুত প্রোটোটাইপ করতে পারে।
- টিম এবং ওয়ার্কফ্লো. অপারেশনগুলি ইমেজ এবং ভিডিও সংকেত ব্যবহার করতে পারে যা আগে প্রক্রিয়া করা কঠিন ছিল।
জন্য সতর্ক
- প্রমাণ অস্পষ্ট হলে ছবির অধিকার এবং সম্মতি আইনি ঝুঁকিতে পরিণত হতে পারে।
- মডেলের কর্মক্ষমতা আলো, জনসংখ্যা এবং পরিবেশ জুড়ে পরিবর্তিত হতে পারে।
- আস্থার থ্রেশহোল্ডগুলি পর্যবেক্ষণ করা না হলে মিথ্যা ইতিবাচকগুলি অলক্ষিত হতে পারে।
পরবর্তী পদক্ষেপ
- নির্ভুলতা, প্রত্যাহার, এবং ত্রুটি খরচের জন্য গ্রহণযোগ্যতার মানদণ্ড নির্ধারণ করুন।
- প্রকৃত উৎপাদন অবস্থার সাথে মেলে এমন ডেটা দিয়ে পরীক্ষা করুন।
- কম-আস্থা বা উচ্চ-প্রভাব ভবিষ্যদ্বাণীর জন্য মানুষের পর্যালোচনা যোগ করুন।
- মডেল ড্রিফ্ট ট্র্যাক করুন এবং ক্যামেরা বা ডেটাসেট পরিবর্তনের পরে পুনরায় যাচাই করুন।
অন্বেষণ চালিয়ে যান
ফ্রি নিউজলেটার
প্রতিদিনের এআই ব্রিফিং পান
প্রতি সপ্তাহের কাজের দিন সকালে তিনটি যাচাইকৃত এআই স্টোরি, সহজ ইংরেজিতে লেখা। চিরকালের জন্য ফ্রি, কোনো বিজ্ঞাপন নেই।
প্রতি সপ্তাহের কাজের দিনে একটি ইমেল। এক ক্লিকেই আনসাবস্ক্রাইব করুন। আমরা কখনোই আপনার ঠিকানা বিক্রি বা শেয়ার করি না।
নিজেকে পরীক্ষা করুন
Take the Spatial Transformer Networks quiz
প্রতিটি উত্তরের তাৎক্ষণিক ফিডব্যাক, এবং কোর্স পাস করার পর যাচাইযোগ্য আইডি সহ একটি শেয়ারযোগ্য সার্টিফিকেট।
ফ্রি এআই শিক্ষাকে সমর্থন করুন। AI Understanding একটি 501(c)(3) অলাভজনক প্রতিষ্ঠান — কোনো বিজ্ঞাপন নেই, কোনো পেওয়াল নেই, কখনোই না। একটি দান করুন
প্রায়শই জিজ্ঞাসিত প্রশ্নাবলী
স্থানিক ট্রান্সফরমার নেটওয়ার্ক কি?
স্থানিক ট্রান্সফরমার নেটওয়ার্ক (STNs) হল শেখার যোগ্য মডিউল যা একটি নিউরাল নেটওয়ার্ককে সক্রিয়ভাবে বিকৃত করতে, ঘোরাতে, ক্রপ করতে, অথবা গুরুত্বপূর্ণ বিষয়গুলির উপর ফোকাস করার জন্য তার ইনপুটকে পুনরায় স্কেল করতে দেয়। তারা সিএনএন-কে স্থানিক মনোযোগ এবং অব্যবস্থার অন্তর্নির্মিত অনুভূতি দেয়।
একটি স্পেশিয়াল ট্রান্সফরমার নেটওয়ার্ক একটি নিউরাল নেটওয়ার্কে কী ক্ষমতা যুক্ত করে?
STNs একটি শেখার মডিউল সন্নিবেশ করান যা প্রাসঙ্গিক বিষয়বস্তুর উপর ফোকাস করার জন্য অনুবাদ, ঘোরানো, স্কেল, বা ওয়ার্প বৈশিষ্ট্য মানচিত্র করতে পারে।
কোন তিনটি উপাদান একটি স্থানিক ট্রান্সফরমার মডিউল তৈরি করে?
একটি STN একটি স্থানীয়করণ নেটওয়ার্ক (প্যারামিটারের পূর্বাভাস দেয়), একটি গ্রিড জেনারেটর (নমুনা স্থানাঙ্ক তৈরি করে), এবং একটি নমুনা (ইনপুটকে ইন্টারপোলেট করে) নিয়ে গঠিত।
কেন একটি স্থানিক ট্রান্সফরমার নেটওয়ার্ককে সাধারণ ব্যাকপ্রপাগেশনের সাথে প্রশিক্ষিত করা যেতে পারে?
স্যাম্পলারে বাইলিনিয়ার ইন্টারপোলেশন পার্থক্যযোগ্য, তাই গ্রেডিয়েন্টগুলি গ্রিড জেনারেটরের মাধ্যমে লোকালাইজেশন নেটওয়ার্কে প্রবাহিত হয়, শেষ থেকে শেষ প্রশিক্ষণ সক্ষম করে।
স্থানীয়করণ নেটওয়ার্ক সাধারণত একটি affine রূপান্তরের জন্য আউটপুট কি করে?
অ্যাফাইন রূপান্তরের জন্য, স্থানীয়করণ নেটওয়ার্ক 2x3 ম্যাট্রিক্স এনকোডিং অনুবাদ, স্কেল, ঘূর্ণন এবং শিয়ার হিসাবে সাজানো ছয়টি মান ভবিষ্যদ্বাণী করে।
স্ট্যান্ডার্ড সিএনএন কেন শুধুমাত্র স্থানিক পরিবর্তনের প্রতি দুর্বলভাবে অপরিবর্তনীয়, এসটিএনকে অনুপ্রাণিত করে?
সিএনএনগুলি পুলিং এর মাধ্যমে শুধুমাত্র পরিমিত স্থানিক পরিবর্তন অর্জন করে; STNগুলি অবস্থান, স্কেল এবং ঘূর্ণন পরিচালনা করার জন্য একটি স্পষ্ট, শেখার উপায় যোগ করে।
শিখতে থাকুন
সম্পর্কিত গাইড
এই বিষয়ের জন্য বাছাই করা আরও গাইড