ভিজ্যুয়াল এআই গাইড
গ্লিজেন গ্রাউন্ডেড জেনারেশন
GLIGEN (গ্রাউন্ডেড-ল্যাঙ্গুয়েজ-টু-ইমেজ জেনারেশন) আপনাকে টেক্সট প্রম্পটের পাশাপাশি মডেল বাউন্ডিং বক্স এবং লেবেলগুলিকে ফিড করে তৈরি করা ছবিতে বস্তুগুলি ঠিক কোথায় প্রদর্শিত হবে তা নিয়ন্ত্রণ করতে দেয়।
এই নির্দেশিকা শুনুনএআই-বর্ণিত · ~2 min
এই পৃষ্ঠায়2 মিনিট পঠিত
ওভারভিউ
এটি অস্পষ্ট পাঠ্য থেকে চিত্রকে সুনির্দিষ্ট, বিন্যাস-নিয়ন্ত্রণযোগ্য সংশ্লেষণে পরিণত করে।
গভীর ডুব
স্ট্যান্ডার্ড টেক্সট-টু-ইমেজ মডেলগুলি স্থানিক নিয়ন্ত্রণের সাথে লড়াই করে: 'একটি কুকুরের বাম দিকে একটি বিড়াল' জিজ্ঞাসা করুন এবং আপনি প্রায়শই স্থান নির্ধারণে ভুল করেন। GLIGEN, 2023 সালে প্রবর্তিত হয়েছে, গ্রাউন্ডিং ইনপুটগুলি যেমন পাঠ্য বা চিত্র সত্তা, কীপয়েন্ট বা রেফারেন্স চিত্রগুলির সাথে যুক্ত বাউন্ডিং বাক্স যুক্ত করে এটি সমাধান করে। গুরুত্বপূর্ণভাবে, এটি মূল পূর্বপ্রশিক্ষিত ডিফিউশন মডেলের ওজনকে হিমায়িত করে এবং নতুন প্রশিক্ষণযোগ্য গেটেড স্ব-মনোযোগ স্তরগুলিকে ইনজেক্ট করে যা গ্রাউন্ডিং টোকেনগুলিকে শোষণ করে। এর অর্থ হল এটি তার শেখা জ্ঞানকে ধ্বংস না করেই স্থিতিশীল ডিফিউশনের মতো একটি মডেলের উপর তৈরি করে এবং গেটিংটি শূন্যের কাছাকাছি শুরু হয় তাই প্রশিক্ষণের প্রথম দিকে বেস মডেলের আচরণ সংরক্ষিত হয়। ফলাফল হল ওপেন-ওয়ার্ল্ড গ্রাউন্ডেড জেনারেশন: আপনি নির্দিষ্ট স্থানে নির্বিচারে বর্ণিত বস্তু স্থাপন করতে পারেন এবং এটি গ্রাউন্ডিং প্রশিক্ষণের সময় দেখা যায় না এমন ধারণা এবং বিন্যাসকে সাধারণ করে তোলে।
বাস্তব-বিশ্ব বাস্তবায়ন
একটি বাউন্ডিং বক্স ব্যবহার করে তৈরি করা বিজ্ঞাপনের একটি সঠিক অঞ্চলে একটি লোগো বা পণ্য স্থাপন করা
রেন্ডার করার আগে প্রতিটি চরিত্র বা বস্তু কোথায় বসতে হবে তা নির্দিষ্ট করে জটিল দৃশ্য রচনা করা
পরিচিত গ্রাউন্ড-ট্রুথ বক্স অবস্থানগুলির সাথে বস্তু সনাক্তকরণের জন্য প্রশিক্ষণ ডেটা তৈরি করা হচ্ছে
একটি বিদ্যমান ছবির একটি ব্যবহারকারী-আঁকানো অঞ্চলে একটি বর্ণিত বস্তুর রং করা
GLIGEN গ্রাউন্ডেড জেনারেশনের ভবিষ্যত
গ্রাউন্ডেড এবং লেআউট-নিয়ন্ত্রণযোগ্য প্রজন্ম উত্পাদন সরঞ্জামগুলিতে মানক হয়ে উঠছে। GLIGEN-শৈলীর স্থানিক কন্ডিশনিং অন্যান্য নিয়ন্ত্রণ পদ্ধতি যেমন ControlNet এবং আঞ্চলিক প্রম্পটিংয়ের সাথে একত্রিত হবে এবং ভিডিও এবং 3D-এ প্রসারিত হবে যেখানে সময় এবং স্থানের সাথে বস্তুর স্থান নির্ধারণ করা আরও বেশি গুরুত্বপূর্ণ। যেহেতু মডেলগুলি নির্দেশনা-অনুসরণকারী ইন্টারফেসগুলি গ্রহণ করে, ড্র্যাগ-এন্ড-ড্রপ লেআউট নিয়ন্ত্রণ এবং ভাষা-নির্দিষ্ট দৃশ্য গ্রাফগুলি প্রম্পট-ইঞ্জিনিয়ারিং কৌশল ছাড়াই সুনির্দিষ্ট রচনাকে অ্যাক্সেসযোগ্য করে তুলবে।
এটাকে বাস্তবে প্রয়োগ করা হচ্ছে
কেন এটা গুরুত্বপূর্ণ
- গতি এবং স্কেল. ভিজ্যুয়াল এআই স্কেলে পরিদর্শন, সনাক্তকরণ এবং ট্যাগিং কাজগুলি স্বয়ংক্রিয়ভাবে করতে পারে।
- পছন্দগুলি তৈরি করুন. সৃজনশীল দলগুলি কম ম্যানুয়াল সংশোধন সহ ধারণাগুলিকে দ্রুত প্রোটোটাইপ করতে পারে।
- টিম এবং ওয়ার্কফ্লো. অপারেশনগুলি ইমেজ এবং ভিডিও সংকেত ব্যবহার করতে পারে যা আগে প্রক্রিয়া করা কঠিন ছিল।
জন্য সতর্ক
- প্রমাণ অস্পষ্ট হলে ছবির অধিকার এবং সম্মতি আইনি ঝুঁকিতে পরিণত হতে পারে।
- মডেলের কর্মক্ষমতা আলো, জনসংখ্যা এবং পরিবেশ জুড়ে পরিবর্তিত হতে পারে।
- আস্থার থ্রেশহোল্ডগুলি পর্যবেক্ষণ করা না হলে মিথ্যা ইতিবাচকগুলি অলক্ষিত হতে পারে।
পরবর্তী পদক্ষেপ
- নির্ভুলতা, প্রত্যাহার, এবং ত্রুটি খরচের জন্য গ্রহণযোগ্যতার মানদণ্ড নির্ধারণ করুন।
- প্রকৃত উৎপাদন অবস্থার সাথে মেলে এমন ডেটা দিয়ে পরীক্ষা করুন।
- কম-আস্থা বা উচ্চ-প্রভাব ভবিষ্যদ্বাণীর জন্য মানুষের পর্যালোচনা যোগ করুন।
- মডেল ড্রিফ্ট ট্র্যাক করুন এবং ক্যামেরা বা ডেটাসেট পরিবর্তনের পরে পুনরায় যাচাই করুন।
অন্বেষণ চালিয়ে যান
ফ্রি নিউজলেটার
প্রতিদিনের এআই ব্রিফিং পান
প্রতি সপ্তাহের কাজের দিন সকালে তিনটি যাচাইকৃত এআই স্টোরি, সহজ ইংরেজিতে লেখা। চিরকালের জন্য ফ্রি, কোনো বিজ্ঞাপন নেই।
প্রতি সপ্তাহের কাজের দিনে একটি ইমেল। এক ক্লিকেই আনসাবস্ক্রাইব করুন। আমরা কখনোই আপনার ঠিকানা বিক্রি বা শেয়ার করি না।
নিজেকে পরীক্ষা করুন
Take the GLIGEN Grounded Generation quiz
প্রতিটি উত্তরের তাৎক্ষণিক ফিডব্যাক, এবং কোর্স পাস করার পর যাচাইযোগ্য আইডি সহ একটি শেয়ারযোগ্য সার্টিফিকেট।
ফ্রি এআই শিক্ষাকে সমর্থন করুন। AI Understanding একটি 501(c)(3) অলাভজনক প্রতিষ্ঠান — কোনো বিজ্ঞাপন নেই, কোনো পেওয়াল নেই, কখনোই না। একটি দান করুন
প্রায়শই জিজ্ঞাসিত প্রশ্নাবলী
GLIGEN গ্রাউন্ডেড জেনারেশন কি?
GLIGEN (গ্রাউন্ডেড-ল্যাঙ্গুয়েজ-টু-ইমেজ জেনারেশন) আপনাকে টেক্সট প্রম্পটের পাশাপাশি মডেল বাউন্ডিং বক্স এবং লেবেলগুলিকে ফিড করে তৈরি করা ছবিতে বস্তুগুলি ঠিক কোথায় প্রদর্শিত হবে তা নিয়ন্ত্রণ করতে দেয়। এটি অস্পষ্ট পাঠ্য থেকে চিত্রকে সুনির্দিষ্ট, বিন্যাস-নিয়ন্ত্রণযোগ্য সংশ্লেষণে পরিণত করে।
GLIGEN প্রাথমিকভাবে কোন সমস্যার সমাধান করে?
GLIGEN বাউন্ডিং বাক্সের মতো গ্রাউন্ডিং ইনপুট যোগ করে যাতে আপনি ঠিক কোথায় বস্তুগুলি স্থাপন করা হয় তা নিয়ন্ত্রণ করতে পারেন, কোন প্লেইন টেক্সট প্রম্পট খারাপভাবে পরিচালনা করে।
কিভাবে GLIGEN pretrained ডিফিউশন মডেলের জ্ঞান সংরক্ষণ করে?
GLIGEN বেস মডেলকে হিমায়িত করে এবং নতুন গেটেড স্ব-মনোযোগ স্তরগুলিকে ইনজেকশন দেয়, তাই আসল শেখা জ্ঞান অক্ষত থাকে।
একটি সাধারণ গ্রাউন্ডিং ইনপুট GLIGEN কী গ্রহণ করে?
GLIGEN টেক্সট/ইমেজ এন্টিটি, কীপয়েন্ট এবং রেফারেন্স ইমেজ সহ বাউন্ডিং বাক্সের মাধ্যমে গ্রাউন্ডিং সমর্থন করে।
কেন GLIGEN এর নতুন মনোযোগ স্তরের গেটটি শূন্য থেকে শুরু করা হয়?
একটি শূন্য-প্রাথমিক গেট মানে প্রাথমিকভাবে গ্রাউন্ডিংয়ের কোন প্রভাব নেই, মূল মডেলটি সংরক্ষণ করা এবং নিয়ন্ত্রণ র্যাম্প আপ হিসাবে প্রশিক্ষণকে স্থিতিশীল রাখা।
GLIGEN-এ 'ওপেন-ওয়ার্ল্ড' গ্রাউন্ডেড জেনারেশন বলতে কী বোঝায়?
GLIGEN তার গ্রাউন্ডিং ট্রেনিং সেটের বাইরেও সাধারণীকরণ করে, নির্দিষ্ট স্থানে অভিনব বর্ণিত বস্তু স্থাপন করে।
শিখতে থাকুন
সম্পর্কিত গাইড
এই বিষয়ের জন্য বাছাই করা আরও গাইড