কোম্পানি গাইড
EleutherAI
EleutherAI হল একটি তৃণমূল অলাভজনক গবেষণা সমষ্টি যেটি ওপেন-সোর্স বৃহৎ ভাষার মডেলের পথপ্রদর্শক যখন সীমান্ত AI কর্পোরেট দেয়ালের আড়ালে আটকে ছিল।
এই নির্দেশিকা শুনুনএআই-বর্ণিত · ~2 min
এই পৃষ্ঠায়2 মিনিট পঠিত
ওভারভিউ
এটি প্রমাণ করেছে যে একটি স্বেচ্ছাসেবক সম্প্রদায় বদ্ধ সিস্টেমের প্রতিদ্বন্দ্বী মডেলগুলি তৈরি করতে এবং অবাধে প্রকাশ করতে পারে, কে এআই গবেষণায় অংশ নিতে পারে তা পুনর্নির্মাণ করতে পারে।
গভীর ডুব
EleutherAI জুলাই 2020 সালে কনর লেহি, সিড ব্ল্যাক এবং লিও গাও দ্বারা সংগঠিত একটি ডিসকর্ড সম্প্রদায় হিসাবে শুরু হয়েছিল, মূলত OpenAI এর GPT-3 প্রতিলিপি করার লক্ষ্য ছিল। এই ধরনের মডেলগুলিকে প্রশিক্ষণ দেওয়ার জন্য, তারা প্রথমে দ্য পাইল তৈরি এবং প্রকাশ করে, একটি 825GB কিউরেটেড টেক্সট ডেটাসেট যা একটি আদর্শ ওপেন ট্রেনিং কর্পাস হয়ে ওঠে। তারপরে তারা তাদের সময়ের সবচেয়ে বড় খোলামেলা ভাষার মডেলগুলির মধ্যে GPT-Neo, GPT-J-6B এবং 20-বিলিয়ন-প্যারামিটার GPT-NeoX-20B প্রকাশ করে। GPT-NeoX ট্রেনিং লাইব্রেরি এবং LM ইভালুয়েশন হারনেস সহ তাদের সরঞ্জামগুলি বেঞ্চমার্কিংয়ের জন্য শিল্প-ব্যাপী ব্যবহৃত অন্যান্য অবকাঠামোতে পরিণত হয়েছে। 2023 সালে EleutherAI একটি অলাভজনক গবেষণা ইনস্টিটিউট হিসাবে আনুষ্ঠানিকভাবে রূপান্তরিত হয়েছে, ব্যাখ্যাযোগ্যতা, প্রান্তিককরণ এবং মডেলগুলি কীভাবে শেখে তার বিজ্ঞানে বিস্তৃত হয়েছে।
বাস্তব-বিশ্ব বাস্তবায়ন
পাইল ডেটাসেটটি বিশ্বব্যাপী গবেষকরা উন্মুক্ত ভাষার মডেলগুলিকে প্রজননযোগ্যভাবে প্রশিক্ষণ এবং অধ্যয়নের জন্য ব্যবহার করেন।
GPT-J-6B এবং GPT-NeoX-20B বাণিজ্যিক API মডেলগুলির বিনামূল্যে বিকল্প হিসাবে স্টার্টআপ এবং শিক্ষাবিদদের দ্বারা স্থাপন করা হয়।
LM ইভালুয়েশন হারনেস হল স্ট্যান্ডার্ড টুল যা অনেক ল্যাবগুলি শত শত টাস্ক জুড়ে মডেল পারফরম্যান্সের মানদণ্ডের জন্য ব্যবহার করে।
স্বাধীন নিরাপত্তা এবং ব্যাখ্যাযোগ্যতা গবেষকরা মডেল ইন্টারনাল অধ্যয়ন করতে EleutherAI এর খোলা ওজন ব্যবহার করেন যা বন্ধ API লুকিয়ে রাখে।
EleutherAI এর ভবিষ্যত
EleutherAI একটি বিশুদ্ধ মডেল-স্কেলিং রেস থেকে ব্যাখ্যাযোগ্যতা, প্রশিক্ষণ-ডেটা স্বচ্ছতা এবং কঠোর মূল্যায়নের দিকে স্থানান্তরিত হচ্ছে, যেখানে মুক্ত বিজ্ঞান সবচেয়ে বেশি প্রয়োজন। মডেলগুলি অভ্যন্তরীণভাবে কী প্রতিনিধিত্ব করে তা বোঝার জন্য, ভাল-ডকুমেন্টেড ডেটাসেটগুলি প্রকাশ করা এবং স্বাধীন সুরক্ষা গবেষণাকে সমর্থন করার জন্য অবিরত কাজ আশা করুন। যেহেতু ফ্রন্টিয়ার ল্যাবগুলি আরও গোপনীয় হয়ে উঠছে, জনস্বার্থের কাউন্টারওয়েট হিসাবে EleutherAI-এর ভূমিকা, পরবর্তী প্রজন্মের গবেষকদের প্রশিক্ষণ, সম্ভবত এটি পাঠানো যে কোনও একক মডেলের প্যারামিটার গণনার চেয়ে বেশি গুরুত্বপূর্ণ।
এটাকে বাস্তবে প্রয়োগ করা হচ্ছে
কেন এটা গুরুত্বপূর্ণ
- বিক্রেতার কৌশল. বিক্রেতা রোডম্যাপ আপনার দল পরবর্তীতে কী কী বৈশিষ্ট্য তৈরি করতে পারে তা প্রভাবিত করে।
- খরচ ও বাজেট. বাণিজ্যিক শর্তাবলী এবং স্থাপনার বিকল্পগুলি দীর্ঘমেয়াদী খরচ এবং ঝুঁকিকে প্রভাবিত করে।
- ঝুঁকি এবং নিরাপত্তা. কোম্পানির প্রণোদনা পণ্যের ডিফল্ট, নিরাপত্তা ভঙ্গি এবং উন্মুক্ততাকে আকার দেয়।
জন্য সতর্ক
- লঞ্চ ঘোষণা বাস্তব উত্পাদন কর্মপ্রবাহ মধ্যে স্থিতিশীলতা ছাড়িয়ে যেতে পারে.
- API মূল্য নির্ধারণ বা নীতি পরিবর্তন রাতারাতি অনুমান ভঙ্গ করতে পারে।
- একক-বিক্রেতা নির্ভরতা লক-ইন এবং মাইগ্রেশন খরচ বাড়ায়।
পরবর্তী পদক্ষেপ
- আপনার নিজের কাজ এবং ডেটাসেট ব্যবহার করে প্রদানকারীদের মূল্যায়ন করুন।
- একীকরণের আগে গোপনীয়তা, নিরাপত্তা এবং আইনি শর্তাবলী পর্যালোচনা করুন।
- মডেল বা বিক্রেতা জুড়ে একটি ফলব্যাক পরিকল্পনা বজায় রাখুন।
- রিলিজ নোটগুলি মনিটর করুন যাতে রোডম্যাপ পরিবর্তন দলগুলিকে অবাক না করে।
অন্বেষণ চালিয়ে যান
ফ্রি নিউজলেটার
প্রতিদিনের এআই ব্রিফিং পান
প্রতি সপ্তাহের কাজের দিন সকালে তিনটি যাচাইকৃত এআই স্টোরি, সহজ ইংরেজিতে লেখা। চিরকালের জন্য ফ্রি, কোনো বিজ্ঞাপন নেই।
প্রতি সপ্তাহের কাজের দিনে একটি ইমেল। এক ক্লিকেই আনসাবস্ক্রাইব করুন। আমরা কখনোই আপনার ঠিকানা বিক্রি বা শেয়ার করি না।
নিজেকে পরীক্ষা করুন
Take the EleutherAI quiz
প্রতিটি উত্তরের তাৎক্ষণিক ফিডব্যাক, এবং কোর্স পাস করার পর যাচাইযোগ্য আইডি সহ একটি শেয়ারযোগ্য সার্টিফিকেট।
ফ্রি এআই শিক্ষাকে সমর্থন করুন। AI Understanding একটি 501(c)(3) অলাভজনক প্রতিষ্ঠান — কোনো বিজ্ঞাপন নেই, কোনো পেওয়াল নেই, কখনোই না। একটি দান করুন
প্রায়শই জিজ্ঞাসিত প্রশ্নাবলী
EleutherAI কি?
EleutherAI হল একটি তৃণমূল অলাভজনক গবেষণা সমষ্টি যেটি ওপেন-সোর্স বৃহৎ ভাষার মডেলের পথপ্রদর্শক যখন সীমান্ত AI কর্পোরেট দেয়ালের আড়ালে আটকে ছিল। এটি প্রমাণ করেছে যে একটি স্বেচ্ছাসেবক সম্প্রদায় বদ্ধ সিস্টেমের প্রতিদ্বন্দ্বী মডেলগুলি তৈরি করতে এবং অবাধে প্রকাশ করতে পারে, কে এআই গবেষণায় অংশ নিতে পারে তা পুনর্নির্মাণ করতে পারে।
How did EleutherAI first bring together its research community?
EleutherAI’s history page describes it as beginning in July 2020 as a Discord server for discussing GPT-3 and open language models.
'দ্য পাইল' কী?
পাইল হল একটি বৃহৎ, বৈচিত্র্যময়, প্রকাশ্যে প্রকাশিত টেক্সট কর্পাস EleutherAI যা ভাষা মডেলগুলিকে প্রশিক্ষণ ও অধ্যয়নের জন্য নির্মিত৷
এর মধ্যে কোনটি একটি EleutherAI ভাষার মডেল?
GPT-NeoX-20B হল EleutherAI-এর ফ্ল্যাগশিপ ওপেন মডেলগুলির মধ্যে একটি; অন্যরা Google বা Meta থেকে এসেছে।
LM মূল্যায়ন জোতা কি জন্য ব্যবহৃত হয়?
শত শত মানদণ্ডে ভাষার মডেলের মানসম্মত মূল্যায়নের জন্য জোতা একটি ব্যাপকভাবে গৃহীত ওপেন টুল।
Which organizations are named in EleutherAI’s retrospective as research supporters?
EleutherAI’s paper on open research acknowledges support and contributions from CoreWeave and TPU Research Cloud, among other supporters.
শিখতে থাকুন
সম্পর্কিত গাইড
এই বিষয়ের জন্য বাছাই করা আরও গাইড