পরবর্তী আপপরবর্তী গাইড
স্ব-হোস্টেড এলএলএম-এর জন্য মালিকানার মোট খরচ
টেকনিক্যাল
প্রযুক্তিগত গাইড
llms.txt হল একটি মার্কডাউন সূচকের জন্য একটি অনানুষ্ঠানিক, সম্প্রদায় প্রস্তাব যা একটি সাইটের সারসংক্ষেপ করে এবং নির্বাচিত সংস্থানগুলিতে এআই এজেন্টদের নির্দেশ করে৷
এই নির্দেশিকা শুনুনএআই-বর্ণিত · ~3 min
ফাইলটি প্রকাশ করা একটি টুলকে সাহায্য করতে পারে যা এটি আনার জন্য বেছে নেয়, তবে এটি একটি ক্রলার নির্দেশিকা, একটি অনুসন্ধান-র্যাঙ্কিং সংকেত, বা কোনও বিশেষ সহকারী সামগ্রী ব্যবহার করবে এমন গ্যারান্টি নয়৷
llms.txt ধারণাটি 2024 সালে জেরেমি হাওয়ার্ড দ্বারা একটি বাস্তব সমস্যা সমাধানের উপায় হিসাবে প্রস্তাব করা হয়েছিল: বড় ভাষার মডেলগুলিতে সীমিত প্রসঙ্গ উইন্ডো থাকে এবং ওয়েব পৃষ্ঠাগুলি প্রায়শই নেভিগেশন, বিজ্ঞাপন এবং JavaScript দিয়ে বিশৃঙ্খল থাকে যা একটি AI টুলের পক্ষে প্রকৃত বিষয়বস্তু দক্ষতার সাথে বের করা কঠিন করে তোলে। কনভেনশনটি সাইট রুটে (/llms.txt) একটি প্রয়োজনীয় H1 শিরোনাম, একটি ঐচ্ছিক ব্লককোট সারাংশ এবং তারপরে লিঙ্কগুলির বিভাগগুলির সাথে একটি মার্কডাউন ফাইল নির্দিষ্ট করে, প্রতিটি আদর্শভাবে সম্পূর্ণ HTML এর পরিবর্তে পৃষ্ঠাগুলির মার্কডাউন সংস্করণ পরিষ্কার করার দিকে নির্দেশ করে৷ কিছু ডকুমেন্টেশন প্ল্যাটফর্ম এবং সাইটের মালিকরাও একটি llms-full.txt ফাইল প্রকাশ করে যা সম্পূর্ণ পৃষ্ঠাগুলিকে সংযুক্ত করে। এটি একটি কমিউনিটি এক্সটেনশন, বর্তমান llmstxt.org v2 স্পেসিফিকেশনের অংশ নয়৷ এটি একটি প্রোটোকল প্রয়োজনীয়তার পরিবর্তে একটি প্রস্তাব। কিছু ডকুমেন্টেশন প্ল্যাটফর্ম এই ফাইলগুলি তৈরি করে এবং বেশ কিছু AI ল্যাব তাদের নিজস্ব ডকুমেন্টেশন সূচী প্রকাশ করে, কিন্তু প্রকাশনার অর্থ এই নয় যে প্রতিটি সার্চ ক্রলার বা AI পণ্য তাদের দ্বারা আনয়ন, অনুসরণ করে বা র্যাঙ্ক করে। ফাইলটিকে একটি ঐচ্ছিক অথর-কিউরেটেড ইনডেক্স হিসাবে বিবেচনা করুন এবং এটির উপর নির্ভর করার আগে একটি টার্গেট টুলের আচরণ যাচাই করুন। একটি মূল ভুল ধারণা হল llms.txt-কে এনফোর্সমেন্টে robots.txt-এর সমতুল্য হিসাবে বিবেচনা করা হচ্ছে — robots.txt হল ক্রলার অ্যাক্সেস সম্পর্কে একটি ব্যাপকভাবে সম্মানিত নির্দেশিকা, যখন llms.txt হল শুধুমাত্র একটি কিউরেটেড পয়েন্টার ফাইল যা একটি প্রদত্ত AI টুল আনতে এবং ব্যবহার করতে বেছে নিতে পারে বা নাও করতে পারে। একটি সাইটের মালিক পুরানো বা সংবেদনশীল লিঙ্কগুলি পরীক্ষা করার পরে পরীক্ষা করতে পারেন এবং পরিচিত টুলগুলি ফাইলটি আনতে পারে কিনা তা পরিমাপ করতে পারে৷ এসইও বা উদ্ধৃতি সুবিধার প্রতিশ্রুতি দেবেন না এবং সামগ্রীর গুণমান, অ্যাক্সেসযোগ্য নেভিগেশন বা ক্রলার নিয়ন্ত্রণগুলি প্রতিস্থাপন করতে এটি ব্যবহার করবেন না।
একটি ডকুমেন্টেশন সাইট তার রুটে একটি llms.txt প্রকাশ করে যার শুরুর নির্দেশিকা, API রেফারেন্স এবং চেঞ্জলগকে মার্কডাউন লিঙ্ক হিসাবে এক-লাইন বর্ণনার সাথে তালিকাভুক্ত করে।
একটি ওপেন-সোর্স প্রকল্পের llms.txt সরাসরি তার ডক্স পৃষ্ঠাগুলির কাঁচা মার্কডাউন সংস্করণের সাথে লিঙ্ক করে যাতে একজন AI সহকারী রেন্ডার করা HTML পার্স করার পরিবর্তে পরিষ্কার পাঠ পড়তে পারে।
একটি কোম্পানির সাইটে একটি llms-full.txt ভেরিয়েন্ট রয়েছে যা সমস্ত ডকুমেন্টেশন বিষয়বস্তুকে এক ফাইলে একত্রিত করে এমন টুলগুলির জন্য যা একবারে সবকিছু গ্রাস করতে চায়।
একটি ব্লগ llms.txt-এর সাথে পরীক্ষা করে শুধুমাত্র তার মূল ভিত্তি ব্যাখ্যাকারী নিবন্ধগুলিকে তালিকাভুক্ত করে, আশা করে যে AI উত্তর ইঞ্জিনগুলি সেই পৃষ্ঠাগুলিকে আরও সঠিকভাবে উদ্ধৃত করবে৷
প্রস্তাবটি সম্প্রদায়ের ইনপুটের জন্য উন্মুক্ত থাকে এবং এর প্রকাশিত বিন্যাস পরিবর্তিত হতে পারে। কিছু ডকুমেন্টেশন প্ল্যাটফর্ম ফাইল তৈরি করে, কিন্তু প্রতিটি ক্রলার বা সহকারী সিদ্ধান্ত নেয় কী পুনরুদ্ধার করতে হবে এবং কীভাবে এটি ব্যবহার করতে হবে। একটি সাইট টিমের ফাইলের তারিখ দেওয়া উচিত, ডকুমেন্টেশন পরিবর্তন হিসাবে লিঙ্কগুলি পর্যালোচনা করা উচিত, এবং পর্যবেক্ষণ করা ফেচগুলিকে শুধুমাত্র অ্যাক্সেসের প্রমাণ হিসাবে বিবেচনা করা উচিত - প্রমাণ নয় যে একটি মডেল সামগ্রী ব্যবহার করেছে বা অনুসন্ধানের দৃশ্যমানতা উন্নত হয়েছে৷ র্যাঙ্কিংয়ের প্রতিশ্রুতি দেওয়া এড়িয়ে চলুন; অ্যাক্সেসের নিয়মের জন্য অফিসিয়াল ক্রলার নিয়ন্ত্রণ এবং আবিষ্কারযোগ্যতার জন্য সাধারণ সামগ্রীর গুণমান ব্যবহার করুন।
ফ্রি নিউজলেটার
প্রতি সপ্তাহের কাজের দিন সকালে তিনটি যাচাইকৃত এআই স্টোরি, সহজ ইংরেজিতে লেখা। চিরকালের জন্য ফ্রি, কোনো বিজ্ঞাপন নেই।
প্রতি সপ্তাহের কাজের দিনে একটি ইমেল। এক ক্লিকেই আনসাবস্ক্রাইব করুন। আমরা কখনোই আপনার ঠিকানা বিক্রি বা শেয়ার করি না।
নিজেকে পরীক্ষা করুন
প্রতিটি উত্তরের তাৎক্ষণিক ফিডব্যাক, এবং কোর্স পাস করার পর যাচাইযোগ্য আইডি সহ একটি শেয়ারযোগ্য সার্টিফিকেট।
ফ্রি এআই শিক্ষাকে সমর্থন করুন। AI Understanding একটি 501(c)(3) অলাভজনক প্রতিষ্ঠান — কোনো বিজ্ঞাপন নেই, কোনো পেওয়াল নেই, কখনোই না। একটি দান করুন
llms.txt হল একটি মার্কডাউন সূচকের জন্য একটি অনানুষ্ঠানিক, সম্প্রদায় প্রস্তাব যা একটি সাইটের সারসংক্ষেপ করে এবং নির্বাচিত সংস্থানগুলিতে এআই এজেন্টদের নির্দেশ করে৷ ফাইলটি প্রকাশ করা একটি টুলকে সাহায্য করতে পারে যা এটি আনার জন্য বেছে নেয়, তবে এটি একটি ক্রলার নির্দেশিকা, একটি অনুসন্ধান-র্যাঙ্কিং সংকেত, বা কোনও বিশেষ সহকারী সামগ্রী ব্যবহার করবে এমন গ্যারান্টি নয়৷
প্রস্তাবটি একটি কিউরেটেড মার্কডাউন ওভারভিউ এবং রিসোর্স লিঙ্কগুলি বর্ণনা করে; এটা তাদের পুনরুদ্ধার করতে কোনো এজেন্টকে বাধ্য করে না।
নির্দেশিকা স্পষ্টভাবে llms.txt-কে robots.txt-এর প্রয়োগের সমতুল্য হিসাবে বিবেচনা করার বিরুদ্ধে সতর্ক করে, উল্লেখ করে যে এটি স্বেচ্ছাসেবী এবং গ্রহণ করা অসম।
কিছু সাইট একটি অনানুষ্ঠানিক এক্সটেনশন হিসাবে একটি পূর্ণ-কন্টেন্ট ফাইল প্রকাশ করে; বর্তমান llmstxt.org v2 প্রস্তাব লিঙ্ক-সূচী বিন্যাস সংজ্ঞায়িত করে, একটি প্রয়োজনীয় llms-full.txt সহচর নয়।
গাইডটি 2024 সালে জেরেমি হাওয়ার্ডের কাছে প্রস্তাবটিকে দায়ী করে, সীমিত প্রসঙ্গ উইন্ডো এবং বিশৃঙ্খল এইচটিএমএলকে সম্বোধন করে।
প্রস্তাবটি সংক্ষিপ্ত মার্কডাউন লিঙ্ক এবং যেখানে উপলব্ধ মার্কডাউন সংস্করণ পরিষ্কার করার সুপারিশ করে; সম্পূর্ণ সাইট বিষয়বস্তু প্রয়োজন হয় না.
শিখতে থাকুন
এই বিষয়ের জন্য বাছাই করা আরও গাইড
পরবর্তী আপপরবর্তী গাইড
স্ব-হোস্টেড এলএলএম-এর জন্য মালিকানার মোট খরচ
টেকনিক্যাল