প্রযুক্তিগত গাইড

llms.txt

llms.txt হল একটি মার্কডাউন সূচকের জন্য একটি অনানুষ্ঠানিক, সম্প্রদায় প্রস্তাব যা একটি সাইটের সারসংক্ষেপ করে এবং নির্বাচিত সংস্থানগুলিতে এআই এজেন্টদের নির্দেশ করে৷

এই নির্দেশিকা শুনুনএআই-বর্ণিত · ~3 min

এই পৃষ্ঠায়3 মিনিট পড়া হয়েছে
  1. ওভারভিউ
  2. গভীর ডুব
  3. বাস্তব-বিশ্ব বাস্তবায়ন
  4. llms.txt এর ভবিষ্যত
  5. এটাকে বাস্তবে প্রয়োগ করা হচ্ছে
  6. অন্বেষণ চালিয়ে যান
  7. প্রায়শই জিজ্ঞাসিত প্রশ্নাবলী

ওভারভিউ

ফাইলটি প্রকাশ করা একটি টুলকে সাহায্য করতে পারে যা এটি আনার জন্য বেছে নেয়, তবে এটি একটি ক্রলার নির্দেশিকা, একটি অনুসন্ধান-র্যাঙ্কিং সংকেত, বা কোনও বিশেষ সহকারী সামগ্রী ব্যবহার করবে এমন গ্যারান্টি নয়৷

গভীর ডুব

llms.txt ধারণাটি 2024 সালে জেরেমি হাওয়ার্ড দ্বারা একটি বাস্তব সমস্যা সমাধানের উপায় হিসাবে প্রস্তাব করা হয়েছিল: বড় ভাষার মডেলগুলিতে সীমিত প্রসঙ্গ উইন্ডো থাকে এবং ওয়েব পৃষ্ঠাগুলি প্রায়শই নেভিগেশন, বিজ্ঞাপন এবং JavaScript দিয়ে বিশৃঙ্খল থাকে যা একটি AI টুলের পক্ষে প্রকৃত বিষয়বস্তু দক্ষতার সাথে বের করা কঠিন করে তোলে। কনভেনশনটি সাইট রুটে (/llms.txt) একটি প্রয়োজনীয় H1 শিরোনাম, একটি ঐচ্ছিক ব্লককোট সারাংশ এবং তারপরে লিঙ্কগুলির বিভাগগুলির সাথে একটি মার্কডাউন ফাইল নির্দিষ্ট করে, প্রতিটি আদর্শভাবে সম্পূর্ণ HTML এর পরিবর্তে পৃষ্ঠাগুলির মার্কডাউন সংস্করণ পরিষ্কার করার দিকে নির্দেশ করে৷ কিছু ডকুমেন্টেশন প্ল্যাটফর্ম এবং সাইটের মালিকরাও একটি llms-full.txt ফাইল প্রকাশ করে যা সম্পূর্ণ পৃষ্ঠাগুলিকে সংযুক্ত করে। এটি একটি কমিউনিটি এক্সটেনশন, বর্তমান llmstxt.org v2 স্পেসিফিকেশনের অংশ নয়৷ এটি একটি প্রোটোকল প্রয়োজনীয়তার পরিবর্তে একটি প্রস্তাব। কিছু ডকুমেন্টেশন প্ল্যাটফর্ম এই ফাইলগুলি তৈরি করে এবং বেশ কিছু AI ল্যাব তাদের নিজস্ব ডকুমেন্টেশন সূচী প্রকাশ করে, কিন্তু প্রকাশনার অর্থ এই নয় যে প্রতিটি সার্চ ক্রলার বা AI পণ্য তাদের দ্বারা আনয়ন, অনুসরণ করে বা র‌্যাঙ্ক করে। ফাইলটিকে একটি ঐচ্ছিক অথর-কিউরেটেড ইনডেক্স হিসাবে বিবেচনা করুন এবং এটির উপর নির্ভর করার আগে একটি টার্গেট টুলের আচরণ যাচাই করুন। একটি মূল ভুল ধারণা হল llms.txt-কে এনফোর্সমেন্টে robots.txt-এর সমতুল্য হিসাবে বিবেচনা করা হচ্ছে — robots.txt হল ক্রলার অ্যাক্সেস সম্পর্কে একটি ব্যাপকভাবে সম্মানিত নির্দেশিকা, যখন llms.txt হল শুধুমাত্র একটি কিউরেটেড পয়েন্টার ফাইল যা একটি প্রদত্ত AI টুল আনতে এবং ব্যবহার করতে বেছে নিতে পারে বা নাও করতে পারে। একটি সাইটের মালিক পুরানো বা সংবেদনশীল লিঙ্কগুলি পরীক্ষা করার পরে পরীক্ষা করতে পারেন এবং পরিচিত টুলগুলি ফাইলটি আনতে পারে কিনা তা পরিমাপ করতে পারে৷ এসইও বা উদ্ধৃতি সুবিধার প্রতিশ্রুতি দেবেন না এবং সামগ্রীর গুণমান, অ্যাক্সেসযোগ্য নেভিগেশন বা ক্রলার নিয়ন্ত্রণগুলি প্রতিস্থাপন করতে এটি ব্যবহার করবেন না।

বাস্তব-বিশ্ব বাস্তবায়ন

একটি ডকুমেন্টেশন সাইট তার রুটে একটি llms.txt প্রকাশ করে যার শুরুর নির্দেশিকা, API রেফারেন্স এবং চেঞ্জলগকে মার্কডাউন লিঙ্ক হিসাবে এক-লাইন বর্ণনার সাথে তালিকাভুক্ত করে।

একটি ওপেন-সোর্স প্রকল্পের llms.txt সরাসরি তার ডক্স পৃষ্ঠাগুলির কাঁচা মার্কডাউন সংস্করণের সাথে লিঙ্ক করে যাতে একজন AI সহকারী রেন্ডার করা HTML পার্স করার পরিবর্তে পরিষ্কার পাঠ পড়তে পারে।

একটি কোম্পানির সাইটে একটি llms-full.txt ভেরিয়েন্ট রয়েছে যা সমস্ত ডকুমেন্টেশন বিষয়বস্তুকে এক ফাইলে একত্রিত করে এমন টুলগুলির জন্য যা একবারে সবকিছু গ্রাস করতে চায়।

একটি ব্লগ llms.txt-এর সাথে পরীক্ষা করে শুধুমাত্র তার মূল ভিত্তি ব্যাখ্যাকারী নিবন্ধগুলিকে তালিকাভুক্ত করে, আশা করে যে AI উত্তর ইঞ্জিনগুলি সেই পৃষ্ঠাগুলিকে আরও সঠিকভাবে উদ্ধৃত করবে৷

llms.txt এর ভবিষ্যত

প্রস্তাবটি সম্প্রদায়ের ইনপুটের জন্য উন্মুক্ত থাকে এবং এর প্রকাশিত বিন্যাস পরিবর্তিত হতে পারে। কিছু ডকুমেন্টেশন প্ল্যাটফর্ম ফাইল তৈরি করে, কিন্তু প্রতিটি ক্রলার বা সহকারী সিদ্ধান্ত নেয় কী পুনরুদ্ধার করতে হবে এবং কীভাবে এটি ব্যবহার করতে হবে। একটি সাইট টিমের ফাইলের তারিখ দেওয়া উচিত, ডকুমেন্টেশন পরিবর্তন হিসাবে লিঙ্কগুলি পর্যালোচনা করা উচিত, এবং পর্যবেক্ষণ করা ফেচগুলিকে শুধুমাত্র অ্যাক্সেসের প্রমাণ হিসাবে বিবেচনা করা উচিত - প্রমাণ নয় যে একটি মডেল সামগ্রী ব্যবহার করেছে বা অনুসন্ধানের দৃশ্যমানতা উন্নত হয়েছে৷ র‌্যাঙ্কিংয়ের প্রতিশ্রুতি দেওয়া এড়িয়ে চলুন; অ্যাক্সেসের নিয়মের জন্য অফিসিয়াল ক্রলার নিয়ন্ত্রণ এবং আবিষ্কারযোগ্যতার জন্য সাধারণ সামগ্রীর গুণমান ব্যবহার করুন।

এটাকে বাস্তবে প্রয়োগ করা হচ্ছে

কেন এটা গুরুত্বপূর্ণ

  • খরচ ও বাজেট. আর্কিটেকচারের সিদ্ধান্তগুলি বছরের পর বছর ধরে কর্মক্ষমতা এবং অপারেটিং খরচ চালায়।
  • সুস্পষ্ট সিদ্ধান্ত. কারিগরি শিক্ষা দলগুলোকে সঠিক স্ট্যাক বেছে নিতে সাহায্য করে, শুধু নতুনটি নয়।
  • মান নিয়ন্ত্রণ. ভালো ইঞ্জিনিয়ারিং পছন্দ উৎপাদনে নির্ভরযোগ্যতার ঘটনা কমিয়ে দেয়।

জন্য সতর্ক

  • একটি বেঞ্চমার্ক অপ্টিমাইজ করা বৃহত্তর সিস্টেম দুর্বলতা আড়াল করতে পারে।
  • অবকাঠামো এবং রক্ষণাবেক্ষণের খরচ প্রায়ই অবমূল্যায়ন করা হয়।
  • সিস্টেমগুলি আরও জটিল হওয়ার সাথে সাথে সুরক্ষা এবং পর্যবেক্ষণযোগ্যতার ফাঁক বাড়তে পারে।

পরবর্তী পদক্ষেপ

  1. বাস্তবায়নের আগে বিলম্ব, গুণমান এবং খরচের লক্ষ্য নির্ধারণ করুন।
  2. বাস্তবসম্মত লোড এবং ডেটা অবস্থার অধীনে বেঞ্চমার্ক।
  3. ত্রুটি, প্রবাহ, এবং ব্যবহারকারীর প্রভাবের জন্য যন্ত্র পর্যবেক্ষণ।
  4. স্কেল করার আগে রোলব্যাক এবং ঘটনার প্রতিক্রিয়া পাথ প্রস্তুত করুন।

অন্বেষণ চালিয়ে যান

ফ্রি নিউজলেটার

প্রতিদিনের এআই ব্রিফিং পান

প্রতি সপ্তাহের কাজের দিন সকালে তিনটি যাচাইকৃত এআই স্টোরি, সহজ ইংরেজিতে লেখা। চিরকালের জন্য ফ্রি, কোনো বিজ্ঞাপন নেই।

প্রতি সপ্তাহের কাজের দিনে একটি ইমেল। এক ক্লিকেই আনসাবস্ক্রাইব করুন। আমরা কখনোই আপনার ঠিকানা বিক্রি বা শেয়ার করি না।

নিজেকে পরীক্ষা করুন

llms.txt কুইজ নিন

প্রতিটি উত্তরের তাৎক্ষণিক ফিডব্যাক, এবং কোর্স পাস করার পর যাচাইযোগ্য আইডি সহ একটি শেয়ারযোগ্য সার্টিফিকেট।

কুইজ শুরু করুন

ফ্রি এআই শিক্ষাকে সমর্থন করুন। AI Understanding একটি 501(c)(3) অলাভজনক প্রতিষ্ঠান — কোনো বিজ্ঞাপন নেই, কোনো পেওয়াল নেই, কখনোই না। একটি দান করুন

প্রায়শই জিজ্ঞাসিত প্রশ্নাবলী

llms.txt কি?

llms.txt হল একটি মার্কডাউন সূচকের জন্য একটি অনানুষ্ঠানিক, সম্প্রদায় প্রস্তাব যা একটি সাইটের সারসংক্ষেপ করে এবং নির্বাচিত সংস্থানগুলিতে এআই এজেন্টদের নির্দেশ করে৷ ফাইলটি প্রকাশ করা একটি টুলকে সাহায্য করতে পারে যা এটি আনার জন্য বেছে নেয়, তবে এটি একটি ক্রলার নির্দেশিকা, একটি অনুসন্ধান-র্যাঙ্কিং সংকেত, বা কোনও বিশেষ সহকারী সামগ্রী ব্যবহার করবে এমন গ্যারান্টি নয়৷

গাইডের মতে, প্রস্তাবে llms.txt-এর অভিপ্রেত ভূমিকা কী?

প্রস্তাবটি একটি কিউরেটেড মার্কডাউন ওভারভিউ এবং রিসোর্স লিঙ্কগুলি বর্ণনা করে; এটা তাদের পুনরুদ্ধার করতে কোনো এজেন্টকে বাধ্য করে না।

প্রয়োগের ক্ষেত্রে llms.txt কিভাবে robots.txt থেকে আলাদা?

নির্দেশিকা স্পষ্টভাবে llms.txt-কে robots.txt-এর প্রয়োগের সমতুল্য হিসাবে বিবেচনা করার বিরুদ্ধে সতর্ক করে, উল্লেখ করে যে এটি স্বেচ্ছাসেবী এবং গ্রহণ করা অসম।

সহযোগী ফাইল llms-full.txt llms.txt থেকে আলাদাভাবে কী করে?

কিছু সাইট একটি অনানুষ্ঠানিক এক্সটেনশন হিসাবে একটি পূর্ণ-কন্টেন্ট ফাইল প্রকাশ করে; বর্তমান llmstxt.org v2 প্রস্তাব লিঙ্ক-সূচী বিন্যাস সংজ্ঞায়িত করে, একটি প্রয়োজনীয় llms-full.txt সহচর নয়।

কে llms.txt কনভেনশনের প্রস্তাব করেছিলেন এবং কখন এর কাছাকাছি?

গাইডটি 2024 সালে জেরেমি হাওয়ার্ডের কাছে প্রস্তাবটিকে দায়ী করে, সীমিত প্রসঙ্গ উইন্ডো এবং বিশৃঙ্খল এইচটিএমএলকে সম্বোধন করে।

llms.txt সম্পূর্ণ HTML পৃষ্ঠাগুলির পরিবর্তে কোন বিষয়বস্তু বিন্যাসে লিঙ্ক করার পরামর্শ দেয়?

প্রস্তাবটি সংক্ষিপ্ত মার্কডাউন লিঙ্ক এবং যেখানে উপলব্ধ মার্কডাউন সংস্করণ পরিষ্কার করার সুপারিশ করে; সম্পূর্ণ সাইট বিষয়বস্তু প্রয়োজন হয় না.

শিখতে থাকুন

সম্পর্কিত গাইড

এই বিষয়ের জন্য বাছাই করা আরও গাইড

একটি বিনামূল্যে AI শংসাপত্র পানএকটি সংক্ষিপ্ত বিনামূল্যে কোর্স এবং পরীক্ষা. কোনো খরচ নেই, কোনো কার্ড নেই। প্রায় 2.5 ঘন্টা।বিনামূল্যে শুরু করুন →