সোসাইটি গাইড

এআই ট্রেনিং ডেটাসেট থেকে অপ্ট আউট করা

নির্মাতারা robots.txt-এ AI ক্রলার ব্লক করে, প্ল্যাটফর্ম সেটিংসে প্রশিক্ষণের অনুমতি বন্ধ করে এবং অপ্ট-আউট পরিষেবাগুলির সাথে নিবন্ধন করার মাধ্যমে AI প্রশিক্ষণের জন্য তাদের কাজের ভবিষ্যত ব্যবহার কমাতে পারেন এবং সার্চ টুলের সাহায্যে কিছু পাবলিক ডেটাসেট পরীক্ষা করতে পারেন।

এই নির্দেশিকা শুনুনএআই-বর্ণিত · ~3 min

এই পৃষ্ঠায়4 মিনিট পড়া
  1. ওভারভিউ
  2. গভীর ডুব
  3. বাস্তব-বিশ্ব বাস্তবায়ন
  4. এআই ট্রেনিং ডেটাসেট থেকে অপ্ট আউট করার ভবিষ্যত
  5. এটাকে বাস্তবে প্রয়োগ করা হচ্ছে
  6. অন্বেষণ চালিয়ে যান
  7. প্রায়শই জিজ্ঞাসিত প্রশ্নাবলী

ওভারভিউ

এই ব্যবস্থাগুলি বেশিরভাগই ভবিষ্যতের সংগ্রহকে প্রভাবিত করে যারা তাদের সম্মান করতে বেছে নেয়; তারা ইতিমধ্যে প্রশিক্ষিত মডেল থেকে কাজ অপসারণ না.

গভীর ডুব

Most large AI models are trained on material collected from the web. Common Crawl publishes huge crawls of the public internet, and image datasets such as LAION-5B, with about 5.85 billion image and caption pairs, were built by filtering them. LAION distributes links and captions rather than image files, but models trained with it downloaded the images from those links. To check whether your work appears, Spawning's Have I Been Trained lets you search LAION datasets by text or image. It covers only the datasets it indexes; there is no way to search the private data many companies use. The main prevention tools are: robots.txt. Many AI companies publish crawler names that sites can block, including GPTBot (OpenAI), ClaudeBot (Anthropic), CCBot (Common Crawl), Applebot-Extended (Apple) and Google-Extended, which controls use in Google's Gemini models without removing a site from Google Search. Some hosts and CDNs, such as Cloudflare, offer one-click AI crawler blocking. Platform settings. Services like LinkedIn and X have offered settings controlling training on user content, and Meta has offered objection forms in regions with stronger data protection law. Art sites such as DeviantArt and ArtStation introduced NoAI tags. Registries and legal reservations. Spawning's Do Not Train registry records opt-outs that some companies, including Stability AI for certain models, said they would honor. In the EU, the 2019 copyright directive allows rights holders to reserve text and data mining rights in machine-readable form, and the EU AI Act requires general-purpose model providers to respect such reservations. The limits are important. robots.txt is voluntary and not enforcement. Opt-outs are not retroactive, and trained models do not forget. Copies of your work reposted elsewhere are not covered by your site's rules. Blocking crawlers can also reduce visibility in AI-powered search. Opting out lowers exposure; it does not guarantee exclusion.

বাস্তব-বিশ্ব বাস্তবায়ন

একজন ইলাস্ট্রেটর হ্যাভ আই বিন ট্রেইনড-এ তার পোর্টফোলিওর ছবিগুলি অনুসন্ধান করেন, LAION-5B-তে বেশ কিছু খুঁজে পান এবং সেগুলিকে স্পোনিং-এর ডু নট ট্রেইন রেজিস্ট্রিতে যোগ করেন, এটি জেনে শুধুমাত্র সেই সংস্থাগুলিকে আবদ্ধ করে যারা এটিকে সম্মান করে৷

একজন ফটোগ্রাফার যে তার নিজস্ব সাইট চালায়, Googlebot ত্যাগ করার সময়, GPTBot, CCBot, ClaudeBot এবং Google-এক্সটেন্ডেডকে অনুমোদন না করে robots.txt নিয়মগুলি যোগ করে যাতে তার পৃষ্ঠাগুলি এখনও অনুসন্ধানের ফলাফলে প্রদর্শিত হয়৷

LinkedIn-এর একজন লেখক সেটিংটি বন্ধ করে দিয়েছেন যা তার ডেটাকে জেনারেটিভ এআই মডেল প্রশিক্ষণের জন্য ব্যবহার করার অনুমতি দেয় এবং নোট করে যে এটি অতীতের ব্যবহারকে পূর্বাবস্থায় ফিরিয়ে আনে না।

EU-তে একটি ছোট প্রকাশক তার সাইট এবং ব্যবহারের শর্তাবলীতে পাঠ্য এবং ডেটা মাইনিং অধিকারগুলির একটি মেশিন-পাঠযোগ্য সংরক্ষণ যোগ করে, EU কপিরাইট ব্যতিক্রমের উপর নির্ভর করে যা অধিকার ধারকদের অপ্ট আউট করতে দেয়।

এআই ট্রেনিং ডেটাসেট থেকে অপ্ট আউট করার ভবিষ্যত

ক্রলারের নাম এবং প্ল্যাটফর্ম মেনুতে ছড়িয়ে ছিটিয়ে থাকা পরিবর্তে প্রমিত এবং আইনত অর্থপূর্ণ অপ্ট-আউট সংকেতগুলির জন্য চাপ বাড়ছে৷ স্ট্যান্ডার্ড সংস্থা এবং শিল্প গ্রুপগুলি এআই ব্যবহারের পছন্দগুলির জন্য ভাগ করা শব্দভাণ্ডার নিয়ে কাজ করছে এবং ইউরোপীয় ইউনিয়নের নিয়মগুলি প্রদানকারীদের তারা কীভাবে সংরক্ষণকে সম্মান করে তা নথিভুক্ত করার জন্য চাপ দিচ্ছে। এআই কোম্পানি এবং প্রকাশকদের মধ্যে লাইসেন্সিং চুক্তিগুলি প্রস্তাব করে যে সম্মতিযুক্ত ডেটার জন্য একটি বাজার তৈরি হচ্ছে, যদিও বেশিরভাগ বড় অধিকারধারীদের জন্য। কপিরাইটযুক্ত কাজের প্রশিক্ষণ নিয়ে মামলা কিছু দেশে ডিফল্ট নিয়ম পরিবর্তন করতে পারে। আপাতত, স্বতন্ত্র নির্মাতাদের অপ্ট-আউটগুলিকে আংশিক সুরক্ষা হিসাবে বিবেচনা করা উচিত এবং পর্যায়ক্রমে সেটিংস চেক করা উচিত, যেহেতু প্ল্যাটফর্মগুলি সেগুলি পরিবর্তন করে৷

এটাকে বাস্তবে প্রয়োগ করা হচ্ছে

কেন এটা গুরুত্বপূর্ণ

  • ঝুঁকি এবং নিরাপত্তা. বিপর্যয়কর এবং দৈনন্দিন এআই ক্ষতি উভয়ই নির্ভর করে কে ঝুঁকি বুঝতে পারে এবং কে কাজ করতে পারে।
  • সুস্পষ্ট সিদ্ধান্ত. জনসাধারণের এবং পেশাদার সাক্ষরতা গঠন করে যে শক্তিশালী নিরাপত্তা নীতি রাজনৈতিকভাবে সম্ভব কিনা।
  • হাইপের মাধ্যমে কাটা. স্পষ্ট ব্যাখ্যা হাইপ, ল্যাব পিআর, এবং অস্পষ্ট নীতিশাস্ত্র থিয়েটার দ্বারা ক্যাপচার হ্রাস করে।

জন্য সতর্ক

  • সক্ষমতা যৌগিক অবস্থায় অস্তিত্বগত ঝুঁকিকে সাই-ফাই হিসাবে বিবেচনা করা।
  • উচ্চ স্বায়ত্তশাসনের অধীনে প্রান্তিককরণের সাথে বিভ্রান্তিকর পৃষ্ঠ পণ্য নিরাপত্তা।
  • অ-ইংরেজি এবং অ-বিশেষজ্ঞ শ্রোতাদের শুধুমাত্র নিম্ন-মানের উত্স সহ ত্যাগ করা।

পরবর্তী পদক্ষেপ

  1. পৃথক পণ্য ক্ষতি, অপব্যবহার, এবং ক্ষতি-অব-নিয়ন্ত্রণ/বিভ্রান্তির ঝুঁকি।
  2. জিজ্ঞাসা করুন কি প্রমাণ সময়সীমা এবং তীব্রতা আপনার দৃষ্টিভঙ্গি পরিবর্তন করবে.
  3. বিপণন দাবির চেয়ে প্রাথমিক উত্স এবং কংক্রিট ইভাল পছন্দ করুন।
  4. একটি কর্ম পথ চিহ্নিত করুন: কর্মজীবন, নীতি, অর্থায়ন, বা দক্ষতা - শুধুমাত্র সচেতনতা নয়।

অন্বেষণ চালিয়ে যান

ফ্রি নিউজলেটার

প্রতিদিনের এআই ব্রিফিং পান

প্রতি সপ্তাহের কাজের দিন সকালে তিনটি যাচাইকৃত এআই স্টোরি, সহজ ইংরেজিতে লেখা। চিরকালের জন্য ফ্রি, কোনো বিজ্ঞাপন নেই।

প্রতি সপ্তাহের কাজের দিনে একটি ইমেল। এক ক্লিকেই আনসাবস্ক্রাইব করুন। আমরা কখনোই আপনার ঠিকানা বিক্রি বা শেয়ার করি না।

নিজেকে পরীক্ষা করুন

এআই ট্রেনিং ডেটাসেট কুইজ থেকে অপ্ট আউট করুন

প্রতিটি উত্তরের তাৎক্ষণিক ফিডব্যাক, এবং কোর্স পাস করার পর যাচাইযোগ্য আইডি সহ একটি শেয়ারযোগ্য সার্টিফিকেট।

কুইজ শুরু করুন

ফ্রি এআই শিক্ষাকে সমর্থন করুন। AI Understanding একটি 501(c)(3) অলাভজনক প্রতিষ্ঠান — কোনো বিজ্ঞাপন নেই, কোনো পেওয়াল নেই, কখনোই না। একটি দান করুন

প্রায়শই জিজ্ঞাসিত প্রশ্নাবলী

এআই ট্রেনিং ডেটাসেট থেকে অপ্ট আউট করা কি?

নির্মাতারা robots.txt-এ AI ক্রলার ব্লক করে, প্ল্যাটফর্ম সেটিংসে প্রশিক্ষণের অনুমতি বন্ধ করে এবং অপ্ট-আউট পরিষেবাগুলির সাথে নিবন্ধন করার মাধ্যমে AI প্রশিক্ষণের জন্য তাদের কাজের ভবিষ্যত ব্যবহার কমাতে পারেন এবং সার্চ টুলের সাহায্যে কিছু পাবলিক ডেটাসেট পরীক্ষা করতে পারেন। এই ব্যবস্থাগুলি বেশিরভাগ কোম্পানির দ্বারা ভবিষ্যতের সংগ্রহকে প্রভাবিত করে যারা তাদের সম্মান করতে বেছে নেয়; তারা ইতিমধ্যে প্রশিক্ষিত মডেল থেকে কাজ অপসারণ না.

LAION-5B ডেটাসেট আসলে কী বিতরণ করে?

LAION URL এবং ক্যাপশন প্রদান করে। মডেল প্রশিক্ষকরা সেই লিঙ্কগুলি থেকে ছবিগুলি ডাউনলোড করেছেন।

robots.txt-এ Google-এক্সটেন্ডেড ব্লক করা কি করে?

Google-এক্সটেন্ডেড হল এআই প্রশিক্ষণ ব্যবহারের জন্য একটি নিয়ন্ত্রণ টোকেন। এটিকে ব্লক করলে সার্চ ইনডেক্সিংকে স্পর্শ করা যাবে না।

একটি মডেল প্রশিক্ষিত হওয়ার পরে অপ্ট আউট করার প্রধান সীমাবদ্ধতা কী?

অপ্ট-আউটগুলি ভবিষ্যতের সংগ্রহকে প্রভাবিত করে যে কোম্পানিগুলি তাদের সম্মান করে৷ অতীত প্রশিক্ষণ পূর্বাবস্থায় নেই.

কেন আপনার নিজের সাইটের robots.txt-এ ক্রলার ব্লক করা আপনার কাজকে পুরোপুরি সুরক্ষিত করে না?

robots.txt হল একটি অনুরোধ যা ভাল আচরণকারী ক্রলাররা অনুসরণ করে এবং এটি শুধুমাত্র সেই সাইটে প্রযোজ্য যা এটি প্রকাশ করে৷

স্পনিং এর হ্যাভ আই বিন ট্রেইনড টুল আপনাকে কি করতে দেয়?

এটি সূচীকৃত ডেটাসেটগুলি অনুসন্ধান করে। এটি অনেক কোম্পানি দ্বারা ব্যবহৃত ব্যক্তিগত প্রশিক্ষণ ডেটা দেখতে পারে না।

শিখতে থাকুন

সম্পর্কিত গাইড

এই বিষয়ের জন্য বাছাই করা আরও গাইড

একটি বিনামূল্যে AI শংসাপত্র পানএকটি সংক্ষিপ্ত বিনামূল্যে কোর্স এবং পরীক্ষা. কোনো খরচ নেই, কোনো কার্ড নেই। প্রায় 2.5 ঘন্টা।বিনামূল্যে শুরু করুন →