کنترل آموزش هوش مصنوعی با محتوای سایت؛ تصمیم تازه گوگل و OpenAI چه اثری دارد؟

صاحبان سایت به یک راه مشترک برای اعلام مخالفت با آموزش هوش مصنوعی روی محتوایشان نزدیکتر شدهاند؛ اما این کنترل هنوز بهصورت یکسان و فوری در همه سرویسها اجرا نشده است. گوگل، OpenAI و مایکروسافت در اطلاعیههای ۳۰ اکتبر ۲۰۲۶، برابر با ۸ آبان ۱۴۰۵، از پشتیبانی برنامهریزیشده برای یک علامت مشترک در robots.txt خبر دادهاند. برای ناشر، فروشگاه اینترنتی یا تیم تولید محتوا، مسئله اصلی تفکیک دو خواسته است: «محتوای من پیدا شود» و «برای آموزش مدل استفاده نشود».
فهرست مطالب
کنترل آموزش هوش مصنوعی در robots.txt چه چیزی را تغییر میدهد؟
در پیشنویس فنی منتشرشده در IETF در ۳۰ اکتبر، شناسه __usage_ai-training برای بیان ترجیح استفاده از محتوا در آموزش پیشنهاد شده است. صاحب سایت میتواند این انتخاب را برای کل سایت یا مسیرهای مشخص اعلام کند؛ لازم نیست برای همین منظور، ساختار تازهای جایگزین فایل robots.txt شود.
نکته مهم این است که این سند هنوز پیشنویسِ در حال بررسی است، نه استاندارد نهایی. همچنین علامت استفاده از محتوا با دستور دسترسی خزنده یکسان نیست. آموزش در این تعریف، به تغییر پارامترهای آموختهشده مدل مولد مربوط میشود؛ صرف پیدا کردن یک صفحه یا رتبهبندی آن در جستوجو را نباید همان آموزش دانست.

گوگل و OpenAI چه زمانی آن را اجرا میکنند؟
گوگل در اطلاعیه رسمی ۳۰ اکتبر هدف خود را پشتیبانی در سال ۲۰۲۷ اعلام کرده است. اگر سایت با علامت مشترک آموزش را رد کند و درباره Google-Extended دستور صریحی نداشته باشد، گوگل قصد دارد آن را معادل منع Google-Extended تفسیر کند. کنترل اختصاصی این شرکت نیز باقی میماند؛ بنابراین انتخاب عمومی و دستور اختصاصی را باید با هم بررسی کرد.
OpenAI نیز اجرای این علامت را برای ماههای آینده هدفگذاری کرده و گفته است جزئیات اجرا را بعداً اعلام میکند. کنترلهای موجود خزندههای این شرکت حذف نمیشوند. نتیجه عملی برای مدیر سایت روشن است: اعلام حمایت، مساوی فعالشدن امروز نیست و حذف شتابزده تنظیمات فعلی بر پایه این خبر تصمیم دقیقی نخواهد بود.
تقویم مایکروسافت؛ آموزش با استفاده در پاسخ فرق دارد
طبق اطلاعیه مایکروسافت، ترجیح آموزش از «گراندینگ» جدا میشود؛ گراندینگ یعنی استفاده از محتوای وب برای شکلدادن پاسخ تولیدشده. این انتخابها بهخودیخود صلاحیت حضور در نتایج معمول بینگ را عوض نمیکنند، اما محدودکردن گراندینگ میتواند دیدهشدن در تجربههای AI را کاهش دهد.
- ۱ فوریه ۲۰۲۷، ۱۲ بهمن ۱۴۰۵: آغاز رعایت ترجیحهای جدید همزمان با خزش.
- پیش از ۱ مارس ۲۰۲۷، ۱۰ اسفند ۱۴۰۵: مهلت گذار برای سایتهای استفادهکننده از NoArchive یا NoCache؛ پس از آن این دو برای ترجیح آموزش و گراندینگ خوانده نمیشوند.
برای سایتهای مشمولِ محدودیت قدیمی، حفظ محدودیت گراندینگ علاوه بر تنظیم صفحه، ثبت ترجیح موقت در Bing Webmaster Tools را هم میخواهد؛ شرایط احراز و مهلتهای جزئی در همان سند آمده است. ثبت تنظیم با اعمال آن یکی نیست؛ خزش دوباره اهمیت دارد. مایکروسافت نیز تصریح میکند این انتخابها تضمین ورود بازدیدکننده یا پرداخت پول نیستند.

این خبر برای کسبوکار ایرانی چه تصمیمی ایجاد میکند؟
برای تیمی که بابت تولید گزارش، راهنما یا محتوای تخصصی هزینه میکند، خبر درباره مدیریت شیوه استفاده از همان دارایی است؛ نه وعده درآمد تازه. یک مثال فرضی و آموزشی: ناشری ممکن است بخواهد راهنمای عمومیاش در جستوجو پیدا شود، ولی درباره استفاده آموزشی از آرشیو تخصصی انتخاب متفاوتی داشته باشد. پیش از هر تغییر، باید دقیقاً مشخص کند کدام نوع استفاده را میخواهد محدود کند و کدام مسیر جذب مخاطب برایش مهم است.
سه پرسش برای گفتوگو با مسئول فنی مفید است: اکنون چه دستورهایی روی سایت وجود دارد؟ هدف، کنترل آموزش است یا استفاده در پاسخ AI؟ شرکت مقصد چه زمان و با چه اولویتی دستور جدید را تفسیر میکند؟ این پرسشها از تصمیم کلی «همه چیز را ببندیم» دقیقترند. همانطور که در بررسی هزینه پنهان هوش مصنوعی و بازبینی انسانی مطرح است، هزینه تصمیم فقط اجرای یک دستور نیست؛ بررسی نتیجه هم بخشی از کار است.
آیا این علامت جلوی همه استفادههای هوش مصنوعی را میگیرد؟
خیر؛ اطلاعیه OpenAI آن را تلاشی داوطلبانه میان ارائهدهندگان مشارکتکننده معرفی میکند. پشتیبانی یک شرکت را نمیتوان به تمام سرویسها تعمیم داد. جزئیات نهایی و زمان اجرا نیز باید از اعلامیه همان ارائهدهنده دنبال شود. برای دنبالکردن تغییرهای کاربردی بعدی، مطالب هوش مصنوعی زد ارز را ببینید.
Google نشان تجاری Google LLC است؛ این مطلب مستقل از گوگل تهیه شده است.






