OpenAI وغوغل ومايكروسوفت وAnthropic تدعم إشارة موحّدة في robots.txt لرفض تدريب الذكاء الاصطناعي
مقترح «policy token» المقدَّم إلى IETF سيتيح للموقع أن يعلن تفضيله بشأن تدريب الذكاء الاصطناعي مرة واحدة في robots.txt بدلاً من إعلانه لكل زاحف على حدة.
قالت OpenAI وغوغل ومايكروسوفت وAnthropic إنها ستعتمد إشارة مشتركة جديدة تتيح للناشرين منع جمع مواقعهم لأغراض الذكاء الاصطناعي، بحسب ما أفاد موقع The Verge في 30 أكتوبر 2026، بعد تقرير سابق لـSearch Engine Roundtable.
كيف تعمل
- الإشارة هي «policy token» توضع في ملف robots.txt الخاص بالموقع، وهو الملف الذي يحدد منذ زمن طويل ما يُسمح للزواحف بجلبه وما لا يُسمح.
- اقترحها في فريق عمل هندسة الإنترنت (IETF) كيفن كيلي، المسؤول التقني عن المعايير في Anthropic.
- حالياً يجب على الموقع أن يعلن تفضيله بشأن تدريب الذكاء الاصطناعي لكل شركة على حدة؛ أما الرمز المشترك فسيطبّق تفضيلاً واحداً على عدة زواحف.
تفاصيل من الشركات
تقول مايكروسوفت إنها ستوفر ضوابط أدق تفصل بين رفض التدريب ورفض التأريض (grounding)، أي توجيه النموذج إلى مصدر موثّق لتقليل الإجابات المختلقة، وإن المواقع ستبقى في نتائج Bing أياً كان اختيارها. ولدى غوغل ضوابط مشابهة لا تؤثر في الظهور في البحث.
تحفظات
لا يزال الرمز مقترحاً في IETF وليس معياراً مكتملاً، وملف robots.txt طوعي: فهو لا يعمل إلا مع الزواحف التي تختار احترامه. ولم يذكر The Verge موعد بدء التطبيق لدى الشركات الأربع.