الخلاصة
- أعلنت غوغل ومايكروسوفت وأنثروبيك وأوبن إيه آي دعم رمز __usage_ai-training الذي يرفض به الموقع التدريب لدى الجميع بخطوة واحدة.
- الرمز مسودة فردية في IETF كتبها موظف في أنثروبيك بتاريخ 30 أكتوبر، وليست معياراً معتمداً بعد.
- أنثروبيك بدأت التنفيذ، وأوبن إيه آي خلال أشهر، ومايكروسوفت وغوغل في 2027؛ والرمز لا يزيل ما جُمع سابقاً.
خبر:
يكفي سطر واحد في ملف robots.txt ليرفض موقع إلكتروني استخدام محتواه في تدريب نماذج 4 شركات دفعة واحدة، بعدما أعلنت غوغل ومايكروسوفت وأنثروبيك وأوبن إيه آي في 30 أكتوبر دعم رمز موحد باسم __usage_ai-training. تحل الإشارة محل إدراج زاحف كل شركة على حدة. وقالت غوغل إنها ستعامل الموقع الرافض كأنه منع Google-Extended حتى لو لم يسمّه.
تفصيل:
- الصيغة: يُكتب الرمز في robots.txt على هيئة User-Agent: __usage_ai-training يليه Disallow: / مع استثناءات اختيارية عبر Allow، وفق المسودة. وتقول غوغل إن الرمز يخص التدريب فقط، فتبقى أدوات الشركات الخاصة سارية، ومنها Google-Extended وخيار الانسحاب من الذكاء الاصطناعي التوليدي في Search Console.
- الأصل في IETF: الإشارة مسودة فردية بعنوان Machine-Readable Training Preference Signal كتبها كيفن كيلي من أنثروبيك بتاريخ 30 أكتوبر 2026 وتنتهي صلاحيتها في 3 مايو 2027، وتستند مفرداتها إلى مسودة مجموعة عمل AIPREF. ويشير موقع IETF إلى أن المسودة الفردية غير معتمدة ولا مكانة رسمية لها في مسار المعايير.
- موقف غوغل: تعتزم غوغل دعم الإشارة في أوائل 2027، وقالت إن المواقع التي تسمح بـGoogle-Extended يمكن أن تظهر في إجابات تطبيقات Gemini وتتلقى نقرات منها. وقال جون مولر من غوغل إن المزودين الآخرين يستطيعون التعامل مع الرمز بالطريقة نفسها فيسهل الانسحاب لدى الجميع.
- موقف أوبن إيه آي: قالت أوبن إيه آي إنها تعتزم تنفيذ الإشارة خلال الأشهر المقبلة وستنشر التفاصيل حينها، وإن زواحفها القائمة GPTBot وOAI-SearchBot وOAI-AdsBot وChatGPT-User تبقى سارية. ووصفت الرمز بأنه آلية تنسيق لا أداة أمنية بموجب RFC 9309، فلا يمنع الزواحف غير الملتزمة.
- موقف مايكروسوفت: ستدعم مايكروسوفت الإشارة وتضيف إعداداً منفصلاً لتأسيس الإجابات حين يصل النموذج إلى صفحة للرد على سؤال لا لجمع بيانات تدريب، ويشمل أدوات طرف ثالث تستخدم تقنياتها. وحددت ذا فيرج 1 فبراير 2027 موعداً، بينما نقلت سيليكون أنغل أن الدعم يأتي خلال الأشهر المقبلة.
- أنثروبيك وميتا: بدأت أنثروبيك تنفيذ الإشارة فعلاً، وفق ذا فيرج وسيليكون أنغل، وهي الشركة التي يعمل فيها كاتب المسودة. أما ميتا فعبّرت عن دعم الفكرة دون التزام بتنفيذها، بحسب ذا فيرج، وهي من المشاركين في مجموعة عمل AIPREF إلى جانب كلاودفلير ونيوز كورب وبي بي سي.
- حدود الرمز: تحديث robots.txt لا يزيل ما جُمع سابقاً في مجموعات بيانات أو نماذج مدرَّبة، وفق أوبن إيه آي. والإشارة تخص التدريب لا الزحف ولا الفهرسة ولا الاسترجاع الآني للإجابات، ولا تنطبق على النماذج التي تؤدي مهاماً غير توليدية حصراً، بحسب سيليكون أنغل.
- الإطار الأوروبي: قالت غوغل إن الاقتراح يتسق مع مدونة قواعد الممارسة الأوروبية لمزودي نماذج الذكاء الاصطناعي ذات الأغراض العامة، التي تقر robots.txt وسيلة للتعبير عن تفضيلات مقروءة آلياً. وحدّثت غوغل صفحة زواحفها الشائعة للإشارة إلى الدعم المقبل.
- الخلاف القائم: نقلت سيرش إنجن راوندتيبل عن نيت هيك، المشارك في عمل IETF، أن المعيار لم يكتمل على مستوى المنظمة وأن خلافات جوهرية ما زالت قائمة. ويرأس مجموعة عمل AIPREF مارك نوتنغهام من كلاودفلير وسوريش كريشنان من سيسكو، ومن أعضائها فاينانشال تايمز ومؤسسة الحدود الإلكترونية وCreative Commons.
ماذا بعد؟
تفاصيل تنفيذ أوبن إيه آي خلال الأشهر المقبلة، وموعد مايكروسوفت في 1 فبراير 2027، ودعم غوغل في أوائل 2027، ومصير المسودة في مجموعة عمل AIPREF قبل انتهاء صلاحيتها في 3 مايو 2027.
