وسم واحد في robots.txt بدل قائمة زواحف: Google وOpenAI وMicrosoft وAnthropic تعد باحترام رفض التدريب

ثلاثة أسطر في robots.txt قد تغني يومًا ما عن حفظ اسم زاحف كل شركة. هذا ما وعدت به Google وOpenAI وMicrosoft وAnthropic يوم 30 أكتوبر 2026: وسم مشترك يقول للجميع «لا تدرّبوا على موقعي».

اليوم لا يتغير شيء في موقعك

الإعلان وعد بالدعم لا تفعيل له. بحسب إعلانات الشركات: Anthropic بدأت التنفيذ، وOpenAI تقول «في الأشهر المقبلة»، وMicrosoft تبدأ في 1 فبراير 2027، وGoogle في 2027. والوسم يخص التدريب فقط، ولا يمسح ما جُمع قبله.

ما الذي يُكتب في الملف بالضبط؟

بدل أن تكتب قاعدة لكل زاحف، تضع الوسم نفسه مكان اسم الزاحف. هذا هو الشكل الذي نقله Engadget عن المسودة، والسطر الأخير اختياري ليستثني مجلدًا تسمح بالتدريب عليه:

User-Agent: __usage_ai-training
Disallow: /
Allow: /press-kit/

تقول Google إنها ستعامل الوسم كأنك منعت Google-Extended إن لم تذكره صراحةً في الملف، وإن ذكرته فقاعدته هي التي تُطبَّق. وتقول Microsoft إن الخطوة لا تغيّر أهلية موقعك للظهور في نتائج Bing. أما مصدر الوسم فمسودة كتبها كيفن كيلي من Anthropic في مجموعة AIPREF التابعة لهيئة IETF.

أربع شركات، أربعة مواعيد

الشركة موعد الدعم ما قالته
Anthropic بدأت التنفيذ، بلا تاريخ بحسب ppc.land عن كاتب المسودة؛ تبقى ضوابط ClaudeBot الحالية
OpenAI «في الأشهر المقبلة» تصفه بجهد طوعي ولا يلغي ضوابطها الحالية في robots.txt
Microsoft 1 فبراير 2027 تضيف تفضيلًا منفصلًا لـAI Grounding على مستوى الصفحة
Google 2027 ضوابطها الحالية، ومنها Google-Extended، تعمل بجانب الوسم

ما الذي لا يفعله الوسم؟

تنبيه لمن يعتمد على NoArchive وNoCache تقول Microsoft إنها ستتجاهل هاتين العلامتين في موقع يُضاف إليه التفضيل الجديد، ولن تقرأهما كتفضيل تدريب أو grounding بعد 1 مارس 2027. فلا تحذفهما قبل أن تضع البديل في الصفحات التي تريد حمايتها.

ماذا يفعل صاحب موقع عربي الآن؟

أبقِ قواعد الزواحف التي تعمل اليوم كما هي، فهي التي تُنفَّذ فعلًا. وقد شرحنا في الفرق بين GPTBot وOAI-SearchBot وGoogle-Extended كيف تمنع التدريب دون أن تخسر ظهورك. وإن كان لموقعك محتوى على منصة أخرى، فراجع شروط Meta الجديدة لصفحات الأعمال، لأن الوسم المشترك لا يشمل Meta حتى الآن. أضف الوسم حين تنشر كل شركة تفاصيل تنفيذها، لا قبل ذلك.

هل يوقف الوسم ظهور موقعي في Google؟

لا بحسب Google: تعامله كحظر لـGoogle-Extended، وهو غير Googlebot الذي يفهرس الصفحات للبحث.

هل أضيفه اليوم؟

لن يضرك، لكنه لن يفعل شيئًا بعد عند أغلب الشركات. العبرة بتاريخ تنفيذ كل شركة.

Exit mobile version