# هل أمنع زحف التدريب أو إعادة الاستخدام أو الأرشفة المفتوحة في robots.txt؟

تجمع هذه الملاحظة زواحف التدريب وضوابط إعادة الاستخدام وزاحف الأرشيف المفتوح. راجع أثر كل رمز وكيف تغيّر القاعدة إذا لم تكن مقصودة.

آخر مراجعة: 2026-11-02

## ما المشكلة؟

تجمع هذه الفئة القديمة ثلاثة أغراض مختلفة: زواحف تدريب مثل GPTBot و ClaudeBot، وضوابط إعادة الاستخدام مثل Google-Extended و Applebot-Extended، وزاحف الأرشيف المفتوح CCBot. وجدنا في robots.txt قاعدة تمنع واحداً منها أو أكثر من الصفحة الرئيسية. هذه ملاحظة للعلم، ولا تُحسب خطأً في موقعك.

## لماذا تهم؟

تحديد الوصول للتدريب أو إعادة الاستخدام أو الأرشفة المفتوحة قرار من حقك. ويوثّق Google أن Google-Extended لا يؤثر في ظهورك أو ترتيبك في بحث Google.

تنشر بعض الشركات رموز بحث منفصلة عن زواحف التدريب أو ضوابط إعادة الاستخدام، لكن أثر المنع يختلف بين المنتجات؛ راجع توثيق الرمز نفسه.

نذكره لتتأكد أن المنع مقصود. قد يضيفه قالب أو إضافة حماية دون علمك، أو مع قائمة تمنع زواحف البحث أيضاً.

## كيف تفحصها؟

1. افتح الرابط https://موقعك/robots.txt في المتصفح.
2. ابحث عن رموز هذه الفئة: GPTBot و ClaudeBot و MistralAI-Training و Amazonbot و Google-Extended و Applebot-Extended و CCBot.
3. إن وجدت تحت أحدها السطر Disallow: /، فهو ممنوع من موقعك كله.
4. راجع الملف نفسه بحثاً عن زواحف البحث مثل OAI-SearchBot و Claude-SearchBot و PerplexityBot، وتأكد من أنها غير ممنوعة إذا أردت الظهور في الإجابات.

## طريقة الإصلاح

### أي موقع

1. إن كان المنع مقصوداً، فلا تغيّر شيئاً. هذه الملاحظة لا تدخل في صحة موقعك.
2. إذا أردت السماح بالقدرة التي يعبّر عنها رمز معيّن، فافتح ملف robots.txt في جذر موقعك.
3. احذف قسم Disallow الخاص بذلك الرمز، ثم احفظ الملف.
4. تأكد ألا تحذف قواعد أخرى تمنع صفحات خاصة مثل السلة أو لوحة الحساب.

### wordpress

1. افتح Yoast ← Tools ← File editor، أو Rank Math ← General Settings ← Edit robots.txt.
2. احذف قواعد المنع الخاصة بالرموز التي قررت السماح لها، واحفظ.
3. إذا لم يتغير الملف، فقد يكون هناك ملف robots.txt فعلي في جذر الاستضافة، فعدّله من مدير ملفات الاستضافة أو اطلب ذلك من مطوّرك.

### shopify

1. من لوحة Shopify: Online Store ← Themes ← Edit code ← Add a new template ← robots، أو افتح ملف robots.txt.liquid إذا كان موجوداً.
2. عدّل قواعد الرموز كما تريد، ثم اضغط Save. وراجع التعديل بعناية، لأن الخطأ فيه قد يمنع Google نفسه.

### salla

1. من لوحة سلة: أدوات التسويق ← تحسين محركات البحث ← ملف robots.
2. عدّل قواعد الرموز كما تريد، ثم احفظ.

### zid

ملاحظة المنصة: يتاح محرر robots.txt في زد حسب الباقة؛ راجع صفحة المساعدة الحالية وباقتك، ثم عدّل قواعد الرموز التي قررتها.

## مثال

### بعد

```robots
# مثال لتقييد التدريب أو إعادة الاستخدام أو الأرشفة المفتوحة
User-agent: GPTBot
Disallow: /

User-agent: ClaudeBot
Disallow: /

User-agent: Google-Extended
Disallow: /

User-agent: Applebot-Extended
Disallow: /

User-agent: CCBot
Disallow: /

User-agent: *
Allow: /
```

## كيف تتحقق؟

1. افتح https://موقعك/robots.txt وتأكد من أن القواعد كما قررت.
2. أعد الفحص في رانكاوي بعد أي تعديل لنقرأ robots.txt من جديد. إذا أبقيت المنع، فستبقى هذه الملاحظة ظاهرة للعلم فقط.

## أخطاء شائعة

- الظن أن منع GPTBot يُخرج موقعك من بحث ChatGPT. زاحف البحث هو OAI-SearchBot.
- الظن أن منع Google-Extended يُخرجك من Google أو من AI Overviews. هو خاص بتدريب نماذج Google واستخدامها، وبحث Google يتبع Googlebot.
- الاعتماد على robots.txt وحده بوصفه حماية تامة. هو طلب تلتزم به الشركات المعروفة، وليس قفلاً تقنياً.

## أسئلة شائعة

### هل تقييد هذه الرموز يحمي محتواي الذي جُمع سابقاً؟

لا. robots.txt يطلب من الزاحف ألّا يقرأ من الآن فصاعداً. ما جُمع قبل إضافة القاعدة لا يتأثر بها.

### هل يقلل تقييد هذه الرموز نقاط موقعي في رانكاوي؟

لا. هذه ملاحظة للعلم ولا تدخل في صحة الموقع ولا في Rankawy Score.

## طلب جاهز لمساعدك الذكي

استخدم أدوات رانكاوي لقراءة ملاحظة ai-training-blocked في موقعي وأسماء رموز التدريب أو إعادة الاستخدام أو الأرشفة المفتوحة المقيدة. اشرح غرض كل رمز وأثر منعه، وهل في الملف نفسه منع لزواحف البحث قد يكون غير مقصود. ساعدني أقرر، ثم اكتب نسخة robots.txt المناسبة لأراجعها وألصقها بنفسي. لا تغيّر أي شيء في موقعي.
