لماذا توقف فحص موقعك قبل أن يكتمل، وكيف تكمله؟
درجة الخطورة: تحذيرمتوسطةالمدة التقريبية بالدقائق: 10آخر تحديث: 2026-10-11


كيف تصلحهافي هذا الدليل
ما المشكلة؟
بدأ الفحص بشكل طبيعي وقرأنا عدداً من صفحات موقعك، ثم بدأ الخادم أو جدار الحماية يرفض طلباتنا: بالرمز 429، أو بصفحة تحقق. تباطأنا وانتظرنا وأعدنا المحاولة، لكن الرفض تكرر، فتوقفنا حتى لا نُثقل على موقعك. حفظنا كل الصفحات التي قرأناها، وتقريرك مبني عليها، لكن بقية الصفحات لم تُفحص بعد. هذا يحدث كثيراً مع حماية Cloudflare، ومع المتاجر المستضافة مثل Shopify.
لماذا تهمّ؟
التقرير الناقص يعطي صورة ناقصة: مشكلات الصفحات التي لم نصلها لا تظهر في صحة الموقع ولا في خطة الإصلاح.
إذا كانت القاعدة نفسها تُوقف زواحف أخرى بعد عدد معين من الطلبات، فقد تُبطئ أيضاً زواحف مساعدات الذكاء الاصطناعي وأدوات المعاينة.
كيف تكتشفها بنفسك
- افتح تقرير الفحص في رانكاوي وقارن عدد الصفحات التي فحصناها بعدد صفحات موقعك في خريطة الموقع.
- في Cloudflare، افتح سجل أحداث الأمان (Security Events) وابحث عن الطلبات التي يظهر فيها User-Agent باسم RankawyBot لترى القاعدة التي أوقفتها.
- في Vercel، افتح Firewall في مشروعك وراجع الطلبات المرفوضة في وقت الفحص.
كيف تصلحها
Shopify
- افتح لوحة Shopify، ثم Online Store، ثم Preferences.
- في قسم Crawler access اضغط Create signature.
- اكتب اسماً مثل Rankawy، واختر نطاق متجرك الرئيسي، والمدة 3 أشهر.
- انسخ قيمتي Signature-Input و Signature والصقهما في صفحة الفحص في رانكاوي، ثم أعد الفحص.
سلةقيد في منصة الموقع
قيد في منصة الموقع: تحمي سلة المتاجر بجدار حماية لا يتحكم فيه صاحب المتجر. حفظنا الصفحات التي فحصناها، ونفحص متاجر سلة بسرعة أبطأ. أعد الفحص بعد ساعة، وإن تكرر الإيقاف فراسل دعم سلة واطلب السماح لزاحف RankawyBot، أو راسلنا من صفحة الدعم.
زدقيد في منصة الموقع
قيد في منصة الموقع: تحمي زد المتاجر بجدار حماية لا يتحكم فيه صاحب المتجر. حفظنا الصفحات التي فحصناها، ونفحص متاجر زد بسرعة أبطأ. أعد الفحص بعد ساعة، وإن تكرر الإيقاف فراسل دعم زد واطلب السماح لزاحف RankawyBot، أو راسلنا من صفحة الدعم.
أي موقع
- في Cloudflare: افتح موقعك، ثم Security ثم Security rules (أو WAF ثم Custom rules).
- أنشئ قاعدة: الحقل User Agent، والشرط contains، والقيمة RankawyBot، والإجراء Skip، وحدّد تخطي القواعد المخصّصة وقواعد تحديد المعدل وSuper Bot Fight Mode.
- إن كانت خطتك المجانية في Cloudflare تستخدم Bot Fight Mode، فأوقفه من Security ثم Bots حتى ينتهي الفحص، ثم أعد تشغيله.
- في Vercel: افتح مشروعك، ثم Firewall، وأضف قاعدة: إذا كان User-Agent يحتوي على RankawyBot فالإجراء Bypass، ثم احفظها وانشرها.
- في جدار حماية آخر أو لوحة الاستضافة: أضف قاعدة سماح للطلبات التي يظهر فيها User-Agent باسم RankawyBot، أو أرسل للدعم: «أرجو السماح لزاحف RankawyBot بالوصول إلى موقعي، وتفاصيله في rankawy.com/bot».
- أعد الفحص في رانكاوي ليكمل بقية الصفحات.
مثال
Cloudflare custom rule Expression: (http.user_agent contains "RankawyBot") Action: Skip (custom rules, rate limiting rules, Super Bot Fight Mode)
كيف تتأكد من الإصلاح
- أعد الفحص في رانكاوي بعد إضافة قاعدة السماح.
- تأكد من أن عدد الصفحات المفحوصة اقترب من عدد صفحات موقعك، وأن هذه المشكلة اختفت من التقرير.
- إن عاد الإيقاف، راجع سجل الأحداث في جدار الحماية وتأكد أن قاعدة السماح تسبق قاعدة تحديد المعدل.
أخطاء شائعة
- إعادة الفحص مرات متتالية من دون تغيير الإعداد: الجدار نفسه سيوقفه في المكان نفسه تقريباً.
- إيقاف الحماية كلها بدل استثناء زاحف واحد معروف.
- الاعتماد على التقرير الناقص لقرارات كبيرة قبل أن يكتمل الفحص.
جهّز الإصلاح مع مساعدك الذكي
اربط مساعدك الذكي برانكاوي في أي خطة، ثم انسخ هذا الطلب إليه. سيقرأ الصفحات المتأثرة وخطوات منصتك ويجهّز لك التعليمات لتراجعها.
استخدم أدوات رانكاوي (get_site_overview ثم get_issue_pages) لمعرفة كم صفحة فحصنا في موقعي قبل أن يوقف جدار الحماية الفحص (crawl-rate-limited)، وما المنصة. رجّح من ذلك مصدر الإيقاف (Cloudflare أو Vercel أو Shopify أو جدار حماية آخر)، ثم اكتب لي خطوات السماح لزاحف RankawyBot لتلك الحالة، ورسالة قصيرة لدعم الاستضافة أو المنصة تذكر rankawy.com/bot. لا تقترح إيقاف الحماية كلها.
كيف تربط مساعدك الذكيأسئلة شائعة
هل ضاعت الصفحات التي فحصتموها قبل التوقف؟
لا. حفظنا كل صفحة قرأناها، والتقرير الحالي مبني عليها. حين تعيد الفحص بعد السماح لزاحفنا، نفحص الموقع كاملاً.
لماذا لا تفحصون أبطأ بدل التوقف؟
نتباطأ فعلاً عند أول رفض، ونحترم Retry-After، ونفحص المتاجر المستضافة بطلب واحد في الثانية على الأكثر. حين يستمر الرفض رغم ذلك، فالانتظار لا يحل المشكلة، والحل قاعدة سماح.
أدلة مرتبطة
ما معنى الرمز 429 (Too Many Requests) وكيف تمنع رفض الزحف؟
ردّ خادمك بالرمز 429 على زاحف رانكاوي رغم أنه يطلب الصفحات ببطء. تعرّف على قواعد تحديد المعدل وكيف تسمح لـ RankawyBot دون أن تُضعف الحماية.
كيف تسمح لزاحف رانكاوي بفحص موقعك إذا منعه جدار الحماية؟
جدار الحماية أو الاستضافة ردّا على زاحف رانكاوي برفض (401 أو 403 أو صفحة تحقّق). تعرّف كيف تسمح لـ RankawyBot في Cloudflare و Vercel و Shopify وغيرها.
ملف robots.txt لا يُفتح: كيف تُصلحه قبل أن يوقف Google الزحف إلى موقعك؟
حين يرد ملف robots.txt بخطأ خادم أو لا يرد، قد يوقف Google الزحف إلى موقعك كله مؤقتاً. تعرّف كيف تجعله يُفتح ويُرجع الرمز 200.

