[{"data":1,"prerenderedAt":118},["ShallowReactive",2],{"seo-verification":3,"blog-crawlers-ia-search-training-agent-ar":6},{"google":4,"bing":5},"EycwPY2XMyTkVzas3n1ygeNJFGAH513qrMjfDljzsMQ","",{"id":7,"slug":8,"title":9,"excerpt":10,"readTime":11,"views":12,"isPinned":13,"publishedAt":14,"category":15,"categories":21,"featuredImage":23,"bgImage":24,"posterImage":25,"relatedSolution":23,"intro":26,"sections":27,"ctaTitle":71,"ctaBody":72,"ctaButton":73,"ctaUrl":74,"relatedPosts":75},201,"crawlers-ia-search-training-agent","زواحف الذكاء الاصطناعي: استعادة السيطرة على مواقع عملائكم","يميّز Cloudflare بين ثلاث فئات من زواحف الذكاء الاصطناعي. كيفية ضبط ‎robots‎.txt‎ وقواعد Cloudflare لحماية مواقع عملائكم.",7,0,false,"2026-08-01T00:00:00+00:00",{"id":16,"name":17,"slug":18,"color":19,"icon":20},8,"الأمان والمراقبة","securite-monitoring","bg-rose-500\u002F10 text-rose-400","security",[22],{"id":16,"name":17,"slug":18,"color":19,"icon":20},null,"\u002Fblog\u002Fcovers\u002Fbg.svg","\u002Fblog\u002Fcovers\u002Fcrawlers-ia-search-training-agent-poster.svg","منذ يوليو 2026، يصنّف Cloudflare AI Audit زواحف الذكاء الاصطناعي في ثلاث فئات: البحث والتدريب والوكلاء المستقلون. قد يضرّ حجب جميع بوتات الذكاء الاصطناعي بالظهور في نتائج البحث الاصطناعي، فيما يعرّض السماح بكل شيء المحتوى للجمع لتدريب النماذج.",[28,32,42,45,64,68],{"type":29,"title":30,"body":31},"h2","الفئات الثلاث من زواحف الذكاء الاصطناعي","يصنّف Cloudflare AI Audit المحدَّث في 1 يوليو 2026 البوتات في ثلاث فئات: زواحف البحث (GPTBot وPerplexityBot وAmazonbot) تغذّي الإجابات الاصطناعية؛ زواحف التدريب (CCBot وCommon Crawl) تجمع المحتوى لبناء النماذج؛ والوكلاء المستقلون يشغّلون المتصفحات دون جلسة بشرية.",{"type":33,"title":34,"items":35},"ul","لماذا يهمّ التمييز بين هذه الفئات",[36,37,38,39,40,41],"**الظهور مقابل الكشف** — يعزّز السماح لزواحف البحث فرص الاستشهاد بالموقع في إجابات الذكاء الاصطناعي.","**تحكم دقيق** — يتيح ‎robots‎.txt‎ عبر User-agent وضع سياسة لكل فئة.","**سطح هجوم الوكلاء** — قد يكشط الوكيل المستقل نموذجًا أو يشغّل إجراءات.","**النية التحريرية** — بعض المحتوى مخصص للقراء البشريين ولا ينبغي أن يغذّي مجموعة تدريب.","**حمل الخادم** — زواحف التدريب شرسة ولا تحترم Crawl-delay.","**قابلية التدقيق** — يتتبّع Cloudflare AI Audit الحركة حسب الفئة.",{"type":29,"title":43,"body":44},"‎robots‎.txt‎: خط الدفاع الأول","ملف ‎robots‎.txt‎ أكثر إعلانات النية قابلية للقراءة. تحترمه الزواحف المهيّئة جيدًا. أما الوكلاء المستقلون فيتجاهلونه عمومًا. لذا يجب تكملته بقواعد نشطة على مستوى الشبكة.",{"type":46,"title":47,"steps":48},"steps","التدقيق والضبط خطوة بخطوة",[49,52,55,58,61],{"title":50,"body":51},"تدقيق الحركة عبر Cloudflare AI Audit","في لوحة تحكم Cloudflare، افتح Security > Bots > AI Audit. تعرض الواجهة الحجم حسب الفئة وحسب user-agent.",{"title":53,"body":54},"الإعلان عن السياسة لكل فئة في ‎robots‎.txt‎","أضيفوا User-agent: GPTBot \u002F Allow: \u002F لزواحف البحث؛ وUser-agent: CCBot \u002F Disallow: \u002F لزواحف التدريب.",{"title":56,"body":57},"إنشاء قاعدة WAF في Cloudflare للوكلاء المستقلين","في Security > WAF > Custom Rules، أنشئوا قاعدة تستهدف cf‎.bot_management‎.js_check_failed مع نتيجة بوت منخفضة.",{"title":59,"body":60},"حجب زواحف التدريب على مستوى WAF","لـ CCBot، أضيفوا قاعدة WAF على http‎.user_agent contains \"CCBot\" بإجراء Block.",{"title":62,"body":63},"التحقّق من الحفاظ على فهرسة محركات البحث","بعد النشر، تحققوا في Cloudflare Analytics من عدم تأثر Googlebot وBingbot.",{"type":65,"title":66,"body":67},"tip","لا تحجبوا كل شيء: لزواحف البحث قيمة","GPTBot وPerplexityBot وAmazonbot يغذّون إجابات محركات البحث التوليدية. موقع محجوب أمامها لا يظهر في ملخصات ChatGPT أو Perplexity.",{"type":29,"title":69,"body":70},"مواقع العملاء بدون Cloudflare","للمواقع بدون Cloudflare، يبقى ‎robots‎.txt‎ الرافعة الوحيدة. على VPS بصلاحيات root، يمكن لـ fail2ban قراءة سجلات الوصول وحجب الزواحف التي تتجاهل ‎robots‎.txt‎.","احموا مواقع عملائكم","ترافق ServOrbit الوكالات في الإدارة المركزية لاستضافة عملائهم وأمانها.","حلول للوكالات","\u002Fsolutions\u002Fagences",[76,91,105],{"id":77,"slug":78,"title":79,"excerpt":80,"readTime":81,"views":12,"isPinned":13,"publishedAt":82,"category":83,"categories":88,"featuredImage":23,"bgImage":24,"posterImage":90,"relatedSolution":23},165,"pourquoi-votre-site-est-plus-rapide-protege","مدعوم بـ Cloudflare: لماذا ينطلق موقعك على ServOrbit أفضل حمايةً","يستخدم ServOrbit خدمة Cloudflare من أجل DNS وCDN وHTTPS والحماية الشبكية الأساسية، دون أي وعد ضمني بشراكة.",6,"2026-07-05T00:00:00+00:00",{"id":84,"name":85,"slug":86,"color":87,"icon":86},9,"الأخبار","actualites","bg-sky-500\u002F10 text-sky-400",[89],{"id":84,"name":85,"slug":86,"color":87,"icon":86},"\u002Fblog\u002Fcovers\u002Fpourquoi-votre-site-est-plus-rapide-protege-poster.svg",{"id":92,"slug":93,"title":94,"excerpt":95,"readTime":16,"views":96,"isPinned":13,"publishedAt":97,"category":98,"categories":99,"featuredImage":23,"bgImage":24,"posterImage":101,"relatedSolution":102},108,"securiser-vps-crowdsec","تأمين خادمك الافتراضي VPS باستخدام CrowdSec","انشر CrowdSec على خادمك الافتراضي VPS لحجب الهجمات بفضل الكشف السلوكي وقائمة حظر مجتمعية مشتركة.",596,"2026-03-04T00:00:00+00:00",{"id":16,"name":17,"slug":18,"color":19,"icon":20},[100],{"id":16,"name":17,"slug":18,"color":19,"icon":20},"\u002Fblog\u002Fcovers\u002Fsecuriser-vps-crowdsec-poster.svg",{"categorySlug":103,"appSlug":104},"securite","crowdsec",{"id":106,"slug":107,"title":108,"excerpt":109,"readTime":81,"views":110,"isPinned":13,"publishedAt":111,"category":112,"categories":113,"featuredImage":23,"bgImage":24,"posterImage":115,"relatedSolution":116},105,"superviser-vps-uptime-kuma","مراقبة خادمك الافتراضي VPS باستخدام Uptime Kuma","انشر Uptime Kuma على خادمك الافتراضي VPS لمراقبة مواقعك وخدماتك ذاتيًا، مع تنبيهات وصفحة حالة عامة.",1520,"2026-03-07T00:00:00+00:00",{"id":16,"name":17,"slug":18,"color":19,"icon":20},[114],{"id":16,"name":17,"slug":18,"color":19,"icon":20},"\u002Fblog\u002Fcovers\u002Fsuperviser-vps-uptime-kuma-poster.svg",{"categorySlug":103,"appSlug":117},"uptime-kuma",1785606634656]