وفقًا لـ Cloudflare، أعلنت شركة البنية التحتية العملاقة مؤخرًا أن جميع شركات الذكاء الاصطناعي يجب أن تفصل زاحفات محركات البحث عن زاحفات تدريب الذكاء الاصطناعي بحلول 15 سبتمبر 2026، وإلا ستواجه حظرًا كاملاً. Cloudflare، التي تدير حوالي 20% من حركة المرور العالمية على الإنترنت، استشهدت ببيانات تظهر أن حركة مرور البوتات الآلية قد تجاوزت بالفعل حركة المرور البشرية في النصف الأول من عام 2026—وهي نقطة تحول توقعها محللو الصناعة أن تحدث بعد عام واحد.
تواجه Google التأثير الأكبر بسبب حصتها البالغة 90% في سوق البحث، حيث تستخدم حاليًا Googlebot في كل من الفهرسة وتدريب نموذجها Gemini. يجب على الشركة الاختيار بين فقدان الوصول إلى 20% من الصفحات المفهرسة أو فصل زاحفاتها والمخاطرة بنقص بيانات تدريب الذكاء الاصطناعي. على النقيض من ذلك، قامت OpenAI بالفعل بفصل GPTBot لجمع بيانات التدريب وChatGPT-User للاستعلامات الويب في الوقت الفعلي.