لم يعد اسم زاحف الذكاء الاصطناعي كافيًا للثقة

تتعامل فرق المواقع و SaaS اليوم مع زواحف الذكاء الاصطناعي باعتبارها جزءًا من التشغيل اليومي: هل نسمح لها، أم نحدها، أم نقيسها كمصدر زيارات جديد؟ النقاش حول Known Agents أظهر نقطة أمنية أبسط وأخطر: وجود ClaudeBot أو Googlebot أو ChatGPT-User في ترويسة User-Agent لا يثبت أن الطلب جاء فعلًا من تلك الجهة.

في 12 أغسطس 2026 انتشر على Hacker News نقاش يرتبط بـ Known Agents ويتحدث عن فحص واسع للثغرات تحت أسماء تشبه زواحف AI. الصياغة الدقيقة مهمة: ظهور اسم شركة في السجل لا يعني أن الشركة تنفذ الفحص. العميل الخبيث يستطيع نسخ الاسم بسهولة. ما يراه المديرون عادة هو طلبات إلى .env و /wp-login.php ولوحات الإدارة وواجهات API الاختبارية ونطاقات staging، لكنها تأتي أحيانًا باسم يبدو مشروعًا.

ما الذي نعرفه

يعرض Agentic Web Index من Known Agents تصنيفات مثل مساعدات AI، وكلاء AI، وكلاء برمجة، زواحف بحث AI، كاشطات بيانات، محركات بحث، ماسحات أمنية، كاشطات عامة ووكلاء غير موثقين. وقت البحث أظهر الموقع 35% bot traffic، و29% من ذلك مرتبطًا بالذكاء الاصطناعي، و0.1% AI chat referral volume من زيارات البشر، و98.5% robots.txt effectiveness. هذه أرقام من منتج يستخدمه أكثر من 5,000 موقع، وليست تعدادًا عالميًا للإنترنت.

لماذا الاسم ليس هوية

User-Agent وصف يرسله العميل عن نفسه، وليس توقيعًا. يستطيع أي سكربت أو proxy أو ماسح أو خادم مخترق وضع سلسلة مألوفة في الترويسة. السجل يحفظ العلامة، لكنه لا يثبت مالك الشبكة ولا الغرض ولا الثقة. كان ذلك مقبولًا نسبيًا للتحليلات البسيطة، لكنه يصبح خطرًا عندما تستخدمه الفرق للسماح بالزحف، أو تخفيف rate limits، أو تصنيف زيارات AI، أو خفض أولوية الإنذارات.

لذلك تنشر جهات البحث إرشادات تحقق. توجيهات Google للتحقق من Googlebot تعتمد على reverse DNS ثم المطابقة الأمامية، لا على الاسم وحده. كما تميز Cloudflare بين verified bots و AI bots وحركة آلية غير موثقة. المبدأ العملي: اجمع IP و ASN و DNS وسمعة الشبكة وسلوك الطلبات ووثائق المزود.

أثر ذلك على ممارسة AI

اعتماد AI يزيد الطلبات الآلية المشروعة: مساعد يفتح صفحة لمستخدم، زاحف بحث AI يفهرس محتوى، زاحف تدريب يجمع بيانات، ووكيل برمجة يقرأ وثائق أو بيئات preview. لكل فئة غرض مختلف. حجب كل ما يحمل اسم AI قد يقلل المخاطر لكنه يضر الظهور. السماح لكل اسم مشهور يعطي الماسحات قناعًا مجانيًا.

robots.txt مفيد للتواصل مع الزواحف المتعاونة، لكنه ليس access control. لا يحمي staging ولا لوحات الإدارة ولا API الخاصة ولا أدوات الاختبار. المسارات الحساسة تحتاج authentication، وضوابط شبكة، وقواعد رفض، ومراقبة مستقلة عن اسم البوت.

خطوات عملية

يجب أن تتضمن السجلات User-Agent الخام، IP المصدر، ASN، مزود الاستضافة، reverse DNS، المسار، status code، معدل الطلبات، سلوك robots.txt، نتيجة challenge والقرار النهائي. من دون هذه الحقول يصبح التحقيق بعد الحادث مجرد تخمين.

لا تكتب قاعدة WAF تسمح بالطلب لأن الاسم يحتوي ClaudeBot. افحص الهوية الموثقة عند وجودها، وسمعة الشبكة، ومعدل الطلب، وحساسية المسار، والسلوك. إذا تعذر التحقق الكامل، ضع الحركة في مسار ثقة منخفض: محتوى عام، حدود محافظة، challenge عند السلوك الغريب، ورفض للمسارات الحساسة.

أنشئ قوائم سماح حسب الغرض. محركات البحث، مساعدات AI، مزودو الأمن، الأدوات الداخلية وخدمات التحليل لا ينبغي أن تشترك في قائمة واحدة. كل إدخال يحتاج مالكًا داخليًا وسببًا ووثيقة تحقق ومسارات مسموحة وحدًا للسرعة. ما لا يستطيع أحد تبريره يجب أن ينتهي.

أخطاء يجب تجنبها

لا تخلط بين AI referral analytics وهوية البوت. معرفة أن إنسانًا وصل من ChatGPT أو Claude شيء، وتقرير ما إذا كان طلب آلي يسمح له بالزحف شيء آخر. لا تخفض الإنذارات لمجرد أن التسمية مشهورة، ولا تمنح تلك التسمية وصولًا إلى staging أو البحث الداخلي أو لوحات الإدارة أو API غير المنشورة.

المستقبل

الحل الأبعد قد يكون طلبات موقعة للزواحف، سجلات verified agents، علاقات تشبه mTLS مع API عالية القيمة، رموز وصول للشركاء أو attestations من المنصات. هذه الآليات تقلل الانتحال، لكنها قد تزيد المركزية وتضع عوائق أمام الزواحف الصغيرة. إلى أن تنضج المعايير، تبقى الحماية طبقية.

قائمة قصيرة

راجع هذا الأسبوع خمسة أمور: حقول السجلات، قواعد الجدار الناري للمسارات مثل .env و /admin، فصل سياسات robots.txt بين التدريب والبحث والزحف العام، فصل زيارات البشر من محادثات AI عن الطلبات الآلية، وفرض authentication على بيئات preview واللوحات الداخلية والأدوات المولدة بالذكاء الاصطناعي.

الخلاصة: حركة AI أصبحت حركة بنية تحتية عادية، لكنها أيضًا قناع جذاب. إذا كان الاسم يمكن لأي طرف كتابته، فهو ليس جواز سفر؛ إنه ادعاء يجب التحقق منه.

المصادر

Known Agents Agentic Web Index وصفحات ClaudeBot و ChatGPT-User؛ Hacker News item 49272569؛ وثائق Anthropic و OpenAI و Google Search Central و Cloudflare حول bots و robots.txt والتحقق وزواحف AI.