على الرغم من أن مصطلح «الزاحف الخفي» قد يوحي بقصة تجسس خيالية، إلا أن هذا المفهوم اكتسب زخماً كبيراً مؤخراً مع التشريعات الجديدة التي تسعى لمواجهة هذه الزواحف الرقمية.
فقد دفع مشروع قانون تم إقراره في نيويورك الشهر الماضي، وتشريع آخر قُدم إلى مجلس النواب الأمريكي في يوليو، نحو حظر الروبوتات من إخفاء هويتها.
يأتي هذا التوقيت في محله، فلم يعد تصفح الروبوتات مشكلة هامشية. تُظهر بيانات Cloudflare أن أكثر من نصف حركة المرور على الويب تعتمد الآن على الروبوتات. وتُشكل نسبة متزايدة من هذه الحركة زواحف تستخلص المحتوى من مواقع الناشرين دون الكشف عن هويتها أو الغرض منها. يبقى الناشرون في حيرة من أمرهم بشأن أمرين: من يأخذ محتواهم، وما هو الاستخدام المقصود له.
ما هو الزاحف الخفي؟
الزاحف الخفي هو برنامج زحف على الويب يقوم بجمع المحتوى من المواقع دون الكشف عن هويته أو غرضه.
غالباً ما تتجاهل هذه الزواحف ملفات robots.txt (التي تستخدمها المواقع لإبلاغ الزواحف بما يمكن وما لا يمكن جمعه) أو تتحايل عليها، أو تقوم بجمع المحتوى عبر خدمات طرف ثالث. قد يرى الناشر زيارة من زاحف خفي على أنها زيارة عادية لمستخدم بشري. بعبارة أخرى، لن يكشف الزاحف عن هويته ويحاكي أنماط التصفح التي تجعله يبدو كزائر بشري.
في حين أن ليست كل الزواحف الخفية خبيثة، إلا أنه من الصعب جداً على الناشرين التخلص منها. وهذا يجعل إيقافها أمراً معقداً، حيث لا يستطيع الناشرون حماية أنفسهم من شيء لا يمكنهم رؤيته.
ما مدى انتشار الزواحف الخفية؟
كما أفادت Digiday سابقاً، يظهر اقتصاد مزدهر لجمع المحتوى من الأطراف الثالثة. وقد ذكر تقرير محلل الإعلام ماثيو سكوت غولدشتاين حول «اقتصاد جمع المحتوى» أن هذا المجال تطور ليصبح صناعة تقدر بمليار دولار. وقالت دانييل كوفي، الرئيسة التنفيذية لمنظمة News/Media Alliance التجارية، إنها رأت بيانات تشير إلى أن السوق أقرب إلى مليارات الدولارات.
في كل الأحوال، تتزايد هذه الزواحف بوتيرة سريعة. وجدت شركة الأمن السيبراني Human Security أن حركة زواحف الذكاء الاصطناعي نمت بنسبة 597% من يناير إلى ديسمبر 2025، وأن حركة المرور المدعومة بالذكاء الاصطناعي إجمالاً نمت بنسبة 187% في عام 2025، أي تضاعفت ثلاث مرات تقريباً على أساس سنوي، وفقاً للتقرير. تؤثر هجمات جمع المحتوى الآن على ما يقرب من 20% من حركة مرور الموقع للمؤسسة المتوسطة، وهو ضعف مستويات عام 2022 تقريباً.
يمكن للزواحف الخفية إخفاء هويتها باستخدام وكلاء تصفح عامين أو بنى تحتية سحابية بدلاً من تعريف نفسها كزواحف ذكاء اصطناعي. على سبيل المثال، يمكن لزاحف خفي أن يقدم نفسه كمتصفح كروم عادي أو يستخدم عنوان IP سكني.
بعدم تعريفها لنفسها، تُصعّب الزواحف الخفية على الناشرين معرفة ما إذا كانت حركة المرور تأتي من شركة ذكاء اصطناعي أو وسيط آخر يجمع البيانات لإعادة بيعها.
تحدثت ليندساي فان كيرك، نائب الرئيس الأول للابتكار في People Inc، في حدث لـ IAB Tech Lab في مايو، ووضحت كيف تتمكن بعض برامج جمع المحتوى من تجاوز محاولات الناشرين لحماية محتواهم. قالت فان كيرك: «لقد رأينا محتوانا يظهر في تطبيقات لا تربطنا بها أي علاقة، وهذا يثير تساؤلاً: كيف تحصلون على هذا الوصول؟ كيف تأخذون هذه المعلومات، وتعيدون تغليفها، وترسلونها إلى المستهلك؟ والإجابة هي من خلال هذه الاستخدامات غير المصرح بها، ومعظمها يتم عبر شبكات بروكسي منزلية كحل أخير. نرى كيف يتسللون، ولذلك نشعر أن ذلك يؤثر على علامتنا التجارية، ويؤثر على كيفية رؤية المستهلكين لها».
لماذا يُعد هذا سيئاً للناشرين؟
عندما يُعرّف الزاحف عن نفسه، يمكن للناشرين رؤية أي الزواحف تقوم بجمع محتواهم ومن ثم يقررون ما إذا كانوا يريدون حظرها. ولكن إذا أخفى الزاحف هويته، فإن الناشرين يعملون في الظلام. لا يمكنهم معرفة أي شركات الذكاء الاصطناعي مهتمة بمحتواهم، ولا يمكنهم ربط حركة المرور بذلك المصدر.
يعود الأمر أيضاً إلى النقاش بأكمله حول محاولة الناشرين حماية محتواهم من الجمع والاستخدام دون إذن أو تعويض – وهي قضية أدت إلى عدد من الدعاوى القضائية والصفقات الترخيصية المتعلقة بالذكاء الاصطناعي. لا يرغب العديد من الناشرين في استخدام محتواهم مجاناً لتدريب نماذج الذكاء الاصطناعي أو بيعه من خلال سوق ثانوي لا يستفيدون منه.
كيف يحاول الناشرون التعامل مع هذه الزواحف الخفية؟
أفاد مسؤولون تنفيذيون في مجال النشر لـ Digiday بأن خوادمهم قد تعرضت للحمل الزائد بملايين عمليات جمع المحتوى من الروبوتات على مر الوقت. وقالت فان كيرك إن People Inc. انتقلت من حظر حوالي 2100 وكيل مستخدم إلى أكثر من 30 ألفاً عندما اعتمدت نهج حظر جميع الروبوتات. وهذا يصل إلى عشرات الملايين من عمليات الجمع يومياً. في حدث IAB Tech Lab، قالت إن هذه الاستراتيجية يمكن أن تساعد الناشرين على المدى القريب، حتى لو تمكنت الزواحف الخفية من التسلل.
وقالت فان كيرك: «إذا لم نفرض احتكاكاً على هذا الجانب من الاقتصاد الآن، فسيجعل من الصعب علينا استعادة القيمة في الجانب الآخر منه. الاحتكاك هو الهدف حقاً. كلما أبطأت عمل أي من جامعي المحتوى المأجورين، والزواحف التي تعيد البيع، والأشخاص الذين لا يستخدمونه لأغراض مشروعة – أصبحنا أكثر فعالية في قدرتنا على توفير قيمة في الجانب الآخر لها قيمة اقتصادية وسمة، كما أنها تعيق تجربة المستخدم بطريقة تجعل الأطراف تجلس إلى الطاولة».
وأضافت: «إضافة ثانيتين كاملتين من التأخير لمعظم جامعي المحتوى عند تطبيق نهج حظر جميع الروبوتات هو أمر جيد حقاً، حتى لو اضطروا للمرور. كل جامع محتوى يضطر لدفع مقابل شبكة بروكسي منزلية للوصول إلى المحتوى هو هامش ربح تسحبه من عملهم. وهذا مفيد للنشر».
كيف تتصدى الولايات المتحدة للزواحف الخفية؟
أقرت نيويورك «قانون حظر الزواحف الخفية» في يونيو، والذي يتطلب من الروبوتات الكشف عن هويتها وغرضها. يُعرف مشروع القانون الزاحف الخفي بأنه أي برنامج يسترد أو يجمع أو يصل إلى موقع ويب، بما في ذلك وكلاء الذكاء الاصطناعي. وسيتمكن مكتب المدعي العام في نيويورك من مقاضاة الشركات التي تفشل في الكشف عن هذا النشاط، مع غرامات مدنية قد تصل إلى 15,000 دولار يومياً «لكل انتهاك»، وفقاً لمشروع القانون.
كان ذلك بمثابة مقدمة لمشروع القانون الذي قُدم إلى مجلس النواب الأمريكي الشهر الماضي. وقد كانت News/Media Alliance تمارس ضغوطاً نشطة لدعم هذه الإجراءات.
قالت كوفي من News/Media Alliance: «التلويح بالإصبع لن يجدي نفعاً. إنهم فاعلون سيئون. يتصرفون على هذا النحو. إنهم يختبئون لسبب. لذا عليك أن توقفهم في مهدها. عليك أن تبدأ من خط الدفاع الأول: اجعلهم يُعرّفون عن أنفسهم. يجب على الفاعلين السيئين، والروبوتات السيئة، أن يُعرّفوا عن أنفسهم، وعندما يفعلون ذلك، يمكننا إيقافهم. وإذا لم نتمكن من إيقافهم، أو حتى إذا أوقفناهم، يمكننا مقاضاتهم… يمتلك المدعي العام ولجنة التجارة الفيدرالية سلطة الإنفاذ لمحاسبتهم».
قالت إن هذه القوانين ستكون رادعاً للفاعلين السيئين. ويعتقد غولدشتاين أن هذه اللوائح ستؤسس لبروتوكولات ترخيص الناشرين مع شركات الذكاء الاصطناعي.
كتب غولدشتاين في منشور على لينكد إن: «الشفافية ليست الغاية، بل هي الشرط الأساسي. كل محادثة ترخيص أشارك فيها تتوقف عند نفس النقطة، وهي أن الناشرين ليس لديهم طريقة موثوقة لإثبات ما تم أخذه، ومن قبل من، وبأي حجم. يغير التعريف مائدة المفاوضات. بمجرد أن يضطر الزاحف إلى ذكر اسمه، يتوقف جمع المحتوى عن كونه مجانياً ويبدأ كبند في الفاتورة. الشركات التي لديها أكبر قدر لتخسره تفضل إبقاء العداد غير قابل للقراءة».
ماذا سيحدث الآن؟
يجب أن توقع حاكمة نيويورك كاثي هوكول على مشروع قانون نيويورك قبل أن يصبح قانوناً. أما الخطوة التالية لمشروع القانون في الكونجرس فهي جذب الرعاة.
توقعت كوفي أن تستغرق العملية بعض الوقت. ومع ذلك، تعتقد أن هذه القوانين ستساعد الناشرين على اكتساب الرؤية التي يحتاجونها من خلال التصدي لنشاط الزواحف الخفية.
قالت كوفي: «الأمر أشبه برفع سقف منزلك لتجد النمل الأبيض. أحياناً عليك أن تبحث بعمق وتنفذ الأساسيات».