هل تستغل شركات الذكاء الاصطناعي العملاقة شبكة الإنترنت، وهي أغلى مستودع لبيانات البشر على الإطلاق، أم أنها تقوم بجمع المحتوى مجانًا وتقدم القليل في المقابل؟ بيانات محدثة من Cloudflare تلقي الضوء على هذا السؤال المهم. يثير هذا الجدل المتزايد تساؤلات حول أخلاقيات الذكاء الاصطناعي ومستقبل الويب كما نعرفه.
هذا أحد الجوانب الأقل مناقشة في ثورة الذكاء الاصطناعي. بينما تنفق شركات التكنولوجيا ببذخ على مراكز البيانات ووحدات معالجة الرسومات والمواهب، فإنها تتجنب الحديث عن المكون الرئيسي الآخر لنجاح الذكاء الاصطناعي: البيانات. تعتمد نماذج الذكاء الاصطناعي بشكل كبير على كميات هائلة من المعلومات لتدريبها وتحسينها.
ميزان القيمة: هل الذكاء الاصطناعي يستغل الويب؟
السبب في ذلك هو أنهم لا يريدون الدفع مقابل البيانات البشرية عالية الجودة اللازمة لتدريب نماذج الذكاء الاصطناعي، والاستدلال، ومخرجات الذكاء الاصطناعي. بدلاً من ذلك، يرسلون الروبوتات للزحف على مواقع الويب وجمع هذه المعلومات، في الغالب مجانًا. هذا النهج يثير مخاوف بشأن العدالة والتعويض العادل لمقدمي المحتوى.
في الماضي، كانت شركات التكنولوجيا ترسل المستخدمين إلى المصادر الأصلية لهذه المعلومات. شكل هذا الصفقة الكبرى للويب. كانت المواقع تسمح بأخذ بياناتها مجانًا على فهم أنها ستحصل على إحالات في المقابل، ويمكنها الدفع مقابل جهودها من خلال الإعلانات والاشتراكات وتقنيات أخرى. كان هذا النظام يضمن تدفق القيمة بين منشئي المحتوى والمستخدمين.
في عالم الذكاء الاصطناعي التوليدي الجديد، هذا الاتفاق ينهار. الآن، توفر محركات إجابات الذكاء الاصطناعي والروبوتات الدردشة للمستخدمين إجابات مباشرة، مما يجعلهم أقل عرضة لزيارة مواقع الويب التي أنشأت وتحقق من البيانات في المقام الأول. هذا التحول يهدد نموذج الإيرادات التقليدي لمواقع الويب.
بدأت Cloudflare، التي تساعد في تشغيل حوالي 20٪ من مواقع الويب في العالم، في تتبع هذا السلوك في عام 2025. تقيس طلبات الروبوتات الخاصة بشركات التكنولوجيا الكبرى للزحف على مواقع الويب، وعدد الإحالات التي ترسلها المنصات إلى المواقع. تعتبر هذه البيانات مؤشرًا هامًا على كيفية استغلال شركات التكنولوجيا للويب وما تقدمه في المقابل.
نسبة الزحف إلى الإحالة: مقياس للعدالة؟
على سبيل المثال، تعني نسبة 100 إلى 1 أن الروبوتات الخاصة بالشركة زحفت على المواقع 100 مرة مقابل كل إحالة واحدة أرسلتها. تعتبر هذه النسبة مؤشرًا على مدى اعتماد الشركة على محتوى الويب دون المساهمة في النظام البيئي.
وفقًا لبيانات Cloudflare، تبرز Anthropic بشكل ملحوظ. فهي تزحف على المواقع بشكل أكبر بكثير مما ترسل المستخدمين إلى الويب. في الواقع، زادت Anthropic من عمليات الزحف في أوائل يناير مقارنة بالأسبوع الأول من سبتمبر 2025، وفقًا لهذه البيانات. يشير هذا إلى زيادة في الاعتماد على محتوى الويب دون زيادة مقابلة في الإحالات.
ينطبق الشيء نفسه على OpenAI؛ فقد ساءت نسبة الزحف إلى الإحالة لديها. مرة أخرى، يشير هذا إلى أن OpenAI تأخذ المزيد من القيمة من الويب وتقدم قيمة أقل في المقابل. يتماشى هذا مع تقارير Business Insider التي نشرت في أواخر عام 2024، والتي أشارت إلى أن الروبوتات الخاصة بـ Anthropic و OpenAI كانت تزحف على بعض مواقع الويب كثيرًا لدرجة أنها تسببت في ارتفاع تكاليف حركة المرور بشكل كبير.
ذكر أحد مطوري الويب أن تكاليف الحوسبة السحابية لعميل ارتفعت بمقدار الضعف خلال بضعة أشهر بسبب هذا التدفق من روبوتات الذكاء الاصطناعي، وفقًا لتقارير BI. هذا يوضح التأثير المالي المحتمل لعمليات الزحف المكثفة على مواقع الويب.
كما هو الحال في الربع الماضي، سألت Anthropic عن سبب الزحف المكثف وتقديم القليل في المقابل للويب. لم ترد الشركة الناشئة على طلب للحصول على تعليق. في سبتمبر، قالت Anthropic إنها لا تستطيع تأكيد نسب الزحف إلى الإحالة التي حسبتها Cloudflare، وأشارت إلى أنه قد تكون هناك “مشكلات” في المنهجية. وأوضحت أيضًا أنها أطلقت ميزة بحث على الويب لنموذجها اللغوي Claude AI الشهير في وقت سابق من هذا العام، مما أدى إلى زيادة حركة المرور الإحالية لمواقع الويب.
لم ترد OpenAI على طلب للحصول على تعليق. من المهم ملاحظة أن الأرقام التي تدخل في نسبة الزحف إلى الإحالة تركز على الويب وتستبعد نشاط التطبيقات الأصلية. إذا تم تضمين نشاط التطبيق، فقد تكون النسب أقل. ومع ذلك، فإن هذا المنهج ينطبق على جميع الشركات المدرجة في هذا التصنيف.
من المحتمل أن تكون نسبة Google المنخفضة نسبيًا بسبب محرك البحث التقليدي الخاص بها، والذي لا يزال يعرض روابط مواقع الويب بوضوح في العديد من النتائج. ومع ذلك، تقوم الشركة بدمج إجابات شبيهة بروبوتات الدردشة الذكاء الاصطناعي بشكل متزايد في خدمة البحث الخاصة بها، من خلال AI Overviews و AI mode. تؤكد Google أنها لا تزال ترسل حركة المرور إلى الويب وأنها تهتم بصحة هذا النظام البيئي.
ستواصل Business Insider تتبع بيانات Cloudflare في الأشهر والأرباع القادمة لمعرفة كيف يتطور هذا السلوك. تحسين محركات البحث والبيانات الضخمة هما مجالان مرتبطان ارتباطًا وثيقًا بهذا التطور.
اشترك في نشرة Tech Memo الإخبارية من BI هنا. تواصل معي عبر البريد الإلكتروني على abarr@businessinsider.com.
