محركات البحث لم تعد تعرض نتائج Reddit، باستثناء Google
محركات البحث لم تعد تعرض نتائج Reddit، باستثناء Google
في 26 يوليو 2024، أعلن موقع Reddit أنه لن يكون جزءًا من "الويب المفتوح" بعد الآن. قام الموقع المجتمعي بحظر الوصول إلى محتواه من قبل محركات البحث الأخرى باستثناء Google، الذي يدفع لـ Reddit عشرات الملايين من الدولارات لتدريب نماذج الذكاء الاصطناعي الخاصة به.
الوضع الحالي
أصبح Google الآن هو المحرك الوحيد الذي يعرض روابط كاملة لمناقشات Reddit. بينما لا يمكن لمحركات البحث الأخرى مثل Bing و Brave الوصول إلى هذه الروابط (حتى وإن كان بإمكانها في بعض الأحيان عرض بعض الروابط). على الجانب الآخر، Kagi، الذي يدفع لـ Google للحصول على جزء من مؤشر البحث الخاص به، لا يزال يعرض نتائج من Reddit.
منع الفهرسة
تم اكتشاف هذه التغييرات بواسطة موقع 404media، استنادًا إلى تعديلات على ملف robots.txt الخاص بـ Reddit، الذي يُستخدم لإعطاء تعليمات لمحركات البحث حول كيفية استكشاف الصفحات على الموقع. تم تعديل هذا الملف لمنع محركات البحث من فهرسة المناقشات على Reddit. أوضح مطورو Reddit أن هذه الخطوة جاءت نتيجة زيادة في الكيانات التجارية التي تفحص الموقع وتدعي عدم ارتباطها بشروط أو سياسات Reddit. وأضافوا أن هذه الكيانات تختبئ خلف ملف robots.txt وتدعي إمكانية استخدام محتوى Reddit بحرية.
تفاصيل التغييرات
تم تعديل ملف robots.txt الخاص بـ Reddit في 25 يونيو. وأوضح الموقع أن الأطراف الحسنة النية يمكنها التواصل وطلب الوصول إلى مساهمات المستخدمين. وقد أعطى Reddit موافقته على الوصول إلى محتواه لـ Internet Archive وبعض المنظمات البحثية. كما أن Google يدفع 60 مليون دولار سنويًا لجمع المناقشات على Reddit لتدريب نماذج الذكاء الاصطناعي الخاصة به، مما يمكنه أيضًا من فهرسة المحتوى لمحرك البحث الخاص به.
مستقبل العلاقات مع محركات البحث الأخرى
يحاول Reddit أيضًا التوصل إلى اتفاق مع Microsoft، وفقًا لموقع ArsTechnica. ويعتبر حظر Bing وسيلة للضغط. وأوضح Reddit، "نحن نؤمن بالإنترنت المفتوح، لكننا لا نؤمن بالاستخدام المسيء للمحتوى العام"، مؤكدًا أنه يتبع خطى الناشرين الذين يعارضون حجة "الاستخدام العادل" التي تتبناها شركات الذكاء الاصطناعي لجمع محتوى الويب المفتوح.