البيانات · 7 نوفمبر 2026

شركات تقنية كبرى تدعم توجيهات جديدة لتنظيم جمع البيانات من الويب

a group of blue boxes
Growtika / Unsplash

أعلنت شركات Google وOpenAI وMicrosoft وAnthropic دعمها لتوجيهات جديدة تهدف إلى تمكين مواقع الويب من التحكم في كيفية استخدام بياناتها بواسطة نماذج الذكاء الاصطناعي.

تتمثل هذه المبادرة في دعم إشارة مشتركة جديدة تهدف إلى استكمال بروتوكول robots.txt، وقد تم تقديم هذا المقترح إلى Internet Engineering Task Force. سيتيح هذا النظام لمديري المواقع تحديد تفضيلاتهم بشأن استخدام محتوياتهم من قبل أنظمة الذكاء الاصطناعي عبر معرف مشترك يسمى __usage_ai-training يتم إضافته مباشرة في ملف robots.txt.

يأتي هذا المقترح، الذي قدمه المهندس Kevin Kelley من شركة Anthropic، لمعالجة التعقيدات الناتجة عن تعدد الأدوات الحالية، مثل Google-Extended التابع لشركة Google وGPTBot التابع لشركة OpenAI. سيمكن النظام الجديد الناشرين من التمييز بين المحتويات التي يرغبون في حمايتها وتلك التي يقبلون استخدامها، بحيث يمكن لموقع ما حظر تدريب النماذج على جميع صفحاته مع السماح بذلك في أقسام محددة مثل المساحة الصحفية.

تسعى Google وMicrosoft إلى ضمان عدم تأثير هذا الرفض على ظهور المواقع في محركات البحث. وأوضحت Google أن الإشارة الجديدة ستسمح للناشرين برفض استخدام صفحاتهم للتدريب دون حظر زحف محركات البحث. من جانبها، تميز Microsoft بين تدريب النماذج واستخدام المحتوى لتغذية الإجابات التي تولدها أنظمة الذكاء الاصطناعي، وهي ممارسة تعرف باسم grounding، مما يتيح للمواقع البقاء مرئية في Bing بغض النظر عن خيارات التدريب.

من المقرر تنفيذ هذا الآلية بشكل تدريجي، حيث أعلنت Microsoft عن دعمها بدءاً من 1 فبراير 2027. وتستهدف Google التكامل خلال عام 2027، بينما بدأت Anthropic بالفعل في تنفيذ هذه التوجيهات، وتخطط OpenAI لدمجها في الأشهر المقبلة. وستظل القواعد الخاصة بكل مزود متاحة للاستخدام إلى جانب الإشارة المشتركة.