گوگل، اوپن‌ای‌آی و آنتروپیک استاندارد واحدی برای مسدودسازی خزش هوش مصنوعی پذیرفتند

سرویس بین‌الملل اوپا، ۹ آبان (اوپا) — گوگل، اوپن‌ای‌آی، آنتروپیک و مایکروسافت با پذیرش پیشنهاد «کارگروه مهندسی اینترنت» (IETF) که توسط کوین کلی از شرکت آنتروپیک هدایت می‌شد، به توافق رسیدند. بر اساس این استاندارد، مدیران سایت‌ها می‌توانند با افزودن عامل کاربری «usage_ai-training» به فایل robots.txt، دسترسی خزنده‌های هوش مصنوعی را محدود کنند.

این پروتکل جدید امکان کنترل دقیق‌تر را فراهم می‌کند؛ به طوری که مالکان سایت‌ها می‌توانند دسترسی به بخش‌های خاصی مانند بسته‌های مطبوعاتی را مجاز و در عین حال از برداشت کلی داده‌ها جلوگیری کنند. گوگل تأیید کرده است که این سیگنال را برای عامل «Google-Extended» که مسئول جمع‌آوری داده برای مدل جمنای است، اعمال خواهد کرد.

پیش از این، مدیران وب‌سایت‌ها ناچار بودند برای هر شرکت هوش مصنوعی تنظیمات جداگانه‌ای اعمال کنند که فرآیندی زمان‌بر و مستعد خطا بود. با این حال، شرکت‌های مذکور تأکید کردند که این دستورالعمل عطف به ماسبق نمی‌شود و داده‌هایی که پیش‌تر توسط مدل‌ها جمع‌آوری شده‌اند، حذف نخواهند شد.

آنتروپیک هم‌اکنون از این استاندارد پشتیبانی می‌کند. مایکروسافت و گوگل اجرای آن را برای اوایل سال ۲۰۲۷ برنامه‌ریزی کرده‌اند که تاریخ دقیق برای مایکروسافت اول فوریه تعیین شده است. اوپن‌ای‌آی نیز متعهد شده طی ماه‌های آینده این سیگنال را به کار گیرد. این تغییر تأثیری بر ایندکس‌گذاری موتورهای جستجو نخواهد داشت و وب‌سایت‌ها همچنان در نتایج جستجوی گوگل قابل مشاهده خواهند بود.