هوش مصنوعی؛ توافق غول‌های فناوری برای مسدودسازی یکپارچه خزنده‌های وب

در اقدامی که می‌تواند قواعد بازی در دنیای انتشار محتوا را تغییر دهد، شرکت‌های پیشرو در حوزه هوش مصنوعی، از جمله گوگل، مایکروسافت، اوپن‌ای‌آی و آنتروپیک، بر سر یک پروتکل مشترک برای کنترل دسترسی ربات‌ها به محتوای وب توافق کردند. این توافق به مدیران وب‌سایت‌ها اجازه می‌دهد تا با یک دستور ساده، از جمع‌آوری داده‌های خود توسط مدل‌های زبانی جلوگیری کنند.

استاندارد جدید برای مقابله با خزنده‌های هوش مصنوعی

تا پیش از این، ناشران و مالکان وب‌سایت‌ها مجبور بودند برای هر شرکت هوش مصنوعی به‌طور جداگانه تنظیمات دسترسی تعریف کنند که فرآیندی دشوار و زمان‌بر بود. اما با پیشنهاد کوین کلی، مدیر فنی آنتروپیک، در کارگروه مهندسی اینترنت (IETF)، راهکاری ارائه شده است که از طریق یک توکن جدید در فایل robots.txt عمل می‌کند.

این سازوکار جدید به کاربران اجازه می‌دهد:

• دسترسی خزنده‌های آموزشی را به‌صورت یکپارچه مسدود کنند.
• بدون آسیب به رتبه موتورهای جست‌وجو، اتصال به منابع را مدیریت کنند.
• کنترل دقیق‌تری بر نحوه استفاده از محتوای خود داشته باشند.

نقشه راه پیاده‌سازی توسط غول‌های فناوری

شرکت‌های مختلف زمان‌بندی متفاوتی را برای عملیاتی کردن این استاندارد در نظر گرفته‌اند. در حالی که آنتروپیک هم‌اکنون استفاده از این پروتکل را آغاز کرده است، سایر بازیگران اصلی در حال آماده‌سازی زیرساخت‌های خود هستند.

مایکروسافت اعلام کرده است که ابزارهای دقیق‌تری را ارائه می‌دهد تا وب‌سایت‌ها بتوانند فرآیند اتصال به منابع را غیرفعال کنند، بدون اینکه این اقدام تأثیری منفی بر جایگاه آن‌ها در نتایج جست‌وجوی بینگ داشته باشد.

تلاش برای ایجاد تعادل در اکوسیستم وب

اندی استون، از مدیران ارتباطات متا، این حرکت را گامی حیاتی برای انتقال ترجیحات ناشران به تمامی ارائه‌دهندگان به‌صورت هم‌زمان توصیف کرد. این اقدام نشان‌دهنده فشار فزاینده بر شرکت‌های هوش مصنوعی برای رعایت حقوق مالکیت معنوی و ایجاد یک محیط عادلانه برای تولیدکنندگان محتوا است.

"ایجاد یک سیگنال مشترک برای انتقال ترجیحات به چندین ارائه‌دهنده، گامی مهم در جهت استانداردسازی صنعت است."

در نهایت، این توافق مشترک می‌تواند امنیت داده‌های وب‌سایت‌ها را در برابر خزش‌های غیرمجاز افزایش داده و مسیر را برای همکاری‌های آینده میان ناشران و توسعه‌دهندگان هوش مصنوعی هموار کند.