شرکت متا (مالک فیسبوک، اینستاگرام و واتساپ) در واکنش به اعتراضات شدید اتحادیههای ناشران و رسانههای بینالمللی، کلمه «آموزش» (Training) را از بند مربوط به خزش و اسکرپ وب در شرایط تجاری جدید خود (Commercial Terms) که قرار است از ۳۰ اکتبر به مرحله اجرا درآید، حذف کرد؛ با این حال، مجوز جمعآوری خودکار اطلاعات از سایتها را همچنان به قوت خود حفظ نموده است.
این ماجرا پس از آن علنی شد که آزمایشگاه روزنامهنگاری نیمن (Nieman Lab) و کارشناسان حقوق مالکیت فکری فاش کردند متن اولیه شرایط تجاری متا به این غول فناوری اجازه میداد هر محتوایی را از وبسایتهای وابسته به کسبوکارهای همکار برای «آموزش، توسعه، تحقیق و بهبود» محصولات خود جمعآوری کند. شورای ناشران اروپایی (EPC) و انجمن رسانههای خبری بریتانیا با انتشار بیانیههایی تند این اقدام را مصادره غیرقانونی محتوای رسانهها برای آموزش مدلهای زبانی هوش مصنوعی خواندند.
در نسخه اصلاحشده، متا عبارت خزش را به «ارائه، توسعه، بهبود، تحقیق و نگهداری محصولات تجاری و تبلیغاتی» تغییر داده است. دانیل رابرتز، سخنگوی متا، در مصاحبه با The Verge اعلام کرد: «شرایط تجاری ما صرفاً به محصولات تبلیغاتی و تجاری مربوط میشد و ما تنها متن را شفاف کردیم. این موضوع ربطی به اسکرپ سایتهای خبری برای هوش مصنوعی ندارد و ما به دستورالعملهای فایل robots.txt سایتها احترام میگذاریم.»
با وجود این توضیحات، متخصصان برجسته حقوق سایبری هشدار میدهند که این تغییرات بازی با کلمات است. مت تاپیک (Matt Topic)، وکیل مالکیت فکری، معتقد است واژه «توسعه» (Develop) آنقدر تفسیرپذیر و وسیع است که میتواند شامل فرایندهای آموزش هوش مصنوعی هم بشود. پروفسور جیمز گریملمن از دانشکده حقوق دانشگاه کرنل نیز تاکید کرد که دامنه تعریف «محصولات تجاری» همچنان آنچنان فراخ است که متا میتواند کامیون خود را از میان این بندها عبور دهد.
علاوه بر این، کارشناسان فنی سئو خاطرنشان میکنند که robots.txt صرفاً یک سیگنال داوطلبانه است و حق قانونی الزامآوری برای مالکان سایتها در دادگاهها ایجاد نمیکند. متخصصان سئو و وبمسترها باید پیش از ۳۰ اکتبر تنظیمات دسترسی رباتهای مختلف متا (شامل کراولر متا و کراولر آموزش هوش مصنوعی) را در سایتهای خود به طور دقیق بازبینی کنند.