מטא שינתה בסוף השבוע את תנאי השימוש העסקיים שלה ומחקה מהם את המילה "train" (אימון). הסעיף המקורי איפשר לה לסרוק אתרים של עסקים שמחוברים לחשבונות מסחריים בפייסבוק, באינסטגרם ובוואטסאפ, ולהשתמש בתוכן גם כדי לאמן את המוצרים שלה. אחרי ביקורת חריפה של עסקים ושל אתרי חדשות, החברה ניסחה את הסעיף מחדש. ארגון המו"לים האמריקאי טוען שהבעיה לא נפתרה, כי אימון AI הוצא מרשימת השימושים אבל לא נאסר במפורש.

בקצרה: התנאים החדשים של מטא לעסקים נכנסים לתוקף ב-30 באוקטובר, ועסק מקבל אותם פשוט כשהוא ממשיך להשתמש בכלים העסקיים שלה. המילה "אימון" נמחקה, ומטא אומרת שהסריקה נוגעת רק לפרסום ולמוצרים עסקיים. מי שלא רוצה שהתוכן באתר שלו ישמש לאימון מודלים של מטא יכול לחסום את הסורק meta-externalagent בקובץ robots.txt.

מה היה כתוב בתנאים של מטא?

ב-16 באוקטובר פורסם שבגרסה המעודכנת של התנאים המסחריים מטא מקבלת רשות לגשת באופן אוטומטי לכל דומיין שמחובר לחשבון עסקי, להעתיק את התוכן שלו ולסרוק אותו שוב ושוב. הסעיף חל על כל סוגי הכלים האוטומטיים: בוטים , סורקים ועכבישים. לפי הנוסח, התוכן יכול לשמש גם לאימון המוצרים של מטא.

מי שמחזיק עמוד עסקי, מפרסם בפייסבוק או משתמש בכלים העסקיים של החברה נכלל בהסדר. הביקורת הגיעה בעיקר מאתרי חדשות ומו"לים , שמפיצים כתבות ברשתות של מטא. פרופ' ג'יימס גרימלמן מאוניברסיטת קורנל אמר שהמו"לים נדחקים לבחירה בין מסירת התחקירים שלהם בחינם לאימון AI לבין ויתור על הקהל שלהם ברשתות החברתיות.

מה מטא שינתה, ומה נשאר?

ביום שישי בערב מטא פרסמה נוסח חדש. המילה "train" נמחקה, ונכתב במפורש שתנאי הסריקה נוגעים רק לפרסום ולמוצרים העסקיים של החברה. דובר מטא אמר שהחברה הקשיבה לביקורת ורוצה להבהיר את עמדתה, ושהיא לא משנה את אופן הפעולה של הסורקים שלה. לדברי אנשי התקשורת של החברה, קובץ robots.txt רגיל ימשיך להגן על כתבות שמאחורי חומת תשלום ועל תוכן פרטי.

ארגון News/Media Alliance, שמייצג מו"לים בארה"ב, לא השתכנע. לדבריו, השינוי רק מצמצם את רשימת השימושים: אימון הוצא ממנה אבל לא נאסר, ולכן הוא "עדיין אפשרי". הארגון גם מציין שבתנאים עצמם אין התחייבות לכבד את robots.txt. פרופ' אריק גולדמן מאוניברסיטת סנטה קלרה אמר שהניסוח העמום סביב "שמירה על שלמות הפלטפורמה" משאיר מקום לאי ודאות משפטית.

גם חברות AI אחרות נמצאות החודש תחת לחץ בגלל האופן שבו הן משתמשות במידע. ראו את הכתבה על החקירה של ה-FTC נגד OpenAI ו-Anthropic.

איך חוסמים את הסורק של מטא באתר?

לפי עמוד המפתחים של מטא , לחברה יש כמה סורקים , ולכל אחד תפקיד אחר:

  • meta-externalagent: סורק לאימון מודלי בסיס של AI ולשיפור מוצרים דרך אינדוקס תוכן. מכבד הוראות ב-robots.txt.
  • Meta-ExternalAds: סורק לפרסום ולמוצרים עסקיים.
  • Meta-WebIndexer: משפר את תוצאות החיפוש של Meta AI ומאפשר לה לצטט ולקשר לאתר בתשובות.
  • FacebookExternalHit: מושך כותרת, תיאור ותמונה כשמשתפים קישור בפייסבוק, באינסטגרם או במסנג'ר. לפי מטא הוא עשוי לעקוף את robots.txt לצורכי אבטחה.

בעל אתר שלא רוצה שהתוכן שלו ישמש לאימון מודלים של מטא יכול להוסיף לקובץ robots.txt את השורות האלה:

User-agent: meta-externalagent
Disallow: /

החסימה לא פוגעת בתצוגה המקדימה של קישורים ששותפו בפייסבוק, כי את זה עושה סורק אחר. מטא מציינת שהסורקים שומרים את robots.txt בזיכרון עד 24 שעות, ולכן השינוי לא נכנס לתוקף מיד. מי שרוצה שהאתר יופיע בתשובות של Meta AI צריך להשאיר את Meta-WebIndexer פתוח.

למה זה נוגע גם לעסקים בישראל?

התנאים חלים על עסקים שמשתמשים בכלים המסחריים של מטא , והדיווחים לא מזכירים הגבלה לארה"ב בלבד. חנות אונליין שמפרסמת באינסטגרם , אתר תוכן שמקדם כתבות בפייסבוק ועסק שמתקשר עם לקוחות בוואטסאפ עסקי מקבלים את התנאים ב-30 באוקטובר אם ימשיכו להשתמש בכלים. כדאי לבדוק עכשיו את קובץ robots.txt באתר ולהחליט אילו סורקים לחסום.

על המודל החדש של מטא כתבנו בכתבה על Muse Wonder, ועוד עדכונים שוטפים יש במדור חדשות בינה מלאכותית.