שורה אחת ב-robots.txt תחסום אימון AI אצל ארבע חברות, אבל רק מ-2027
עד היום, אתר ישראלי שלא רצה שהתוכן שלו ישמש לאימון מודלים של AI היה צריך לכתוב שורה נפרדת לכל רובוט: אחת ל-GPTBot, אחת ל-Google-Extended, אחת ל-ClaudeBot, וכן הלאה. ב-30 באוקטובר OpenAI, Google ו-Microsoft הודיעו שיכבדו סימון אחד משותף בקובץ robots.txt, ומהנדס של Anthropic הוא זה שכתב את ההצעה. שורה אחת, ארבע חברות. על הנייר זה … להמשך קריאה