מוותרים על חסימת בוטים וממסחרים תכנים: האסטרטגיה החדשה של מו"לים בעידן ה-AI
מו"לים משנים גישה - במקום לחסום בוטי AI, בודקים איך לנצל את התנועה לצרכי מונטיזציה, תוך שימוש בכלים חדשים לזיהוי בוטים. במקביל, תאגידי תוכן כמו The Economist ו-FT פותחים ארכיונים לרישוי ל-LLM ארגוניים, במעבר מעסקאות הכשרה חד-פעמיות להסכמי שימוש מבוססי API. הרגולטור הבריטי CMA מתערב מול גוגל בדרישה לשקיפות.
מו"לים מעדכנים אסטרטגיות חסימת בוטי AI
מו"לים מובילים משנים גישה - בעוד שלפני שנה נטו לחסום בוטים של חברות AI, היום הם שוקלים מחדש את האסטרטגיה לאור התנועה הגוברת ממערכות כמו ChatGPT, Perplexity ו-Anthropic. הנימוקים המרכזיים:
- 📈 גידול בתנועה מבוססת AI: נתוני Cloudflare מצביעים על עלייה של 400% בפעילות בוטי AI מאז ינואר 2025, עם כמעט 1.7 מיליארד בקשות סריקה מחודשיות מבוט OpenAI בלבד
- ⚖️ איזון בין סיכונים להזדמנויות: "אנשים מבינים שחסימה גורפת של כל הבוטים עלולה לפגוע בפוטנציאל התנועה העתידית", מסביר וויל אלן, סמנכ"ל מוצר ב-Cloudflare
- 🛠️ כלים חדשים לזיהוי בוטים: פתרונות מ-Tollbit ו-DataDome מאפשרים לזהות אילו בוטים סורקים את האתר, באיזו תדירות ובאיזה הקשר (איסוף נתונים להכשרה מול שימוש ב-RAG לתגובות בזמן אמת)
"הדיון כבר לא שחור-לבן... יש הבנה שלא כל התוכן שווה ערך באותו אופן" - בכיר אנונימי בהוצאה לאור
רגולציה נכנסת לתמונה
ה-CMA הבריטי החליט להקצות משאבים לבחינת השפעת תכונות החיפוש מבוססות ה-AI של גוגל (כמו AI Overviews) על תנועת המו"לים. הדרישות העיקריות:
- שקיפות על סוגי הסריקה (הבחנה בין סריקת אינדקס לסריקה לפיצ'רים של AI)
- דיווח ב-Search Console על הופעות תוכן בתוצאות AI
- תיוג תנועה ממקורות AI באנליטיקס
- מתן קרדיט בולט וקישורים ישירים למקורות בתוצאות AI
מו"לים ממסחרים ארכיונים ל-LLM ארגוניים
עוד החששות מגניבת תוכן נמשכים, מו"לים כמו The Economist ו-Financial Times מוצאים הזדמנות חדשה: רישוי תכנים ל-LLM פרטיים של ארגונים. המגמות המרכזיות:
- 💼 מעבר להסכמי רישוי מבוססי שימוש: במקום עסקאות "הכשרה" חד-פעמיות, המו"לים מציעים מודלים רישוי דינמיים לרשתות פנימיות
- 🔐 שילוב תוכן ב"בועות" ארגוניות: The Economist פתחה API שמאפשר ללקוחות ארגוניים לשלב את הארכיון שלה ב-LLM פרטיים עם גישה רק לעובדים מורשים
- 📊 פוטנציאל הכנסות משמעותי: על פי דוח Menlo Ventures, אימוץ טכנולוגיית RAG בארגונים קפץ מ-31% ל-51% תוך שנה - זירת פעולה מבטיחה למו"לים
"ברגע שאתה מוטמע בתהליכי העבודה הפנימיים של חברות, אתה הופך להכרחי", מציין לוק בראדלי-ג'ונס, נשיא The Economist. "זה מאפשר לנו להגיע לאלפי משתמשים חדשים דרך הסכמי רישוי ארגוניים".
השורה התחתונה
הסצנה הדיגיטלית משתנה במהירות:
- בצד הצרכני: מו"לים ממתינים לרגולציה שתסדיר את השקיפות מול גוגל וחברות AI
- בצד הארגוני: תעשיית החדשות בונה מודלי הכנסה חדשים סביב מי האגם הקריטיים ביותר - הנתונים האיכותיים המצטברים בארכיונים