האם אני צריך קובץ llms.txt

לא, אתם לא צריכים אותו. נכון לעכשיו אף חברה מהחברות שמפעילות את מנועי ה-AI הגדולים לא פרסמה תיעוד שאומר שהיא קוראת llms.txt או מתחשבת בו. זה אומר שהקובץ אינו תנאי להופעה בתשובות ואינו סיגנל ידוע לשום דבר. אם כבר יש לכם אחד, אין סיבה למחוק אותו, הוא לא מזיק ולא עולה תחזוקה. אם אין לכם, יש לפחות חמישה דברים שישפיעו יותר ושכדאי לעשות לפניו.

מה הקובץ הזה בכלל?

llms.txt הוא הצעה לתקן שנולדה בקהילת המפתחים בסוף 2024, לא מפרט של אף מנוע. הרעיון פשוט ונאה: קובץ Markdown אחד בשורש הדומיין, שמציג לעוזר AI מפה מסודרת של האתר, מה החברה עושה, ואילו עמודים הכי חשובים, עם קישורים לגרסאות טקסט נקיות שלהם. במקום שהמודל יתמודד עם תפריטים, באנרים וסקריפטים, הוא מקבל את התמצית מוכנה.

הפורמט עצמו לא מסובך: כותרת עם שם העסק, פסקה אחת שמסבירה מה אתם עושים, ואחריה רשימות קישורים מקובצות לפי נושא, לפעמים עם משפט הסבר לצד כל קישור. אפשר לכתוב אותו ביד בעשרים דקות.

זה נשמע כמו robots.txt אבל הדמיון מטעה. robots.txt הוא מוסכמה בת שלושים שנה שכל סורק מכבד בפועל. llms.txt הוא הצעה שאפשר לפרסם אבל אין מי שהתחייב לקרוא. השם דומה מספיק כדי לבלבל, וזה חלק מהסיבה שהוא נתפס כחובה.

מי אמר שהוא קורא אותו, ומי לא?

הפער בין הרעש לתיעוד הוא כל הסיפור כאן.

השורה האחרונה היא לא אמירה נגד הרעיון, היא תיאור מצב. ייתכן שמחר מישהו יכריז שהוא קורא אותו, ואם זה יקרה זה ייכנס לארכיון העדכונים. עד אז מי שמוכר לכם אותו כתנאי הכרחי אומר משהו שאין לו מקור.

למה בכל זאת כולם מדברים עליו?

שלוש סיבות, וכולן אנושיות לגמרי.

הראשונה היא שהתחום צעיר ואנשים מחפשים משהו לעשות. פעולה טכנית שאפשר לסמן כבוצעה תוך חצי שעה מרגישה טוב הרבה יותר מעבודה של חודשים על תוכן ואזכורים.

השנייה היא שקל למכור אותה. ספק שאומר "התקנו לך את הקובץ שמנועי ה-AI קוראים" נשמע עדכני. זה אחד הסימנים שכדאי לשים לב אליהם כשבוחרים ספק, לא כי הקובץ נורא, אלא כי מי שמציג אותו כליבת השירות בדרך כלל אין לו הרבה מעבר לו.

השלישית היא בלבול אמיתי עם robots.txt. יש עסקים שנתקלו בשם, הבינו שמדובר בקובץ שקובע איך מנועי AI מתייחסים לאתר, וניסו לפתור דרכו בעיה של סריקה. זו אחת הטעויות הנפוצות שאנחנו רואים, והיא מסוכנת כי היא גורמת לאנשים לחשוב שטיפלו בנושא בזמן שהסורקים עדיין חסומים.

מתי הקובץ כן הגיוני?

יש מקרים שבהם הייתי אומר תוסיפו אותו, בלי להבטיח כלום.

אם אתם מפעילים מוצר טכנולוגי עם תיעוד למפתחים, ואנשים משתמשים בעוזרי AI כדי לקרוא את התיעוד שלכם, קובץ שמפנה לגרסאות טקסט נקיות של הדפים עוזר בפועל היום. לא כי מנוע חיפוש קורא אותו, אלא כי אדם או סוכן שמצביע על הדומיין שלכם מקבל דרך אחת מסודרת פנימה. זה השימוש היחיד שבו אני רואה תועלת מיידית ומוכחת.

אם אתם ממילא באמצע שדרוג טכני והתשתית יכולה לייצר את הקובץ אוטומטית, אין סיבה לא. עלות אפס, סיכון אפס.

ואם אתם רוצים להימר שהתקן ייקלט, גם זה לגיטימי בתנאי שאתם מודעים שזה הימור. רק אל תיתנו לו לתפוס מקום בתור לפני דברים שכן ידוע שהם עובדים.

מה קודם לו בתור?

זה הסדר שאני הייתי עובד לפיו, וכל אחד מהשלבים כאן מגובה בתיעוד ולא בהשערה.

קודם כול לוודא שסורקי החיפוש לא חסומים. OAI-SearchBot הוא זה שקובע הופעה בתשובות של ChatGPT, GPTBot הוא אימון בלבד, וזו הבחנה שהרבה אתרים פספסו כשהעתיקו בלוק חסימה ממדריך. אצל גוגל, Google-Extended נוגע לאימון ולעיגון ב-Gemini, ולפי התיעוד של גוגל הוא אינו משפיע על ההכללה בחיפוש ואינו סיגנל דירוג, כך שאין מצב שבו אתם בחיפוש אבל לא זכאים לסיכומי AI. הפירוט המלא במדריך הטכני, ומי שמתבלבל בין שמות הסורקים ימצא אותם גם במילון המונחים.

אחר כך לוודא שהתוכן קיים במקור העמוד ולא נבנה בדפדפן. סורק שמקבל שלד ריק לא יראה כלום, ואף קובץ בשורש הדומיין לא יתקן את זה.

אחר כך פורמט. מודל לא מסכם לכם עמוד, הוא שולף ממנו קטע. עמוד בלי פסקה של שתי שורות שעונה על השאלה במלואה נשאר בחוץ גם כשהוא מצוין. זה מה שקובץ המפה לא יכול לעשות בשבילכם, וזה מדריך הכתיבה.

אחר כך מה שמחוץ לאתר. בשאלות מסוג "את מי מומלץ" המקורות שנשלפים הם לרוב לא אתרי הספקים אלא מקומות אחרים שמזכירים אותם, וזה מדריך האזכורים.

ורק בסוף, אם נשאר זמן, הקובץ.

הסדר הזה לא שרירותי. ארבעת השלבים הראשונים נשענים על תיעוד רשמי של החברות עצמן, והחמישי נשען על תקווה. כשמשאבים מוגבלים, וברוב העסקים הם מוגבלים, זה ההבדל היחיד שצריך כדי להחליט. זה גם הסדר שבו אנחנו ניגשים לאתר חדש בקידום GEO: קודם סריקה, אחר כך מקור העמוד, אחר כך הפורמט, ורק אז מה שמחוץ לאתר.

איך תדעו אם הוא עשה משהו?

לא תדעו, וזה חשוב להגיד בפירוש. אין מנוע שמדווח "הגעתי דרך llms.txt", ואין דירוג או מדד רשמי שאפשר להסתכל בו לפני ואחרי. מה שאפשר לעשות הוא למדוד את מה שכן ניתן למדידה: סט שאלות קבוע שנשאל בחלון נקי לכל שאלה, בלי היסטוריית שיחה ובלי חשבון מחובר, ובחזרה חודשית. השיטה במדריך המדידה.

הדבר היחיד שאינו מדגמי הוא תנועה שמגיעה מציטוט ב-ChatGPT, שנוחתת אצלכם עם פרמטר מקור ייעודי. זו הנקודה היחידה שבה יש מספר אמיתי ולא הערכה, וגם היא לא תפריד בין השפעת הקובץ להשפעת כל שאר מה שעשיתם באותו חודש.

והאם זה קשור בכלל לפרסום

לא, וכדאי להפריד. llms.txt נוגע לנראות אורגנית בתוך תשובות. הוא לא מקנה גישה לשום מערכת מודעות ולא משנה זכאות. עסק הרשום בישראל יכול לקנות מודעות ב-ChatGPT מ-16 בספטמבר 2026, והתמונה המלאה לכל מנוע בעמוד המצב בישראל. מודעות בסיכומי AI של גוגל הן אנגלית בלבד ובשתים עשרה מדינות, מצב AI פעיל בישראל ובעברית אבל המודעות בתוכו עדיין בבדיקה, ופרפלקסיטי סגרה את תוכנית הפרסום שלה. הבלבול בין השניים חוזר מספיק כדי שנציין אותו: אף אחד לא נכנס למערכת מודעות בזכות קובץ בשורש האתר, ואף אחד לא נחסם ממנה בגללו.

מה עדיין לא ידוע

• האם מנוע כלשהו קורא היום llms.txt בלי לפרסם זאת. אין דרך חיצונית לאמת קריאה שלא מתועדת, וגם לוגים של שרת לא מפרידים בין סורק שקרא את הקובץ לבין סורק שסתם ביקש אותו.
• האם התקן ייקלט. יש לו תאוצה בקהילת המפתחים ואין לו אימוץ רשמי, ושני הדברים נכונים במקביל.
• מה יקרה אם ייקלט חלקית. ייתכן מצב שבו כלי פיתוח ועוזרים מבוססי סוכן יקראו אותו בעוד שמנועי החיפוש בתוך המוצרים הגדולים יתעלמו, ואז התועלת תישאר בעולם התיעוד הטכני בלבד.
• האם יש נזק בקובץ שסותר את התוכן באתר. בהיגיון זה נשמע רע, אבל אין ראיה שמישהו נענש על כך, כי אין ראיה שמישהו קורא.

מה שכן ידוע מרוכז במדריך ChatGPT ובמדריך ה-AI של גוגל, ואם משהו מזה ישתנה, זה ייכנס לארכיון העדכונים באותו יום שבו יתפרסם התיעוד.