llms.txt קיים כבר שנתיים. בין 4 ל-10 אחוז מהאתרים מפרסמים אותו, ואף לא אחד מהם קפץ בציטוטים בגלל זה

זה נמדד בשנה, לא בחודש. מי שמחפש הטבה מהירה מדירוג צריך משהו אחר, כי הקובץ הזה לא נותן דירוג בכלל.

llms.txt הוא קובץ טקסט בשורש הדומיין, שמציע לסוכני AI רשימת קישורים מסודרת לתוכן החשוב באתר. ג'רמי הווארד מ-Answer.AI הציע אותו בספטמבר 2024. שני מדדים עצמאיים בודקים בפועל כמה אתרים מפרסמים אותו: SE Ranking בדקה כ-300 אלף דומיינים ומצאה 10.13 אחוז, Crawlmind בדקה את עשרת אלפים האתרים הגדולים בעולם ומצאה 4.2 אחוז. שני המספרים שונים כי אוכלוסיית הבדיקה שונה, אבל שניהם מספרים את אותו סיפור: מרבית האינטרנט לא מפרסם את הקובץ.

מה שבשליטתנו: מי בכל זאת מפרסם

האימוץ מרוכז בשלוש קבוצות, ולפי Crawlmind יש להן פערי אימוץ גדולים: SaaS לכלי פיתוח 18.7 אחוז, סטארטאפים שקמו אחרי 2022 ב-14.1 אחוז, אתרי תיעוד שרצים על Docusaurus, Mintlify או Nextra ב-9.4 אחוז. אתרי חדשות ופרסום, הקטגוריה שבה בפועל נמצא, עומדים על 0.6 אחוז לפי אותו מדד. הרוב המכריע של הקפיצה בא ממערכות תיעוד שמפרסמות את הקובץ אוטומטית לכל האתרים שהן מארחות, לא מהחלטה יזומה של כל אתר בנפרד.

מה שלא בשליטתנו: האם זה בכלל משנה משהו

SE Ranking בדקו את זה ישירות והתשובה שלהם ברורה: "השימוש ב-LLMs.txt לא משנה איך מערכות AI רואות או מצטטות את התוכן שלך היום". Limy, שבדקו 515 מיליון אירועי תנועה של בוטים של מודלי שפה, מגיעים לאותה מסקנה ומוסיפים אזהרה נגד סוכנויות שמוכרות את הקובץ כמשהו שמשפיע על ציטוט. גוגל לא מתייחסת לקובץ כסיגנל אינדקס עיקרי. השימוש המוכח היחיד: כלי קוד כמו Cursor, Copilot ו-Windsurf שולפים את הקובץ בפועל כדי להבין ספריית קוד מהר יותר, וזה שימוש לגיטימי בפני עצמו, רק לא קשור לחיפוש או לתשובות AI לצרכן.

מסלול לפי זמן

מה כאן הימור

אין הימור על העתיד בכתבה הזו, רק קריאה של מצב קיים שמתועד בשלושה מדדים עצמאיים. ההימור המוצהר היחיד: אם גוגל תאמץ את הפורמט בשנה הקרובה, המספרים האלה יזדקנו מהר. עד אז, האתר שלנו עצמו לא מפרסם llms.txt, כי לפי הנתונים כאן זה לא ישנה לנו כלום בטווח הקרוב.