מה זה llms.txt (והאם לאתר שלך צריך להיות אחד)?

llms.txt הוא קובץ טקסט פשוט שאתה ממקם בשורש האתר שלך ושמפנה כלי AI - מודלי השפה הגדולים שמאחורי ChatGPT, Perplexity ומנועים דומים - לתוכן החשוב והכתוב בנקיות ביותר שלך. תחשוב עליו כמדריך קצר ואצור לסורקי AI: במקום להשאיר אותם לבוסס בכל האתר שלך, אתה מוסר להם מפה מסודרת של מה שחשוב והיכן הגרסה הנקייה נמצאת. זו מוסכמה צעירה, לא תקן רשמי, אבל היא פשוטה, חינמית, ובהדרגה שווה להחזיק בה.

יש הרבה בלבול לגבי מה הקובץ הזה עושה ולא עושה, אז בואו אבהיר את זה. במדריך הזה אסביר מה זה llms.txt, מה לשים בו, בדיוק במה הוא שונה מ-robots.txt ו-sitemap.xml, והאם אתר העסק הקטן שלך באמת צריך אחד עדיין.

מה זה llms.txt, בדיוק?

הרעיון שמאחורי llms.txt הוא שמנועי AI עובדים הכי טוב עם תוכן נקי, מובנה וקל לקריאה, ולעתים קרובות הם מתקשים עם הבלגן של עמוד אינטרנט רגיל: תפריטי ניווט, חלונות קופצים, פרסומות, סקריפטים ועיצוב - כולם עומדים בדרך של המידע עצמו. llms.txt הוא מוסכמה מוצעת שתתקן את זה. זה קובץ Markdown בכתובת yoursite.com/llms.txt שמפרט את העמודים המרכזיים שלך, עם תיאורים קצרים וקישורים, כך שסורק AI יכול למצוא במהירות את התוכן שאתה הכי רוצה שהוא יבין ויצטט.

הפורמט פשוט בכוונה. לכל הפחות יש בו כותרת (שם העסק שלך), תיאור קצר של מה שאתה עושה, ורשימה אצורה של קישורים לעמודים החשובים ביותר שלך, כל אחד עם הערה בת שורה על מה שהוא מכסה. כמה אתרים גם מפרסמים קובץ נלווה llms-full.txt שמכיל את הטקסט הנקי המלא של אותם עמודים במקום אחד, כך של-AI אפילו לא צריך לשלוף ולנקות כל עמוד בעצמו.

מה לכלול ב-llms.txt

המטרה היא אצירה, לא שלמות. אתה בוחר את התוכן שאתה הכי רוצה ש-AI ישאב ממנו, לא משליך את כל האתר שלך. llms.txt טוב לעסק קטן בדרך כלל כולל:

• שם העסק שלך וסיכום בן שורה של מה שאתה עושה ואת מי אתה משרת.
• עמודי השירות או המוצר המרכזיים שלך, כל אחד עם תיאור קצר.
• התוכן ההסברי הטוב ביותר שלך - המדריכים, השאלות הנפוצות והמאמרים תשובה-תחילה שהופכים אותך למקור שימושי.
• עמודי ייחוס מרכזיים כמו תמחור, תהליך, או אודות, אם הם מכילים עובדות שאתה רוצה שיצוטטו נכון.
• קישורי יצירת קשר או קביעת פגישה, כך ש-AI שמפנה מישהו אליך יודע איך אפשר להגיע אליך.

מה שאתה משאיר בחוץ חשוב לא פחות. דלג על עמודים דלילים, תוכן כפול, וכל דבר שלא היית רוצה ש-AI יתייחס אליו כמקור סמכותי. כל הערך הוא בהפניית מנועים לחומר הטוב והברור ביותר שלך - אותו תוכן תשובה-תחילה ומובנה היטב שמניע אופטימיזציה למנועים גנרטיביים.

llms.txt מול robots.txt מול sitemap.xml

שלושת הקבצים האלה חיים בשורש האתר שלך וכולם מדברים עם מבקרים אוטומטיים, אבל הם עושים עבודות שונות לחלוטין. בלבול ביניהם הוא הטעות הנפוצה ביותר, אז הנה ההשוואה הנקייה.

ההבדלים המרכזיים: robots.txt עוסק בהרשאה (למה אפשר לגשת), sitemap.xml עוסק בכיסוי (הנה הכל, מצאו את הכל), ו-llms.txt עוסק באצירה (הנה מה שחשוב ביותר, בצורה נקייה). robots.txt ו-sitemap.xml מבוססים זה זמן רב ומובנים על ידי כל מנוע חיפוש מרכזי. llms.txt חדש יותר ועדיין לא מכובד באופן אוניברסלי. אתה רוצה את שלושתם מסיבות שונות - הם לא מחליפים זה את זה.

האם llms.txt באמת עובד עדיין?

הנה התשובה הכנה, כי יש הייפ משני הצדדים. llms.txt הוא מוסכמה מוצעת, לא תקן רשמי שכל מנוע AI התחייב לקרוא. האימוץ גדל וכמה כלים וסורקים מתחילים לכבד אותו, אבל אתה לא צריך לצפות שהוא לבדו יגרום לך להיות מצוטט בן לילה. זה אות בעלות נמוכה וסיכון נמוך, לא מתג קסם.

המסגור המציאותי: llms.txt זול להוספה ולא מזיק, וככל שגילוי מונע-AI ממשיך לגדול, להחזיק מפה נקייה ואצורה של התוכן הטוב ביותר שלך מוכנה זה הימור הגיוני. אבל זה חלק אחד מתמונה גדולה יותר. בפני עצמו הוא לא יהפוך אתר דליל או בנוי גרוע לניתן לציטוט. הוא עובד הכי טוב כנגיעת הסיום על תוכן שכבר ברור, עובדתי ותשובה-תחילה.

האם לאתר שלך צריך להיות אחד?

לרוב אתרי העסקים הקטנים, ההמלצה הכנה שלי היא כן - הוסף אחד, אבל התייחס אליו כשלב סיום, לא כנקודת התחלה. הנה הסדר ההגיוני.

1. קודם, סדר את היסודות. אתר מהיר, ניתן לסריקה ובנוי היטב עם תוכן ברור ותשובה-תחילה. בלי זה, ל-llms.txt אין על מה טוב להצביע. התחל עם SEO לאתרים של עסקים קטנים.
2. אז הפוך את התוכן הטוב ביותר שלך לניתן לציטוט באמת. עמודים מוחשיים, עובדתיים ומובנים בבירור עם ה-schema הנכון, כפי שאני מתאר באיך לגרום ל-AI לצטט את העסק שלך.
3. אז הוסף llms.txt ממוקד שמפנה סורקי AI בדיוק לתוכן הזה.

נעשה בסדר הזה, llms.txt הוא תוספת חכמה ובמאמץ נמוך. נעשה ראשון, על אתר חלש, הוא קישוט. הקובץ שווה רק כמו התוכן שהוא מצביע עליו.

השורה התחתונה

llms.txt הוא מפה פשוטה, חינמית ואצורה שאומרת למנועי AI היכן התוכן הטוב ביותר שלך ומה הוא מכסה. הוא עדיין לא תקן, הוא לא קיצור דרך קסום, והוא לא יציל אתר דליל - אבל הוא זול, לא מזיק, ובהדרגה הגיוני להחזיק בו ככל שיותר אנשים מוצאים עסקים דרך AI. הוסף אותו ברגע שהתוכן שלך באמת שווה להצביע עליו, והוא הופך ליתרון שקט בכמה אתה נראה לכלי AI.

אני בונה אתרים שמוגדרים להימצא ולהיות מצוטטים על ידי AI מהיסוד - מבנה נקי, ה-schema הנכון, תוכן תשובה-תחילה, ו-llms.txt ממוקד שמפנה סורקים לעמודים החזקים ביותר שלך. אם אתה רוצה לדעת האם האתר שלך מוכן לגילוי מונע-AI ומה היה עוזר הכי הרבה, קבע שיחה ושלח לי את הכתובת שלך, או הגע אליי דרך טופס יצירת הקשר.