مولّد ملف llms.txt

ما هو ملف llms.txt؟

ملف llms.txt ملف Markdown بسيط تضعه في جذر نطاقك. يقدّم لمساعدات الذكاء الاصطناعي خريطة منتقاة وسهلة القراءة لأهم صفحاتك، من منتجات ووثائق وأدلة وصفحات هبوط رئيسية، دون أن يضطرها إلى زحف صفحات HTML المزدحمة.

اعتبره فهرسًا ميسّرًا للنماذج اللغوية الكبيرة. يساعد ملف llms.txt الواضح محركات الذكاء الاصطناعي على فهم موضوع موقعك والصفحات التي تستشهد بها، فيتحسّن ظهور علامتك التجارية في إجابات الذكاء الاصطناعي.

ما هو ملف llms.txt، ولماذا وُجد

llms.txt معيار مفتوح مقترح يمنح مساعدات الذكاء الاصطناعي والنماذج اللغوية الكبيرة خريطة واحدة منتقاة لأهم المحتوى في موقعك. وهو ملف Markdown نصي بسيط في جذر نطاقك، مثل https://yourdomain.com/llms.txt، يسرد أهم صفحاتك مع أوصاف قصيرة يكتبها إنسان. الفكرة بسيطة: بدل أن يخمّن زاحف الذكاء الاصطناعي أيّ روابط موقعك الكثيرة تستحق القراءة، تقدّم له فهرسًا نظيفًا مرتّبًا حسب الأولوية يقرؤه بطلب واحد.

الصيغة Markdown مختصرة عن قصد. يبدأ الملف بعنوان H1 واحد (# اسم علامتك) يسمّي المشروع أو الشركة، ثم اقتباس اختياري (> ملخص في سطر واحد) يلخّص ما تفعله، ثم أقسام H2 (## Docs و## Products و## Guides) نقاطها روابط Markdown إلى الصفحات. ويمكن أن ترافق كل رابط ملاحظة قصيرة تشرح محتوى الصفحة. ولأنه Markdown فحسب، يحلّله النموذج اللغوي فورًا، وتضيف الأوصاف سياقًا لا تقدّمه قائمة روابط خام.

اقتُرح llms.txt لأن الويب بُني للمتصفحات ومحركات البحث، لا لنوافذ السياق المحدودة في النماذج اللغوية. فالموقع الحديث يرسل HTML ثقيلًا تحيط به القوائم والسكربتات ولافتات ملفات تعريف الارتباط والإعلانات، وهي ضوضاء تستهلك الرموز (tokens) التي يصرفها الذكاء الاصطناعي لقراءتك. يزيل llms.txt هذه الضوضاء ويوجّه النموذج إلى الإشارة المفيدة بصيغة يفهمها أصلًا، فيجد محتواك الرئيسي ويفهمه ويستشهد به بموثوقية أعلى بكثير من زحف HTML الخام.

وهناك ملف مرافق هو llms-full.txt يذهب خطوة أبعد، إذ يتضمن النص الكامل لصفحاتك الرئيسية بصيغة Markdown بدل روابطها فقط. فملف /llms.txt هو فهرس المحتويات المنتقى، وملف /llms-full.txt هو الكتاب كله مدمجًا. ومعًا يتيحان للذكاء الاصطناعي أن يأخذ خريطة سريعة لموقعك أو يقرأ محتواك الأساسي مباشرة دون أي طلب إضافي، وهذا ما تريده تمامًا حين يقرّر مساعد ما هل يوصي بك.

llms.txt

معيار مقترح: ملف Markdown في جذر موقعك يسرد أهم صفحاتك مع أوصافها، لتجد مساعدات الذكاء الاصطناعي محتواك الرئيسي وتفهمه بسرعة.

llms-full.txt

ملف مرافق يتضمن النص الكامل لصفحاتك الرئيسية بصيغة Markdown لا روابطها فقط، فيقرأ الذكاء الاصطناعي محتواك الأساسي بطلب واحد دون زحف كل صفحة.

Markdown

صيغة نصية خفيفة تستخدم # للعناوين و> للاقتباسات و[النص](الرابط) للروابط. يعتمدها llms.txt لأن النماذج اللغوية تحلّلها بسهولة.

sitemap.xml

ملف XML يسرد كل روابط موقعك لزواحف محركات البحث. هدفه الشمول من أجل الفهرسة، بينما llms.txt مجموعة منتقاة يقرؤها الإنسان ليفهم الذكاء الاصطناعي موقعك.

robots.txt

ملف في الجذر يخبر الزواحف بالمسارات التي يحق لها جلبها أو لا يحق. هو يتحكم في الوصول، وllms.txt يتحكم في الفهم. الملفان متكاملان ولا يغني أحدهما عن الآخر.

زاحف الذكاء الاصطناعي (AI crawler)

روبوت مثل GPTBot أو ClaudeBot أو PerplexityBot يجلب صفحاتك ليقرأها نموذج الذكاء الاصطناعي ويفهرسها وربما يستشهد بها. وقد صُمّم llms.txt ليقرأه هذا النوع من الزواحف.

نافذة السياق (context window)

الكمية الثابتة من النص التي يحتفظ بها النموذج اللغوي في ذاكرته العاملة دفعة واحدة. وُجد llms.txt جزئيًا لاستخدام هذه الميزانية بكفاءة، بتغذية النموذج بإشارة نظيفة بدل HTML المزدحم.

RAG (التوليد المعزّز بالاسترجاع)

حين يجلب الذكاء الاصطناعي مستندات حية ويبني إجابته عليها بدل بيانات التدريب وحدها. يجعل ملف llms.txt المنظّم جيدًا محتواك أسهل استرجاعًا واقتباسًا في هذه العملية.

المسار الجذري (root path)

المستوى الأعلى في نطاقك (المجلد /). فيه تعيش ملفات الاكتشاف المعيارية مثل robots.txt وsitemap.xml وllms.txt، لتجدها الزواحف في عنوان متوقَّع.

الكيان (entity)

الشيء المميّز الذي يتعرّف عليك الذكاء الاصطناعي من خلاله: علامتك التجارية أو منتجك أو شركتك. يساعد العنوان والملخص الواضحان في llms.txt النموذج على تحديد كيانك قبل أن يقرأ أي شيء آخر.