دليل llms.txt

llms.txt اقتراح مجتمعي لملف Markdown في /llms.txt، وليس معيار ويب معتمداً. Evidence for this claim llms.txt is a community proposal for a Markdown file at /llms.txt that offers LLM-friendly site information; it is not a web standard. Scope: The proposal's own specification and stated purpose. Confidence: high · Verified: 2026-07-14 llms.txt proposal تستخدم ضوابط الزحف المنشورة لدى OpenAI ملف robots.txt ولا توثّق llms.txt كوسيلة تحكم. Evidence for this claim OpenAI documents robots.txt controls for its declared crawlers and does not list llms.txt as a crawler control. Scope: OpenAI's published crawler controls; absence is not proof that no internal system ever fetches the file. Confidence: high · Verified: 2026-07-14 OpenAI: Crawlers

الخلاصة — llms.txt ملف Markdown تضعه في /llms.txt ليقدم لأنظمة الذكاء الاصطناعي قائمة قصيرة ومنتقاة بأهم صفحاتك. اقترحه المطور Jeremy Howard عام 2024. الفكرة لطيفة، لكن لا يكاد أحد يقرأه عملياً؛ تتجاهله Google، وأبرز من يقرأه فعلاً مساعدو البرمجة بالذكاء الاصطناعي، لا روبوتات البحث التي يأمل معظم الناس الوصول إليها. إضافته قليلة التكلفة، لكن من غير المرجح أن تغيّر ظهورك في إجابات الذكاء الاصطناعي.

ما هو llms.txt

llms.txt ملف Markdown عادي يوضع في جذر الموقع: yoursite.com/llms.txt. تكتب فيه اسم الموقع ووصفاً من سطر واحد وقائمة قصيرة بروابط أهم الصفحات، مع ملاحظة موجزة عن كل رابط. والفكرة أن يقرأ نظام ذكاء اصطناعي هذا الملف ليعرف ماهية الموقع ومواضع المحتوى المفيد، بدلاً من زحف كل صفحة وتحليلها.

اقترحه Jeremy Howard، المعروف أيضاً بـ fast.ai وAnswer.AI، في سبتمبر 2024.

ما يفترض أن يفعله وما يفعله فعلاً

الحجة هي أن أدوات الذكاء الاصطناعي تملك «نوافذ سياق» محدودة، وأن تحويل HTML المعقد إلى نص نظيف صعب؛ فلماذا لا يمنح مالك الموقع النموذج خريطة مرتبة ومعدة سلفاً؟

لكن الواقع أقل تفاؤلاً. لم يتبنّه كبار مزودي البحث بالذكاء الاصطناعي، وصرحت Google بوضوح بأنها لا تستخدمه. وعندما درست Ahrefs نحو 137 000 موقع، لم تتلق 97% من ملفات llms.txt المنشورة أي طلب خلال شهر.

يُستخدم فعلياً لدى مساعدي البرمجة بالذكاء الاصطناعي مثل Claude Code، إذ يستعينون به للتنقل سريعاً في الوثائق التقنية. وهذه حالة الاستخدام الأصلية وهي تنجح، لكنها مختلفة تماماً عن وعد “this will get my business cited in ChatGPT.” (ترجمة) «سيجعل هذا نشاطي التجاري مذكوراً في ChatGPT».

هل يشبه robots.txt؟

يفترض كثيرون أن llms.txt هو «robots.txt للذكاء الاصطناعي»، لكنه ليس كذلك.

• robots.txt يضبط الوصول؛ يخبر برامج الزحف بما يجوز جلبه، وتلتزم به الروبوتات المنضبطة.
• llms.txt يقدم إرشاداً؛ يقترح ما يستحق القراءة ولا يلزم أي نظام باتباعه، ولا يستطيع الحجب.

إذا كان هدفك منع روبوتات الذكاء الاصطناعي، فلن يفيد llms.txt؛ استخدم robots.txt وشبكة CDN.

هل يستحق العناء؟

إذا كنت تدير وثائق للمطورين يقرأها وكلاء البرمجة، فقد يفيدك لأنه رخيص الصيانة. أما إن كنت تتوقع أن يعزز ظهور موقع تجاري عادي في إجابات الذكاء الاصطناعي، فلا تتوقع نتائج؛ استثمر الوقت في وضوح المحتوى وبنيته.

للتفاصيل عن المواصفة والمزودين وبيانات التبني والمخاطر الأمنية، انتقل إلى علامة Advanced.

تصف المواصفة ملخصاً طوعياً للموقع ملائماً للنماذج اللغوية؛ ولا تنشئ التزاماً للزواحف أو سلوك فهرسة. Evidence for this claim llms.txt is a community proposal for a Markdown file at /llms.txt that offers LLM-friendly site information; it is not a web standard. Scope: The proposal's own specification and stated purpose. Confidence: high · Verified: 2026-07-14 llms.txt proposal وتوثق OpenAI حالياً روبوتات مسماة وإعدادات مستقلة في robots.txt بدلاً منه. Evidence for this claim OpenAI documents robots.txt controls for its declared crawlers and does not list llms.txt as a crawler control. Scope: OpenAI's published crawler controls; absence is not proof that no internal system ever fetches the file. Confidence: high · Verified: 2026-07-14 OpenAI: Crawlers

الخلاصة — llms.txt اقتراح من Jeremy Howard ‏(Answer.AI، في 3 سبتمبر 2024)، وليس معياراً معتمداً. وهو فهرس Markdown منتقى في /llms.txt، مع ملف اختياري كامل المحتوى في /llms-full.txt. تكاد روبوتات البحث مثل OAI-SearchBot وPerplexityBot لا تظهر في الطلبات، بينما يُعد Claude Code ووكلاء البرمجة المستهلك الأبرز. تتجاهله Google، ووجدت SE Ranking أن إزالته من نموذج التنبؤ بالاستشهادات حسّنت الدقة. يفيد وثائق المطورين التي يقرأها وكلاء البرمجة، لكن البيانات لا تدعم استخدامه كوسيلة GEO/AEO للمواقع العادية، كما توجد مخاطر حقيقية لحقن الأوامر.

حقيقة llms.txt

llms.txt هو اقتراح، وهذه الكلمة جوهر القصة. لا يوجد RFC أو اعتماد من W3C أو مسار IETF. إنه اقتراح مدروس من Jeremy Howard، المؤسس المشارك لـ Answer.AI وfast.ai، نُشر في 3 سبتمبر 2024، وانتشر في وثائق المطورين ثم ألحقه مجتمع SEO بفكرة اختصار الظهور في الذكاء الاصطناعي.

المشكلة التصميمية حقيقية. تقول المواصفة: “Large language models increasingly rely on website information, but face a critical limitation: context windows are too small to handle most websites in their entirety.” (ترجمة) «تعتمد النماذج اللغوية الكبيرة أكثر فأكثر على معلومات المواقع، لكنها تواجه قيداً حرجاً: نوافذ السياق أصغر من أن تستوعب معظم المواقع كاملة». كما تصف تحويل HTML إلى نص نظيف ملائم للنماذج بأنه «صعب وغير دقيق». والحل المقترح هو أن يجهّز مؤلف الموقع المحتوى المراد عرضه في Markdown منتقى.

التنسيق

/llms.txt مستند Markdown مرتب:

1. H1 إلزامي لاسم المشروع أو الموقع.
2. اقتباس كتلي لملخص قصير بالمعلومات الأساسية.
3. نثر أو قوائم اختيارية بلا عناوين في هذا الموضع.
4. قوائم روابط تفصلها عناوين H2 بصيغة - [name](url): optional notes.
5. قسم ## Optional للروابط الثانوية التي يمكن تجاوزها عند ضيق السياق.

مثال أدنى من المواصفة:

# FastHTML

> FastHTML is a python library which brings together Starlette, Uvicorn, HTMX,
> and fastcore's FT...

## Docs

- [FastHTML quick start](url): A brief overview of many features

## Optional

- [Starlette documentation](url): A subset useful for FastHTML development.

توجد طريقتان مصاحبتان:

• /llms-full.txt: محتوى الموقع كله مسطحاً في ملف Markdown واحد؛ وتنشر Anthropic وPerplexity وStripe الشكلين.
• صيغة عناوين .md: إتاحة نسخ مثل page.md للصفحات الفردية كي تكون جاهزة للنماذج دون تفريغ كامل.

هناك بديل أحدث يتجاوز الملفات الثابتة: تقديم Markdown من الحافة عبر تفاوض المحتوى. تحول خدمة Markdown for Agents من Cloudflare أي صفحة HTML إلى Markdown عند إرسال Accept: text/markdown، من دون ملفات .md لكل صفحة أو إعادة إنشاء /llms-full.txt. تقول Cloudflare إن ذلك يقلل الرموز بنحو 80%. وهي ميزة مدفوعة من خطة Pro فما فوق. ويبقى سؤال الجدوى نفسه: النسخة الموازية أسهل للوكلاء لكنها تمثيل آخر يجب مزامنته؛ كما حذر Fabrice Canel من Bing من مضاعفة حمل الزحف ومخاطر شبيهة بالإخفاء. افحص السجلات قبل التفعيل.

llms.txt مقابل robots.txt: ليسا الشيء نفسه

أشيع سوء فهم هو اعتبار llms.txt «robots.txt للذكاء الاصطناعي»، والجمع بينهما يقود إلى قرارات سيئة.

robots.txt معيار فعلي مطبق، أما llms.txt فمجرد اقتراح لا تقرؤه معظم الأنظمة. إذا أردت ضبط وصول زواحف الذكاء الاصطناعي فراجع robots.txt وزواحف الذكاء الاصطناعي.

من يقرأه فعلاً؟

هنا تختلف البيانات أكثر ما تختلف عن الضجيج. في دراسة Ahrefs لـ 137 210 نطاقاً خلال مايو 2026:

• لم تتلق 97% من ملفات llms.txt المنشورة أي طلب، ولم ير أي حركة سوى نحو 3%، أي قرابة 1 100 نطاق.
• من الملفات المطلوبة، جاءت 96% من الطلبات من روبوتات و4% من البشر.
• جاءت 77% من طلبات الروبوتات من أدوات غير ذكاء اصطناعي، مثل مدققي SEO والزواحف المجهولة وأدوات تحليل التقنية.
• لم تأت سوى نحو 19,5% من أدوات الذكاء الاصطناعي، وتوزعت على:
  • الوكلاء والبنية التحتية، ومنها وكلاء البرمجة: نحو 10,5%.
  • زواحف التدريب، يتصدرها GPTBot بنسبة 4,51%: نحو 5,3%.
  • مساعدو الذكاء الاصطناعي: نحو 2,5%.
  • روبوتات الاسترجاع التي تبني فهارس الاستشهاد: 1,1% فقط.

هذه النسبة الأخيرة مهمة. فالروبوتات التي يضيف الناس الملف من أجلها، مثل OAI-SearchBot وPerplexityBot، «بالكاد ظهرت». وكان المستهلك الأبرز Claude Code؛ ووجدت الدراسة أنه “outfetched every AI retrieval bot, assistant, and training crawler except GPTBot.” (ترجمة) «تجاوز في الجلب كل روبوت استرجاع ومساعد وزاحف تدريب للذكاء الاصطناعي باستثناء GPTBot». أما GPTBot فهو زاحف تدريب، ووجوده لا يثبت تحليلاً مقصوداً للملف.

تصل قياسات أخرى إلى النتيجة نفسها. راقبت OtterlyAI موقعاً 90 يوماً؛ فمن أكثر من 62 100 زيارة لروبوتات الذكاء الاصطناعي، أصابت 84 زيارة فقط /llms.txt، أي نحو 0,1%، بأداء “3x worse than average pages.” (ترجمة) «أسوأ بثلاث مرات من الصفحات المتوسطة». ووجد تحليل مستقل لـ 515 مليون حدث خلال 90 يوماً 408 طلبات فقط للملف، ووصفها بأنها «مهملة إحصائياً».

الخلاصة هي الفصل بين وثائق المطورين وGEO: يفيد llms.txt وكلاء البرمجة في التنقل بوثائق API، لكنه لا يكاد يصل إلى روبوتات بناء الاستشهادات التي يريدها مجتمع SEO.

ما قاله المزودون

Google: لا، ولا خطط. أكد Gary Illyes في Search Central Live في يوليو 2025 أن Google لا تدعم llms.txt ولا تخطط لذلك. وشبّهه John Mueller بوسم meta للكلمات المفتاحية، ووصفه بأنه “temporary crutch, perhaps to save some tokens” أي «عكاز مؤقت، ربما لتوفير بعض الرموز» لأدوات البرمجة، لا آلية ظهور في البحث. وقال إرشاد Google في مايو 2026 إن الملفات المقروءة آلياً ليست لازمة لـ AI Overviews أو AI Mode اللذين “continue to rely on traditional SEO signals.” أي «يواصلان الاعتماد على إشارات SEO التقليدية». وقد نشرت Google ملفاً ليوم واحد في ديسمبر 2025 بسبب تحديث CMS، لا تحول استراتيجي.

OpenAI: لا شيء. لا إعلان بأن ChatGPT أو GPTBot أو OAI-SearchBot يحلله. وتناقض السجلات وجود استخدام ذي معنى؛ فقد «بالكاد ظهر» OAI-SearchBot. وتوجه OpenAI المستخدمين إلى robots.txt للتحكم في الزحف.

Anthropic: الحالة المثيرة للاهتمام. تنشر llms.txt وllms-full.txt على docs.anthropic.com/llms.txt، ويجلب Claude Code ملفات المواقع الأخرى بوضوح. لكن هذه قصة أداة برمجة، ولا يوجد تأكيد بأن طبقة البحث أو الاستشهاد في Claude.ai تعتمد الملف.

Perplexity: تقول نعم، والبيانات تقول نادراً. ذكرت أنها تسترجع llms.txt وتستخدمه «لإعطاء أولوية لاختيار الصفحات»، لكن PerplexityBot لا يكاد يجلبه استباقياً. يستطيع قراءة رابط تلصقه له؛ والفجوة في الاكتشاف والاستخدام التلقائيين.

Bing/Microsoft وApple وMeta: لا موقف معلناً. اعتبر الدعم غير مؤكد.

هل يرفع الاستشهادات في إجابات الذكاء الاصطناعي؟

لا توجد فائدة مثبتة. نمذجت SE Ranking بيانات 300 000 نطاق بانحدار XGBoost وتحليل SHAP، فوجدت أن إزالة llms.txt حسّنت دقة النموذج. وخلصت إلى أن الملف لا يبدو مؤثراً مباشرة في تكرار الاستشهادات، «على الأقل ليس بعد». كما رصدت Search Engine Land عشرة مواقع 180 يوماً؛ لم يظهر تغير قابل للقياس في ثمانية، ورافق الموقعين الآخرين تغييرات مربكة لا يمكن فصلها عن الملف.

تشبيه meta keywords: هل هو عادل؟

يصيب تشبيه Mueller في النقاط المهمة: كلاهما وصف يكتبه مالك الموقع، لا يتم التحقق منه، ويمكن التلاعب به أو إخفاؤه. ولهذا لن يثق منتج بحث جاد بوصف ذاتي بدلاً من الصفحات. وترد Carolyn Shelby بأن llms.txt يشير على الأقل إلى عناوين URL حقيقية يجب أن تعمل؛ فهو «كشاف لا قائمة أمنيات». كلا الرأيين وجيه، والنتيجة العملية واحدة: أنظمة البحث لا تعتمد عليه.

متى تضيفه ومتى تتجاوزه

أضفه إذا كنت تدير وثائق مطورين أو مرجع API جمهوره الأساسي وكلاء البرمجة مثل Claude Code وCursor وCopilot وCodeium؛ فهذه حالة الاستخدام الأصلية.

تجاوزه، أو لا تتوقع عائداً على الظهور، للمواقع التحريرية والإعلامية والتجارة الإلكترونية والأعمال العامة. يستغرق نحو 20 دقيقة، وفائدة GEO الحالية شبه معدومة؛ والوقت أجدى في بنية المحتوى والأسئلة الشائعة وأساسيات تحسين البحث بالذكاء الاصطناعي. كما تضخم عمليات النشر التلقائي أرقام التبني؛ فالتبني لا يعني الاستخدام، و97% من الملفات بلا طلبات.

الجانب الأمني

الخطر حقيقي ولا يحظى بما يكفي من التغطية: لأن الوكلاء مصممون للثقة بما في llms.txt، يصبح الملف سطحاً طبيعياً لهجمات حقن الأوامر. رصدت الدراسة جهات تفحص هذه الثغرات. ضعه تحت التحكم في الإصدارات، ونبّه عند تغييره بلا تصريح، ولا تدرج فيه ما لا تريد نشره.

تنفيذه إذا قررت ذلك

• الموضع: /llms.txt في جذر النطاق، بحالة HTTP 200 ونوع text/plain أو text/markdown.
• انتقِ ولا تفرغ كل شيء: ضع 20–50 رابطاً مهماً؛ فالانتقاء هو الغرض كله.
• يمكن تقديم /llms-full.txt للسياقات التي تحتاج المحتوى كاملاً.
• تحقق: حمّل الملف في Claude أو ChatGPT أو Perplexity واطلب تلخيص الموقع، ثم افحص سجلات الخادم بعد أسابيع.
• توجد مولدات لـ VitePress ‏(vitepress-plugin-llms) وDocusaurus ‏(docusaurus-plugin-llms) وWordPress وDrupal، وأداة Python ‏(llms_txt2ctx).

الخلاصة: التكلفة منخفضة، وفائدة GEO تقارب الصفر حالياً، لكنه مفيد حقاً لوكلاء البرمجة. افحص سجلاتك؛ إن وجدت حركة Claude Code أو Cursor فقد يساعدها، أما مطاردة OAI-SearchBot وPerplexityBot فليست هذه وسيلتها.

ملخص الذكاء الاصطناعي

خلاصة مكثفة للنسخة المتقدمة:

• llms.txt اقتراح لا معيار، قدمه Jeremy Howard في 3 سبتمبر 2024، وهو فهرس Markdown منتقى في /llms.txt مع /llms-full.txt اختياري.
• ليس robots.txt للذكاء الاصطناعي. robots.txt يضبط الوصول، أما llms.txt فاستشاري ولا يحجب شيئاً.
• لا يكاد أحد يقرأه. وجدت Ahrefs أن 97% من الملفات بلا طلبات؛ و77% من طلبات الروبوتات جاءت من أدوات غير ذكاء اصطناعي، ولم تمثل روبوتات الاسترجاع سوى 1,1%.
• Claude Code هو المستهلك الأبرز، لا روبوتات البحث؛ وبالكاد ظهر OAI-SearchBot وPerplexityBot.
• تتجاهله Google. لا دعم معلناً من OpenAI، وتدعي Perplexity دعماً لا يظهر كثيراً في الجلب، بينما تنشر Anthropic ملفها ويقرأه Claude Code دون إثبات لاستخدامه في طبقة البحث.
• لا فائدة مثبتة للاستشهادات. حسّنت إزالة llms.txt دقة نموذج SE Ranking لبيانات 300K نطاق.
• يستحق الاستخدام لوثائق المطورين التي يقرأها وكلاء البرمجة، لا كخطة GEO للمواقع العادية. وعامله كملف حساس بسبب خطر حقن الأوامر.

الوثائق الرسمية

مواد المصدر الأول: المواصفة والاقتراح وملفات المزودين وتصريحاتهم.

المواصفة والاقتراح

• llmstxt.org — المواصفة وتنسيق الملف والفرق بين /llms.txt و/llms-full.txt ومبرر وقت الاستدلال.
• الاقتراح الأصلي من Jeremy Howard في 3 سبتمبر 2024 — إعلان Answer.AI.
• مستودع AnswerDotAI/llms-txt على GitHub — الشيفرة والأدوات وواجهة llms_txt2ctx.

ملفات المزودين

• ملف Anthropic — مثال حي، وتنشر Anthropic أيضاً llms-full.txt.
• ملف Perplexity — مثال حي آخر.

موقف Google الرسمي

• قالت Google إن الملفات المقروءة آلياً مثل llms.txt ليست ضرورية لـ AI Overviews أو AI Mode اللذين يعتمدان إشارات SEO التقليدية؛ وأكد Gary Illyes عدم وجود دعم أو خطط. راجع تغطية Search Engine Journal لتصريح John Mueller الأكثر تداولاً.

اقتباسات من المصدر

تصريحات مسجلة من Google وصاحب المواصفة والباحثين الذين قاسوا استخدامها.

John Mueller، ممثل Google Search (17 أبريل 2025)

• “AFAIK none of the AI services have said they’re using LLMs.TXT (and you can tell when you look at your server logs that they don’t even check for it). To me, it’s comparable to the keywords meta tag – this is what a site-owner claims their site is about … (Is the site really like that? well, you can check it. At that point, why not just check the site directly?)” (ترجمة) «بحسب علمي لم تقل أي خدمة ذكاء اصطناعي إنها تستخدم LLMs.TXT، وتظهر السجلات أنها لا تتحقق منه. وهو عندي شبيه بوسم الكلمات المفتاحية: ادعاء من مالك الموقع يمكن التحقق منه مباشرة من الموقع». التغطية

Gary Illyes، Google Search Central (Search Central Live، يوليو 2025)

• أكد أن Google لا تدعم llms.txt ولا تخطط لذلك. نُقل التصريح من الحدث ولا يوجد رابط لنص أولي؛ تحقق منه قبل اعتباره نهائياً.

Jeremy Howard، صاحب الاقتراح (Answer.AI)

• “A proposal to standardise on using an /llms.txt file to provide information to help LLMs use a website at inference time.” (ترجمة) «اقتراح لتوحيد استخدام ملف /llms.txt لتوفير معلومات تساعد النماذج على استخدام الموقع وقت الاستدلال». llmstxt.org
• تقول المواصفة: “Large language models increasingly rely on website information, but face a critical limitation: context windows are too small to handle most websites in their entirety.” (ترجمة) «تعتمد النماذج اللغوية الكبيرة أكثر على معلومات المواقع، لكنها تواجه قيداً حرجاً: نوافذ السياق أصغر من أن تستوعب معظم المواقع كاملة». llmstxt.org

Brett Tabke، Pubcon / WebmasterWorld (مارس 2025)

• “we just don’t need people thinking they are different from any other spider.” (ترجمة) «لا نحتاج إلى أن يظن الناس أنها مختلفة عن أي زاحف آخر». Search Engine Land

Carolyn Shelby، Search Engine Land (9 يوليو 2025، الرأي المخالف)

• “Llms.txt curates a list of real URLs, and the content has to exist – and deliver – when the model gets there.” (ترجمة) «ينتقي llms.txt قائمة بعناوين URL حقيقية، ويجب أن يكون المحتوى موجوداً ويعمل عند وصول النموذج». و*“Think of llms.txt like a treasure map for AI systems – one you draw yourself. It’s not a wish list. It’s a spotlight.”* (ترجمة) «فكر في llms.txt كخريطة كنز ترسمها بنفسك لأنظمة الذكاء الاصطناعي؛ ليست قائمة أمنيات، بل كشاف». Search Engine Land

هل ينبغي تنفيذ llms.txt؟ قائمة قرار

اتبعها من الأعلى؛ غالباً تحسم أول «نعم» مناسبة القرار.

• هل جمهورك الأساسي وكلاء البرمجة مثل Claude Code وCursor وCopilot وCodeium ممن يقرأون وثائق المطورين أو مرجع API؟ ← نعم، أضفه.
• هل تضيفه فقط لتحسين استشهادات البحث بالذكاء الاصطناعي لموقع محتوى أو إعلام أو تجارة أو عمل عام؟ ← لا تتوقع نتائج. لا تثبت البيانات فائدة للاستشهادات.
• هل فحصت سجلات الخادم أولاً؟ ابحث عن حركة Claude-Code وCursor مقابل OAI-SearchBot وPerplexityBot.
• هل تعامله كأنه robots.txt للذكاء الاصطناعي؟ ← توقف؛ لا يحجب شيئاً. استخدم robots.txt وشبكة CDN لضبط الوصول.

إذا نشرته:

• ضعه في /llms.txt وقدمه بنوع text/plain أو text/markdown وحالة HTTP 200.
• انتقِ 20–50 من أهم عناوين URL، ولا تفرغ خريطة الموقع.
• ضعه تحت التحكم في الإصدارات ونبّه عند التغيير غير المصرح به بسبب خطر حقن الأوامر.
• لا تضع فيه شيئاً لا تريد عرضه للعامة.
• قدّم /llms-full.txt اختيارياً لسياقات المحتوى الكامل.
• اختبر الرابط في Claude أو ChatGPT أو Perplexity، ثم راجع السجلات بعد أسابيع.

ورقة سريعة لدعم المزودين

من يدعم llms.txt فعلاً حتى منتصف 2026

حقائق سريعة

• الاقتراح: Jeremy Howard ‏(Answer.AI/fast.ai)، 3 سبتمبر 2024؛ وليس معياراً معتمداً.
• الملفات: /llms.txt قصير ومنتقى، و/llms-full.txt اختياري للمحتوى الكامل.
• التنسيق: اسم H1 ← ملخص اقتباس ← قوائم روابط H2 بصيغة - [name](url): note ← قسم ## Optional.
• مقابل robots.txt: الأول لضبط الوصول وملزم، أما llms.txt فإرشادي ولا يحجب.
• الرقم: لا تتلقى 97% من الملفات المنشورة أي طلبات.
• القارئ الأبرز: Claude Code، لا روبوتات البحث.
• فائدة الاستشهاد: غير مثبتة؛ حسنت إزالته دقة نموذج SE Ranking.
• الأمن: خطر حقن الأوامر؛ استخدم التحكم في الإصدارات والتنبيه.

أخطاء llms.txt التي ينبغي تجنبها

معاملته كمعيار لضبط الوصول

لا يسمح llms.txt بالزحف ولا يمنعه. استخدم robots.txt والمصادقة وضوابط الوصول الفعلية.

الوعد برفع الظهور في الذكاء الاصطناعي

الدعم والجلب المرصودان محدودان. صف الملف كوسيلة تنقل اختيارية، لا عامل ترتيب أو استشهاد.

نشر عناوين حساسة أو خاصة

الملف عام ويسهل اكتشافه. لا تدرج إلا موارد مخصصة للعامة، ولا تعتمد على الغموض للحماية.

إنشاء خريطة موقع غير منتقاة في Markdown

يفيد الاقتراح كدليل قصير ومقروء لأهم الموارد. ويزيد التفريغ الضخم الصيانة دون توضيح الأولويات.

مشكلات llms.txt الشائعة

يعيد الملف HTML بدلاً من Markdown

العرض: يعرض /llms.txt غلاف تطبيق أو صفحة 404 أو وجهة إعادة توجيه. السبب المرجح: مسار شامل أو قاعدة CDN تعترض المسار النصي. الإصلاح: قدم الملف مباشرة من الجذر باستجابة ناجحة ونص عادي أو Markdown، ثم اطلبه بلا ملفات ارتباط.

تفشل الروابط أو تعيد التوجيه مراراً

العرض: لا يستطيع القارئ جلب الموارد من عناوينها الأساسية. السبب المرجح: أُنشئ الملف من تنقل قديم أو مسارات نسبية. الإصلاح: تحقق من كل URL واستبدل المواقع المتقاعدة وفضّل عناوين HTTPS الأساسية المستقرة.

لا تطلب الروبوتات الملف

العرض: لا تعرض السجلات حركة إلى /llms.txt. السبب المرجح: الأنظمة المهمة لك لا تدعم الاقتراح أو لا تكتشفه. الإصلاح: تحقق من تغطية السجلات، واتركه كتجربة قليلة التكلفة؛ لا تضف حيلاً خاصة ولا تستنتج مشكلة في الموقع من انعدام الطلبات.

أوامر لتنظيم llms.txt

Build a proposed llms.txt outline from this public URL inventory. Keep only canonical,
durable resources that help an agent understand the site or complete a task. Group them
under short Markdown headings, write one factual description per link, and flag URLs
that redirect, duplicate another page, require authentication, or may expose sensitive
information. Do not claim the file affects rankings or citations.

[paste inventory]

Review this llms.txt file against the supplied crawl results. Report broken or
redirecting URLs, non-canonical links, descriptions unsupported by the destination,
missing high-value documentation, and sections that are too broad to be useful. Return
a corrected draft using only public URLs from the inputs.

[paste file and crawl results]

أطر قرار استخدام llms.txt

اختبار التكلفة والمستهلك والمحتوى

1. التكلفة: هل يستطيع الفريق إنشاء الملف وصيانته بعمل مستمر قليل؟
2. المستهلك: هل يوجد وكيل أو سير عمل محدد يقرأه فعلاً؟
3. المحتوى: هل يملك الموقع وثائق عامة مستقرة تستحق الانتقاء؟

نفّذه عندما تكون العناصر الثلاثة موثوقة. وإذا كان المستهلك افتراضياً، فعامله كتجربة وحدد سقفاً لميزانية الصيانة.

افصل الأدوار

• robots.txt: إرشاد وصول الزواحف.
• خريطة XML: اكتشاف عناوين URL لمحركات البحث.
• llms.txt: دليل قراءة منتقى مقترح لأنظمة الذكاء الاصطناعي.
• MCP: بروتوكول وقت تشغيل يكتشف الوكيل عبره الموارد أو الأدوات ويستدعيها.

لا تقيّم ملفاً كما لو كان يؤدي وظيفة نظام آخر.

أدوات llms.txt

• منشئ ومدقق llms.txt: أنشئ ملفاً منتقى وافحص بنيته وموارده قبل النشر.
• مدقق وصول زواحف الذكاء الاصطناعي: دقق ضوابط الزحف الفعلية؛ لا يحل llms.txt محلها.
• curl: تحقق من الحالة وإعادة التوجيه ونوع المحتوى والجسم في مسار الجذر الدقيق.
• سجلات الخادم أو CDN: حدد إن كانت وكلاء مستخدم مسماة تطلب الملف؛ الغياب ملاحظة لا إثبات عقوبة ترتيب.
• مدقق روابط: أعد فحص كل وجهة منتقاة وفق جدول كي لا يتقادم الدليل.

التحقق من إصدار llms.txt

اختبر استجابة الجذر

الاختبار: اطلب /llms.txt مباشرة بلا ملفات ارتباط ومن دون اتباع إعادة التوجيه. المتوقع: استجابة ناجحة تحتوي Markdown المقصود في الجذر. تفسير الفشل: التوجيه أو النشر لا يكشف الملف. نافذة المراقبة: فورية. سبب التراجع: المسار يقدم غلاف HTML أو وثيقة خطأ أو تحويلاً غير ذي صلة.

اختبر كل مورد مدرج

الاختبار: ازحف عناوين URL في الملف وقارن كل وجهة بوصفها. المتوقع: تعمل الموارد العامة الأساسية وتطابق الغرض. تفسير الفشل: الدليل قديم أو مضلل. نافذة المراقبة: فوراً ثم وفق دورة تحديث الوثائق. سبب التراجع: رابط يكشف مادة خاصة أو يفشل باستمرار.

اختبر نتيجة التجربة بأمانة

الاختبار: ابحث في سجلات الخادم عن /llms.txt حسب وكيل المستخدم بعد النشر. المتوقع: تسجل الطلبات إن وجدت ويمكن نسبها، والصفر نتيجة صالحة أيضاً. تفسير الفشل: قد يكون التسجيل ناقصاً أو المستهلكون لا يدعمون الاقتراح. نافذة المراقبة: عدة دورات زحف عادية. سبب التراجع: لا شيء لانعدام الحركة وحده؛ أزله فقط إذا تجاوزت الصيانة أو مخاطر الكشف قيمته.

اختبر معرفتك بـ llms.txt

موارد تستحق وقتك

المصدر الأصلي

• llmstxt.org — المواصفة.
• اقتراح Jeremy Howard في 3 سبتمبر 2024 — المبررات من صاحب الاقتراح.
• AnswerDotAI/llms-txt — المستودع والأدوات.

البيانات التي ينبغي قراءتها قبل التنفيذ

• ما llms.txt وهل ينبغي الاهتمام به؟ — Ahrefs — عرض Ryan Law وإطار 28% نشر مقابل 97% بلا طلبات.
• دراسة تبني llms.txt — Ahrefs — Louise Linehan وXibeijia Guan، وبيانات 137 210 نطاقاً عن طالبي الملف وخطر حقن الأوامر.
• هل llms.txt مهم؟ تتبع عشرة مواقع — Search Engine Land — 180 يوماً، ولم يظهر تغير قابل للقياس في 8 من 10 مواقع.
• تجربة llms.txt — OtterlyAI — 90 يوماً؛ أصابت 84 زيارة فقط /llms.txt من أكثر من 62 100 زيارة روبوت.

النقاش

• لا، llms.txt ليس «meta keywords الجديد» — Carolyn Shelby — أقوى دفاع عنه.
• تعرف إلى llms.txt، معيار مقترح — Search Engine Land — ملخص المؤيدين والمعارضين ونقد Brett Tabke.

كتابات مرتبطة في هذا الموقع

• زواحف الذكاء الاصطناعي — ضبط الروبوتات، وهو ما لا يفعله llms.txt.

من الصناعة

• SE Ranking: حالة llms.txt — دراسة XGBoost/SHAP لـ 300 ألف نطاق وجدت أن إزالة الملف حسنت دقة نموذج الاستشهاد.
• Wix AI Search Lab: خرافات llms.txt — قراءة أكثر تفاؤلاً بعد مراجعة أكثر من 1 400 ملف.
• Google تقول إن LLMs.Txt يشبه وسم الكلمات المفتاحية — Search Engine Journal — اقتباس Mueller وسياقه.
• presenc.ai: حالة llms.txt لعام 2026 — مصفوفة دعم؛ تعامل بحذر مع ادعاءات الدعم التي لا تسندها مصادر أولية.
• llms.txt ميت، أو بالأحرى خائب — Kai Spriestersbach — تلخيص متشكك للبيانات والتصريحات.

إحصاءات جديرة بالاستشهاد

• لم تتلق 97% من ملفات llms.txt المنشورة أي طلب خلال شهر في دراسة Ahrefs لـ 137 210 نطاقاً في مايو 2026، ولم تر أي حركة سوى نحو 3%. المصدر
• Claude Code هو المستهلك الأبرز؛ فقد “outfetched every AI retrieval bot, assistant, and training crawler except GPTBot” (ترجمة) «تجاوز في الجلب كل روبوت استرجاع ومساعد وزاحف تدريب باستثناء GPTBot». ولم تمثل روبوتات فهارس الاستشهاد سوى 1,1%. المصدر
• جاءت 77% من طلبات الروبوتات من أدوات غير ذكاء اصطناعي، مثل مدققي SEO والزواحف المجهولة وأدوات تحليل التقنية. المصدر
• أصابت 84 من أكثر من 62 100 زيارة روبوت ذكاء اصطناعي ملف /llms.txt خلال 90 يوماً، أي نحو 0,1%، بأداء “3x worse than average pages.” (ترجمة) «أسوأ بثلاث مرات من الصفحات المتوسطة». المصدر
• حسنت إزالة llms.txt من نموذج الاستشهاد دقته في تحليل SE Ranking لـ 300 ألف نطاق باستخدام XGBoost وSHAP، بلا فائدة مثبتة «على الأقل ليس بعد». المصدر
• التبني لا يساوي الاستخدام. أحصت BuiltWith أكثر من 844 ألف موقع في أكتوبر 2025، لكن منصات مثل Mintlify تنشر الملف تلقائياً لجميع المواقع المستضافة.
• استهدف /llms.txt 408 طلبات فقط من أكثر من 515 مليون حدث لروبوتات LLM خلال 90 يوماً في تحليل limy.ai، ووُصفت بأنها مهملة إحصائياً.
• تبنت 10,13% من المواقع llms.txt في عينة SE Ranking من 300 ألف نطاق عام 2026، أي نحو موقع من عشرة، بلا فارق ذي معنى حسب شريحة الحركة. المصدر