ما llms.txt وما ليس هو؟
llms.txt قائمة قراءة منتقاة للآلات: من أنت، وأي الصفحات معتمدة، وأين الإجابات الموثوقة. اقترح Jeremy Howard من Answer.AI المواصفة في 3 سبتمبر 2024. الفرضية عملية: HTML المبني للبشر مليء بالضجيج (تنقل وسكربتات ولافتات موافقة) ونوافذ سياق النماذج محدودة، فسلّم الآلة خريطة نظيفة.
للمواصفة مستويان. /llms.txt الفهرس القصير: ملخص وروابط منتقاة. و/llms-full.txt يضم المحتوى الكامل في وثيقة واحدة، ليحمّل وكيل كل ما عنك في طلب واحد.
وما ليس هو مهم بالقدر نفسه. ليس robots.txt: لا إنفاذ خلفه. ليس إشارة ترتيب: لا محرك بحث قال إنه يقرأ الملف للترتيب. وليس ضبط وصول: الزاحف الذي يتجاهله لا يخسر شيئاً. يقول robots.txt "هذا ما يجوز لك جلبه"؛ ويقول llms.txt "هذا ما يستحق القراءة". والخلط بين الاثنين ينتج معظم الآراء السيئة.
هل تستخدم Google ملف llms.txt؟
بحث Google لا؛ وأدوات Chrome لدى Google نعم. خلال عشرة أيام في مايو 2026 اتخذت Google خطوتين تشيران في اتجاهين متعاكسين، ولهذا يستطيع المعسكران الاستشهاد بها.
في 5 مايو 2026 أضافت Google تدقيقاً لـllms.txt إلى Lighthouse تحت فئة جديدة للتصفح الوكيلي. يوسم التدقيق موقعاً إذا أعاد جلب /llms.txt خطأ خادم، وتقول الوثائق إنه بدون الملف "قد يقضي الوكلاء وقتاً أطول في زحف الموقع لفهم بنيته العليا" (ppc.land). وفي 15 مايو 2026 نشرت Google إرشاداً عن التحسين لميزات الذكاء الاصطناعي التوليدي في البحث (AI Overviews وAI Mode). llms.txt غائب عنه، بما يتسق مع ما قاله ممثلو بحث Google منذ ظهور المواصفة: SEO التقني المعتاد هو ما يُحتسب.
هما طبقتان. يرتّب بحث Google ويستشهد من فهرس HTML القائم لديه. أما التصفح الوكيلي، حيث يزور وكيل ذكاء اصطناعي موقعك لإتمام مهمة لمستخدم، فله احتياجات مختلفة، وهذا ما بدأ فريق Chrome التدقيق عنه. ومن يقول "Google تشترطه" أو "Google قتلته" يقتبس طبقة ويتجاهل الأخرى.
هل تقرأ زواحف الذكاء الاصطناعي llms.txt فعلاً؟
نادراً. وجد تحليل مجمّع لـ515 مليون حدث روبوت أن الطلبات على /llms.txt حصة ضئيلة من حركة زواحف الذكاء الاصطناعي (نُشر في aeo.press). تطلب GPTBot وClaudeBot وPerplexityBot صفحات HTML في الغالب الساحق، كما كانت زواحف البحث تفعل دائماً.
النشر يتحرك أسرع من القراءة. بحلول 31 مارس 2026 كانت 7.4% من شركات Fortune 500 (37 من 500) قد نشرت llms.txt (ppc.land). واعتمدته مواقع توثيق المطورين أسرع بكثير، لأن وكلاء البرمجة هم المستهلك الوحيد الذي يقرأ هذه الملفات بشكل موثّق اليوم.
الخلاصة الصادقة: نشر llms.txt لا يغيّر بشكل قابل للقياس كيف تقرأ زواحف الذكاء الاصطناعي الكبرى موقعك في 2026. ومن يبيعه بوصفه مفتاح حركة الذكاء الاصطناعي يبيع قبل الأدلة.
ما الذي يتحكم بزواحف الذكاء الاصطناعي في 2026؟
خمس طبقات، لاثنتين منها فقط أنياب. llms.txt أداة واحدة في الحزمة.
| الطبقة | ما تتحكم به | من ينفذها | قراءتنا |
|---|---|---|---|
| robots.txt (GPTBot وClaudeBot وPerplexityBot وGoogle-Extended) | هل يجوز للزواحف المعلنة جلب الصفحات؛ يحكم Google-Extended تدريب Gemini لا البحث | لا أحد؛ بروتوكول طوعي | مفتاحك الحقيقي للتشغيل والإيقاف. تحترم المختبرات الكبرى الروبوتات المعلنة، وإن وُجدت نزاعات: اتهمت Cloudflare في 2025 Perplexity باستخدام زواحف غير معلنة للتهرب من الحجب |
| Content Signals Policy | تعلن كيف يجوز استخدام المحتوى المجلوب: بحث، مُدخل ذكاء اصطناعي، تدريب | لا أحد تقنياً؛ حفظ للحقوق | لا يكلّف شيئاً؛ يخاطب المحامين أكثر من الروبوتات |
| حجب Cloudflare الافتراضي (Nieman Lab) | يحجب زواحف الذكاء الاصطناعي المعروفة عند حافة الشبكة للنطاقات الجديدة منذ 1 يوليو 2025 | Cloudflare؛ الطلبات المحجوبة لا تصل خادمك | الطبقة ذات الأنياب. غيّرها بوعي لا بالوراثة |
| الدفع لكل زحف | يحاسب زواحف الذكاء الاصطناعي لكل طلب بدل حجبها | سوق Cloudflare، في مرحلة تجريبية | ذو صلة بالناشرين الكبار، نادراً بمواقع B2B |
| llms.txt / llms-full.txt | لا شيء؛ قائمة قراءة استشارية | لا أحد | تأمين رخيص للويب الوكيلي؛ لا أثر SEO اليوم |
الطبقات التي يتجادل الناس حولها (llms.txt وContent Signals) استشارية. والطبقة التي غيّرت سلوك الزواحف بين ليلة وضحاها هي حافة CDN، ولم يضبطها كثير من أصحاب المواقع بوعي.
لماذا تهم أرقام الزحف إلى النقر؟
لأن أنظمة الذكاء الاصطناعي تستهلك المحتوى على نطاق صناعي وترسل زيارات تكاد لا تُذكر. وضعت بيانات Cloudflare Radar للربع الأول من 2026 نسبة الزحف إلى الإحالة، صفحات تُجلب لكل نقرة بشرية محالة، عند نحو 1,276:1 لـGPTBot من OpenAI ونحو 23,951:1 لـClaudeBot من Anthropic (Cloudflare). إذا كان عملك يحقق دخلاً من مشاهدات الصفحات، فهذا اللاتماثل يفسر ثورة الناشرين وتجربة الدفع لكل زحف.
لكن النسبة تقيس النقرات، والنقرات ليست العائد الوحيد. الزحف الذي لا يرسل زائراً يقرر مع ذلك هل يعرف النموذج أنك موجود ويصفك بدقة ويسميك حين يطلب مشترٍ قائمة مختصرة. وللشركة B2B كثيراً ما تكون إجابة الذكاء الاصطناعي نقطة الاتصال، ولا تسجلها تحليلاتك. فككنا التحول في AEO مقابل GEO مقابل SEO: ينتقل الهدف من كسب النقرة إلى أن تكون الإجابة المستشهد بها بدقة.
هل ينبغي أن تحجب زواحف الذكاء الاصطناعي أم تسمح بها؟
يعتمد على ما هو محتواك له. حساب الزحف إلى النقر نفسه يقطع بشكل مختلف بحسب نوع العمل.
| نوع العمل | منطق الإيرادات | زواحف الذكاء الاصطناعي | llms.txt |
|---|---|---|---|
| ناشر / إعلام | مشاهدات الصفحات والاشتراكات هي المنتج | احجب، أو فاوض عبر الدفع لكل زحف | تخطَّ |
| علامة B2B / خدمات | الموقع أصل مبيعات؛ أن تُعرف أهم من أن تُزار | مفتوح | انشره |
| تجارة إلكترونية | بيانات المنتج تقود الاكتشاف؛ والوكلاء يساعدون المشتريات بشكل متزايد | مفتوح؛ راقب كلفة البنية | انشره، مع روابط المنتج والسياسة |
| ترخيص المحتوى | المحتوى نفسه هو الأصل المسعَّر | احجب، ثم فاوض | تخطَّ |
لمعظم شركات B2B الجواب مفتوح. موقع التسويق موجود ليعرف السوق ما تفعل؛ ونظام ذكاء اصطناعي يقرؤه ويكرره بدقة يؤدي عمل الموقع. وحجب GPTBot لحماية محتوى غرضه أن يُعرف يعكس الاستراتيجية. والأصل الجدير بالحماية هو الدقة لا الوصول، والحفاظ على الدقة عبر المنصات جوهر عمل الظهور في الذكاء الاصطناعي.
ماذا يحدث لعلامتك حين يُحجب موقعك؟
تزن المصادر المفتوحة العالية السلطة أكثر. تحجب Cloudflare زواحف الذكاء الاصطناعي افتراضياً للنطاقات الجديدة، ويحجب الناشرون الوصول أو يقننونه، ويسعّر الدفع لكل زحف ما كان مجانياً. ومع انكماش الويب المفتوح من وجهة نظر زاحف، يتركز الاسترجاع على مدونات تبقى مفتوحة بالتصميم: ويكيبيديا وWikidata والسجلات العامة والمستودعات الأكاديمية.
إذا كان موقعك مظلماً للزواحف، باختيار أو افتراض CDN، فإن مقالتك في ويكيبيديا (إن استحقت) وكيان Wikidata والمصادر المفتوحة الأخرى تصبح السجل الفعلي الذي يقرؤه الذكاء الاصطناعي عنك. ولهذا نعامل الحضور الموسوعي بنية تحتية لا غرور. والصفحة توجد فقط إذا دعمت مصادر مستقلة الأهمية الموسوعية، ولا أحد يستطيع الوعد بما سيقوله ذكاء اصطناعي. الآليات في AEO في ويكيبيديا وخدمة Wikidata ورسم المعرفة وتكتيكات SEO في ويكيبيديا.
كيف تكتب llms.txt جيداً؟
اكتبه كمدخل قاموس لا شعار، وأبقِ كل واقعة مما تستطيع الدفاع عنه. أربع قواعد تغطي معظم القيمة:
- عرّف الكيان في السطر الأول. إذا قرأ نموذج عشرين رمزاً فقط، فينبغي أن تقول ما أنت.
- أشر إلى الملف الكامل. أبقِ الفهرس قابلاً للمسح واربط
llms-full.txtللوكلاء الذين يريدون كل شيء في جلب واحد. - اقرن الروابط المعتمدة بوقائع تحمل أرقاماً وتواريخ. "تأسست: 2010" قابلة للاسترجاع والتكرار؛ أما الصفات فلا. ضع السعر بجانب الرابط حين تذكره الصفحة.
- اذكر ما لا تدّعيه. تردد النماذج مصادرها. إذا بالغ ملفك بالادعاء، بالغت إجابة الذكاء الاصطناعي، وتبدأ أول مكالمة للمحتمل بتصحيح. وقسم قصير "ما لا ندّعيه" تأمين دقة.
هيكل أدنى:
# Company name: one-line definition
> Two-sentence summary of what you do and for whom.
## Key pages
- [Services](https://example.com/services): what is offered and prices
- [About](https://example.com/about): founding date, location, leadership
## What we do not claim
- No guaranteed outcomes; limits of the service in one line.أعد توليد الملف حين تتغير الوقائع. ملف قديم يحرّف أسعارك أسوأ من لا ملف. ننشر ملفنا في جذر النطاق، مولَّداً من بيانات الموقع المعتمدة، وقسمه الختامي يذكر ما لا نضمنه.
الأسئلة الشائعة
لا دليل على ذلك. إرشاد بحث Google في مايو 2026 لا يستخدم الملف، ولا محرك بحث أعلن قراءته للترتيب أو لـAI Overviews. وإذا كان الهدف استشهادات البحث بالذكاء الاصطناعي، فالعمل يبقى معتاداً: HTML قابل للزحف وبيانات مهيكلة ومصادر طرف ثالث موثوقة عنك.
نادراً، بحسب الأدلة الحالية. تُظهر تحليلات تمتد على مئات ملايين أحداث الروبوتات أن GPTBot وأمثاله يجلبون HTML ويتجاهلون /llms.txt في معظمهم. المستهلكون القريبون هم المتصفحات الوكيلية وأدوات البرمجة، زائد Lighthouse.
يكلّف نحو عشرين دقيقة ولا يغيّر شيئاً تستطيع قياسه اليوم، فهو اختياري. وإذا نشرت واحداً فأبقه دقيقاً وأعد توليده حين تتغير الوقائع.
لا. يخبر robots.txt الزواحف المعلنة بما يجوز لها جلبه؛ ويقترح llms.txt فقط ما يستحق القراءة. لا يضمن أي منهما الامتثال، لكن robots.txt هو الذي تقول المختبرات الكبرى إنها تحترمه.
افحص أولاً هل تحجبها أصلاً. إذا انضم نطاقك إلى Cloudflare بعد 1 يوليو 2025، فقد تكون زواحف الذكاء الاصطناعي محجوبة افتراضياً دون أن يقرر أحد في شركتك. أياً كان موقفك، اجعله قراراً لا إعداداً موروثاً.
llms.txt فهرس قصير بملخص وروابط منتقاة. وllms-full.txt يحتوي المحتوى الكامل مضموماً في وثيقة واحدة، ليقرأ وكيل كل شيء في طلب واحد.
هل تصفك المصادر التي تثق بها أنظمة الذكاء الاصطناعي بدقة، وهل يوجد سجل مقروء آلياً لشركتك أصلاً. راجع كيف يقرر الذكاء الاصطناعي أي العلامات يستشهد بها.
كيف تساعد WikiBusines
llms.txt أرخص طبقات قابلية القراءة للذكاء الاصطناعي وأقلها أثراً. ونحن نعمل على الطبقات ذات الأثر. ويُفصَح دائماً عن التحرير المدفوع في ويكيبيديا باسم WikiBusines، ولا نضمن أبداً ما سيقوله ذكاء اصطناعي.
- تدقيق الظهور في الذكاء الاصطناعي، €490. كيف تصفك المساعدات حالياً وأي المصادر تعتمد عليها.
- LLM Hub. مركز معرفة مقروء آلياً لشركتك، مبني من وقائعك المعتمدة.
- Wikidata، من €680. سجلات كيان تستخدمها المحركات لتمييزك عن شركات مشابهة الاسم.
- تدقيق الأهمية الموسوعية، من €490، يُخصم من الصفحة إذا طُلبت خلال شهر. وإنشاء الصفحة من €2,400 للإنجليزية، من 4 إلى 5 أسابيع، مع 90 يوماً من المراقبة والضمان بعد النشر.
للبدء، تواصل معنا.
المؤلفون والسياسة التحريرية
Bohdan Dubylovskyiمؤسس مشارك ورئيس تطوير الأعمال, WikiBusines→
Roman Melnykمؤسس مشارك ورئيس التحرير, WikiBusines→أعدّ المقال المؤسسان المشاركان لـ WikiBusines. نحن نقدّم خدمات مدفوعة على ويكيبيديا، لذا نعلن عن هذه المصلحة: التحرير المدفوع يُعلَن دائماً على ويكيبيديا باسم WikiBusines، والادعاءات المتعلقة بالقواعد مدعومة بروابط إلى مصادر أولية.
السياسة التحريرية: الإفصاح عن الدفع وتضارب المصالح والمصادر Read in English