الظهور في Claude وGrok وDeepSeek: كيف تجد هذه المساعدات مصادرها؟
كيف يبحث Claude وGrok وDeepSeek في الويب ومن أين يأخذون مصادرهم؟ شرح موثق من الصفحات الرسمية لكل مساعد، مع خطوات…
السيو وتحسين محركات البحث
ملف llms.txt: ما هو وكيف تنشئه لموقعك؟
ملف llms.txt مقترح لملف نصي بصيغة Markdown يلخص موقعك لنماذج الذكاء الاصطناعي. تعرّف على صيغته، وفرقه عن robots.txt، وطريقة إنشائه ورفعه على ووردبريس.
ملف llms.txt هو ملف نصي مقترح يوضع في جذر موقعك، ويقدّم لنماذج اللغة الكبيرة ملخصًا منظمًا لموقعك مع روابط لأهم صفحاته. الفكرة أن يجد النموذج المعلومات الأساسية بسرعة، بدل أن يتعامل مع صفحات HTML مليئة بالقوائم والإعلانات والأكواد.
لكن من المهم أن تعرف من البداية أنه مقترح وليس معيارًا رسميًا. ومحرك Google يقول صراحة إنه يتجاهله في البحث. لذلك سنشرح في هذا الدليل ما هو الملف فعلًا، وما الذي لا يفعله، وكيف تنشئه إن قررت ذلك.
وسنوضح أيضًا الفرق بينه وبين robots.txt، لأن التحكم الحقيقي في روبوتات الذكاء الاصطناعي مثل GPTBot يتم من robots.txt وليس من llms.txt.
ما هو ملف llms.txt ومن اقترحه؟
بحسب الموقع الرسمي للمقترح >llmstxt.org، صاحب المقترح هو Jeremy Howard، وتاريخ نشره 3 سبتمبر 2024. ويصف الموقع الملف بأنه وسيلة لتزويد النماذج بسياق مختصر عن الموقع وقت الاستخدام، أي عندما يسأل المستخدم سؤالًا، وليس أثناء التدريب.
الملف يُكتب بصيغة Markdown، وهي صيغة نصية بسيطة يقرؤها الإنسان والآلة معًا. ويوضع على الرابط https://example.com/llms.txt تمامًا كما يوضع robots.txt في الجذر.
مكونات الملف حسب المقترح
يحدد >نص المقترح ترتيبًا واضحًا للمكونات:
- عنوان H1 يحمل اسم المشروع أو الموقع. وهذا هو القسم الوحيد الإلزامي.
- اقتباس (blockquote) يقدّم ملخصًا قصيرًا يحتوي المعلومات الأساسية لفهم بقية الملف.
- فقرات أو قوائم اختيارية تشرح الموقع وطريقة فهم الروابط، دون استخدام عناوين.
- أقسام بعناوين H2، كل قسم يضم قائمة روابط بصيغة
[الاسم](الرابط)، ويمكن إضافة ملاحظة بعد نقطتين. - قسم اختياري باسم “Optional” له معنى خاص: روابطه يمكن تجاهلها إذا احتاج النظام سياقًا أقصر.
ويقترح المقترح أيضًا أن توفر نسخة Markdown نظيفة من الصفحات المهمة على الرابط نفسه مع إضافة .md في آخره. وللروابط التي لا تحتوي اسم ملف، تكون النسخة على index.html.md.
مثال توضيحي لملف llms.txt
المثال التالي مثال توضيحي لشركة خيالية اسمها “شركة الواحة للتجهيزات المكتبية”، ولا يمثل أي عميل حقيقي:
# شركة الواحة للتجهيزات المكتبية
> شركة خيالية (مثال توضيحي) تورّد الأثاث والتجهيزات المكتبية للشركات في الرياض وجدة، وتقدم خدمات التصميم والتركيب والصيانة.
تعرض الروابط التالية أهم صفحات الموقع. صفحات الخدمات تحتوي التفاصيل الفنية، وصفحة الأسئلة الشائعة تجيب عن أسئلة التوريد والضمان.
## الخدمات
- [تجهيز المكاتب](https://example.com/services/office-setup.md): التصميم والتوريد والتركيب
- [صيانة الأثاث المكتبي](https://example.com/services/maintenance.md): عقود صيانة دورية
## معلومات الشركة
- [من نحن](https://example.com/about.md): نبذة عن الشركة وفريق العمل
- [الأسئلة الشائعة](https://example.com/faq.md): التوريد والضمان ومدة التنفيذ
- [تواصل معنا](https://example.com/contact.md): العناوين وطرق التواصل
## Optional
- [المدونة](https://example.com/blog.md): مقالات عن تنظيم بيئة العمل
لاحظ أن الملف قصير ومباشر. الهدف ليس نسخ الموقع كاملًا، بل إعطاء خريطة واضحة لأهم المحتوى.
هل تستخدم محركات البحث ملف llms.txt؟
هنا يجب أن نكون دقيقين. Google أعلنت موقفها بوضوح في >دليل تحسين الظهور في ميزات الذكاء الاصطناعي. يقول الدليل إنك لا تحتاج إلى إنشاء ملفات جديدة قابلة للقراءة الآلية أو ملفات نصية للذكاء الاصطناعي للظهور في بحث Google، لأن بحث Google نفسه لا يستخدمها.
ويضيف الدليل نفسه أنه لا مشكلة في إنشاء ملفات LLMS.txt إذا كانت تخدم أنظمة أو خدمات أخرى تستخدمها. لكنه يؤكد أن ذلك لن يضر ولن يفيد ظهورك أو ترتيبك في بحث Google، لأن بحث Google يتجاهل هذه الملفات.
وتكرر صفحة >ميزات الذكاء الاصطناعي وموقعك المعنى نفسه: لا توجد متطلبات إضافية للظهور في AI Overviews أو AI Mode، ولا تحتاج إلى ملفات نصية خاصة بالذكاء الاصطناعي.
ماذا قال ممثلو Google سابقًا؟
قبل هذا التوضيح الرسمي، شبّه John Mueller من Google ملف llms.txt بوسم keywords الوصفي، أي أنه ما يدّعيه صاحب الموقع عن موقعه. نقل ذلك >Search Engine Journal في أبريل 2025 من نقاش على Reddit.
وفي يونيو 2025 كتب Mueller على Bluesky أن أي نظام ذكاء اصطناعي لا يستخدم llms.txt حاليًا، بحسب >Search Engine Roundtable.
لماذا يظل الملف موضع اهتمام؟
في المقابل، ذكر >Search Engine Journal في مايو 2026 أن أداة Lighthouse من Chrome أضافت فئة تجريبية باسم Agentic Browsing تتضمن فحصًا لملف llms.txt. وأوضح المقال أن هذه الفئة منفصلة عن فحوصات السيو، ولا تعني ترتيبًا أفضل أو ظهورًا في إجابات الذكاء الاصطناعي.
الخلاصة العملية: الملف لا يحسّن ترتيبك في Google، وقد تستفيد منه بعض الأدوات أو الوكلاء الذين يقرؤونه. ولا يمكن لأحد أن يضمن ظهورك في إجابة معينة بسببه.
الفرق بين llms.txt وrobots.txt
يوضح >نص المقترح أن للملفين غرضين مختلفين. فملف robots.txt يحدد أنواع الوصول الآلي المقبولة، أما llms.txt فيقدم سياقًا للمحتوى المسموح به، ويُستخدم أساسًا وقت الاستدلال.
| وجه المقارنة | robots.txt | llms.txt |
|---|---|---|
| الوظيفة | السماح أو المنع للزواحف | تلخيص الموقع وإرشاد النماذج لأهم الصفحات |
| الوضع الرسمي | معتمد ومعروف لدى محركات البحث | مقترح وليس معيارًا رسميًا |
| أثره في بحث Google | يتحكم في الزحف | يتجاهله بحث Google |
| الصيغة | أوامر User-agent وAllow وDisallow | Markdown بعناوين وروابط |
| هل يمنع الوصول؟ | نعم، للزواحف التي تلتزم به | لا، لا يمنع أي شيء |
إذا كان هدفك منع روبوت معين أو السماح له، فالمكان الصحيح هو robots.txt. ويمكنك مراجعة إعداداته ضمن قائمة فحص السيو التقني.
السماح لروبوتات الذكاء الاصطناعي في robots.txt
كثير من أصحاب المواقع يسألون عن “أرشفة موقعي في ChatGPT”. والإجابة تبدأ من فهم أن OpenAI تستخدم أكثر من روبوت، ولكل واحد وظيفة مختلفة.
روبوتات OpenAI: GPTBot وOAI-SearchBot
بحسب >صفحة روبوتات OpenAI:
- OAI-SearchBot: مخصص لإظهار المواقع في نتائج بحث ChatGPT. والمواقع التي تمنعه لن تظهر في إجابات بحث ChatGPT، وإن كانت قد تظهر كروابط تنقّل.
- GPTBot: يزحف إلى محتوى قد يُستخدم في تدريب نماذج OpenAI. ومنعه يعني أنك لا تريد استخدام محتواك في تدريب النماذج.
- ChatGPT-User: يزور الصفحات عندما يطلب المستخدم ذلك أثناء المحادثة. وتقول OpenAI إنه ليس زاحفًا تلقائيًا، وإن قواعد robots.txt قد لا تنطبق عليه.
وتوضح الصفحة أن كل إعداد مستقل عن الآخر. يمكنك السماح لـ OAI-SearchBot للظهور في البحث، مع منع GPTBot من استخدام المحتوى في التدريب. كما تذكر أن تحديث robots.txt قد يستغرق نحو 24 ساعة حتى تعكسه أنظمتهم.
لمزيد من التفاصيل عن طريقة اختيار ChatGPT للمصادر، راجع مقالنا كيف يرشّح ChatGPT الشركات؟.
Google-Extended
تشرح >قائمة زواحف Google الشائعة أن Google-Extended رمز مستقل في robots.txt. يتيح لك التحكم في استخدام المحتوى الذي تزحف إليه Google لتدريب الأجيال القادمة من نماذج Gemini، وكذلك في استخدامه للتأريض (grounding).
والأهم أن الصفحة تقول إن Google-Extended لا يؤثر في ظهور الموقع في بحث Google، ولا يُستخدم كإشارة ترتيب. أما الظهور في AI Overviews وAI Mode فيخضع لقواعد Googlebot العادية، كما توضح >صفحة ميزات الذكاء الاصطناعي.
مثال توضيحي لملف robots.txt
هذا مثال توضيحي لموقع يسمح بالظهور في بحث ChatGPT وبحث Google، ويمنع استخدام محتواه في تدريب النماذج:
User-agent: OAI-SearchBot
Allow: /
User-agent: GPTBot
Disallow: /
User-agent: Google-Extended
Disallow: /
User-agent: *
Allow: /
Sitemap: https://example.com/sitemap.xml
قرار منع GPTBot أو Google-Extended قرار تجاري يخصك، وليس شرطًا للظهور. راجع ما يناسب نشاطك قبل التطبيق، وتأكد ألا تمنع Googlebot أو OAI-SearchBot بالخطأ.
كيفية عمل llms.txt خطوة بخطوة
إذا قررت إنشاء الملف لخدمة الأدوات التي تقرؤه، فهذه خطوات عملية:
- حدد أهم الصفحات: الخدمات الأساسية، ومن نحن، والأسئلة الشائعة، وصفحة التواصل، وأهم المقالات.
- اكتب عنوان H1 بالاسم الرسمي لنشاطك كما يظهر في بقية الموقع.
- اكتب ملخصًا قصيرًا في اقتباس: من أنت، وماذا تقدم، ولمن، وأين تعمل.
- قسّم الروابط تحت عناوين H2 مع وصف قصير لكل رابط.
- ضع المحتوى الأقل أهمية في قسم Optional.
- احفظ الملف باسم llms.txt بترميز UTF-8 حتى يظهر النص العربي سليمًا.
- تحقق من الروابط وتأكد أنها تعمل ولا تشير إلى صفحات محذوفة أو محجوبة.
اجعل الوصف في الملف متسقًا مع محتوى صفحاتك وبيانات السكيما Schema. التناقض بين المصادر يضعف الثقة بدل أن يقويها.
رفع ملف llms.txt على ووردبريس
الطريقة اليدوية
- افتح مدير الملفات في لوحة الاستضافة، أو اتصل بالموقع عبر FTP.
- ادخل إلى المجلد الجذري للموقع، وهو المجلد الذي يحتوي ملف wp-config.php عادة.
- ارفع ملف llms.txt إلى هذا المجلد.
- افتح الرابط
https://موقعك/llms.txtفي المتصفح وتأكد أن الملف يظهر والنص العربي مقروء.
عن طريق إضافات السيو
بعض إضافات السيو في ووردبريس تنشئ الملف تلقائيًا:
- Rank Math: بحسب >قاعدة معرفة Rank Math، فعّل وحدة LLMS Txt من لوحة Rank Math، ثم اختر أنواع المحتوى والتصنيفات من إعدادات Edit llms.txt، واحفظ التغييرات.
- Yoast SEO: بحسب >مركز مساعدة Yoast، ادخل إلى الإعدادات ثم Site features، وفعّل LLMS.txt تحت قسم AI tools، ثم احفظ.
لا تستخدم الطريقتين معًا. إذا رفعت ملفًا يدويًا وفعّلت الإضافة، قد يحدث تعارض في الملف الذي يظهر فعليًا.
متى يستحق الملف الجهد؟
الملف سهل وسريع، لكن لا تجعله أولويتك الأولى. الأولوية لمحتوى واضح وموثوق، وزحف سليم، وصفحات قابلة للفهرسة، كما شرحنا في دليل GEO ومقال كيف تظهر في إجابات الذكاء الاصطناعي.
إذا كان موقعك يقدم توثيقًا تقنيًا أو منتجات برمجية، فقد يكون الملف مفيدًا للمطورين الذين يستخدمون أدوات ذكاء اصطناعي تقرؤه. أما للمواقع الخدمية الصغيرة، فهو إضافة اختيارية بلا ضرر.
أسئلة شائعة عن ملف llms.txt
هل ملف llms.txt يحسن ترتيب موقعي في Google؟
لا. يقول دليل Google الرسمي إن بحث Google يتجاهل هذه الملفات، وإنها لن تضر ولن تفيد الظهور أو الترتيب.
هل llms.txt بديل عن robots.txt؟
لا. ملف robots.txt يتحكم في السماح للزواحف ومنعها، أما llms.txt فيقدم ملخصًا وروابط فقط ولا يمنع أي روبوت من الوصول.
كيف أسمح لـ ChatGPT بأرشفة موقعي في نتائج البحث؟
اسمح لـ OAI-SearchBot في robots.txt، فهو الروبوت الذي تعتمد عليه OpenAI لإظهار المواقع في بحث ChatGPT. ولا يمكن لأحد ضمان ظهورك في إجابة محددة.
هل منع GPTBot يمنع ظهوري في ChatGPT؟
بحسب OpenAI، GPTBot مخصص للتدريب، والظهور في البحث يتحكم فيه OAI-SearchBot. والإعدادان مستقلان، فيمكنك منع الأول والسماح للثاني.
هل أحتاج نسخة Markdown من كل صفحة؟
المقترح يوصي بنسخ .md للصفحات المهمة، لكنها ليست شرطًا لإنشاء الملف. وGoogle تقول إن بحثها لا يحتاج ملفات Markdown خاصة.
الخلاصة
ملف llms.txt مقترح بسيط يلخص موقعك لنماذج الذكاء الاصطناعي، لكنه ليس معيارًا رسميًا، وبحث Google يتجاهله. أما التحكم الفعلي في روبوتات مثل GPTBot وOAI-SearchBot وGoogle-Extended فيتم من robots.txt.
إذا أردت خطة متكاملة تجعل موقعك واضحًا لمحركات البحث وأنظمة الذكاء الاصطناعي، بدءًا من الإعدادات التقنية وحتى المحتوى، تعرّف على خدمة GEO أو احجز مكالمة مجانية لمراجعة موقعك.
المصادر: >llmstxt.org، >Google: AI optimization guide، >Google: AI features and your website، >Google common crawlers، >OpenAI crawlers، >Search Engine Journal: llms.txt والكلمات المفتاحية، >Search Engine Roundtable، >Search Engine Journal: Lighthouse وllms.txt، >Rank Math KB، >Yoast Help
