انتقل إلى المحتوى الرئيسي
احجز مكالمة
آخر تحديث: ⁨٢٠ نوفمبر ٢٠٢٦⁩

لا أحد يقرأ ملف llms.txt لديك. افحص robots.txt

من الفريق
Hamed Azimi
Hamed Azimi
المؤسّس، ⁨NexusWave⁩
لنبنِ شيئًا معًا.

نكتب هذه الأدلة من عمل عملاء حقيقي — ⁨GEO⁩ و⁨SEO⁩ وإنشاءات أطلقناها. وإن أثار مقال سؤالًا حول موقعك، يسعدنا أن نُلقي نظرة عليه.

  • إجابات مباشرة، دون الحاجة إلى عقد شهري
  • نردّ بلغتك — ⁨EN⁩ · العربية
  • مقرّنا في كندا، ونعمل حول العالم
ابدأ محادثة ←اطّلع على ما نقوم به ←

يمكن لمبرمجك أن يضيف ملف llms.txt بعد ظهر اليوم. أما زواحف الذكاء الاصطناعي التي تضيفه من أجلها فلن تطلبه. وهذه الفجوة — بين ملف يُنشر في ساعة وملف لا يجلبه شيء أبدًا — هي حيث ذهب جزء كبير من ميزانية البحث بالذكاء الاصطناعي هذا العام.

الملف نفسه فكرة معقولة. يوضع llms.txt في جذر موقعك ويسرد صفحاتك المهمة بصيغة Markdown، ليحصل نموذج لغوي على خريطة نظيفة لمحتواك بدل أن يفكّ قائمة تنقّلك. الاقتراح هندسة سليمة. مشكلته أنه عُرف لم يوافق عليه أحد في جهة القراءة.

من الذي يجلب llms.txt فعلًا؟

أجابت Ahrefs عن ذلك في ١٥ يونيو ٢٠٢٦ ببيانات السجلات لا بالرأي. فمن بين ١٣٧٬٢١٠ نطاقًا لها حركة في مايو ٢٠٢٦ داخل أداة القياس الخاصة بها، نشر ٢٨ في المئة ملف llms.txt صالحًا — ولم يتلقَّ ٩٧ في المئة من تلك الملفات أي طلب في الشهر كله. ومن الطلبات التي وصلت إلى الـ٣ في المئة الباقية، شكّلت زواحف الاسترجاع بالذكاء الاصطناعي، أي تلك التي تجلب صفحة للإجابة عن سؤال حيّ، ١٫١ في المئة. وتجاوزتها أدوات التدقيق وزواحف الوِب العامة، وجاء ١٢ في المئة من تلك الحركة كلها من أدوات مهمتها التحقق من ملفات llms.txt نفسها.

والنتيجة التي تحسم النقاش هي تلك المتعلقة بالملفات غير الموجودة. نظرت Ahrefs في الطلبات الواردة على عناوين llms.txt التي لا تُعيد شيئًا، فكانت حصة زواحف الذكاء الاصطناعي منها صفرًا. لا زاحف ذكاء اصطناعي يسأل على سبيل التخمين. وإن لم يسأل شيء عن الملف، فنشره لا يمكن أن يغيّر سلوك أي زاحف — ولا يجده إلا أداة أنت من دلّها على مكانه.

وثمة فحص أصغر يشير إلى الجهة نفسها. نشر موقع واحد ملف llms.txt ثم قرأ ١٤ يومًا من سجلات nginx الخاصة به عبر ١٨ عائلة مُسمّاة من زواحف الذكاء الاصطناعي: جلبت تلك الزواحف robots.txt ٧٢٣ مرة وllms.txt صفر مرة، في حين أرسلت ١٥١ طلبًا إلى صفحات محتوى حقيقية. موقع واحد ليس إحصاءً شاملًا. لكنه شكل مفيد — فالزواحف كانت هناك، تقرأ الصفحات، وتقرأ الملف الذي صار معيارًا منذ ١٩٩٤.

137,210
نطاقًا في بحث Ahrefs عن llms.txt (حركة مايو ٢٠٢٦)
97
في المئة من الملفات المنشورة بلا أي طلب في ذلك الشهر
1.1
في المئة من تلك الطلبات جاءت من زواحف الاسترجاع بالذكاء الاصطناعي
0
طلبًا أرسلته زواحف الذكاء الاصطناعي لملفات غير موجودة

فلماذا تنشره المواقع الكبيرة إذن؟

لأنه يؤدي مهمة واحدة جيدًا: إنه فهرس لأداة أنت من يدلّها عليه. فتوثيق المطورين الخاص بـOpenAI يُفتتح بإخبار القارئ أن فهرس التوثيق الكامل في ملف llms.txt لديه، وأن إضافة md. إلى عنوان أي صفحة تُعيدها بصيغة Markdown. هذا مهندس يسلّم مساعد البرمجة خريطة عن قصد. إنه تسهيل في التوثيق، وإن كنت تبيع أدوات للمطورين فقد يستحق الحفاظ عليه. لكنه ليس رافعة للظهور في البحث، وتقول Google ذلك بلا مواربة: لا تحتاج إلى إنشاء ملفات جديدة قابلة لقراءة الآلة، ولا ملفات نصية للذكاء الاصطناعي، ولا ترميز جديد لتظهر في ميزاتها الذكية، وبحث Google يتجاهلها، فالملف لا يرفع ترتيبك ولا يضرّه.

عدم الضرر ليس كالنفع

الملف لن يضرّ ظهورك، لأن المحركات تتجاهله. كلفته هي الاعتقاد المصاحب له — أن عمل التهيؤ للذكاء الاصطناعي قد انتهى. أبقِه توثيقًا لأدوات تدلّها عليه أنت، وأنفق تلك الساعة على وصول الزواحف بدلًا من ذلك.

ما الذي يحكم فعلًا بوابة الذكر في جواب الذكاء الاصطناعي؟

الوصول أولًا، وهو أدقّ مما يفترضه معظم الناس. توثّق OpenAI أربعة زواحف منفصلة، تُضبط كلها من robots.txt: OAI-SearchBot يُظهر المواقع في ميزات البحث داخل ChatGPT، وGPTBot يزحف المحتوى لتدريب النموذج، وChatGPT-User ينفّذ عمليات الجلب التي يطلبها شخص داخل محادثة، وOAI-AdsBot يفحص الصفحات المُقدَّمة كإعلانات. مهام مختلفة، ووكلاء مستخدم مختلفون. والذي يحدّد إن كان ChatGPT قادرًا على ذكرك في جواب حيّ هو OAI-SearchBot — لا GPTBot. والعمل الذي حجب «زاحف OpenAI» ليُبعد كتابته عن التدريب ربما حجب نفسه عن الأجوبة بدلًا من ذلك. وهذان ناتجان متعاكسان من سطرين في الملف نفسه.

ثم الأمور العادية، التي تسردها Google دون أن تخترع ملفًا واحدًا جديدًا: أن تكون مُفهرسًا ومؤهلًا لمقتطف، وأن تسمح بالزحف في robots.txt وفي طبقة الاستضافة، وأن تحفظ المحتوى المهم نصًّا لا مختومًا داخل صور، وأن تجعل البيانات المنظمة مطابقة لما يراه الزائر فعلًا، وأن تُحدِّث Google Business Profile لديك، وأن توثّق الموقع في Search Console. لا شيء من ذلك جديد. وهذا هو المقصود. فالعمل الذي يكسب ذكرًا في جواب ذكاء اصطناعي هو العمل الذي كسب الترتيب، منفَّذًا جيدًا بما يكفي لأن تنتزع آلةٌ فقرة واحدة من سياقها وتبقى صائبة.

  1. افتح robots.txt لديك واقرأه سطرًا سطرًا.
  2. اسمح لزواحف البحث بالاسم، وأولها OAI-SearchBot.
  3. اقرر وصول التدريب منفصلًا عن وصول البحث.
  4. افحص قواعد الجدار الناري والزواحف أيضًا، لا الملف وحده.
  5. ابحث في سجلات أسبوع عن وكيل المستخدم لكل زاحف.
  6. ضع جوابًا مباشرًا في الفقرة الأولى من كل صفحة.
  7. احفظ الأسعار والمواعيد وأسماء الخدمات نصًّا لا صورًا.
ملف لا يجلبه شيء ليس تحسينًا. إنه سطر في فاتورة.
حامد عظيمي، مؤسس NexusWave Technologies

كيف تعرف أنها نجحت؟

فحصان، وعلى كليهما أن يكون قادرًا على الفشل. أولًا الوصول: اجلب robots.txt الخاص بك، وطابقه مع أسماء الزواحف التي تهمّك، ثم ابحث في سجلات أسبوع عن وكيل المستخدم لكل منها. القاعدة التي تظن أنها تسمح لزاحف ادعاء عن النيّة؛ وطلبٌ من ذلك الزاحف قابع في سجلك ادعاء عن الحال. وإن لم يظهر زاحف تريده قطّ، فالعمل محجوب عند الباب ولا شيء على الصفحة يهمّ بعد.

ثانيًا الذكر نفسه. اكتب خمسة أسئلة يطرحها عميل وينبغي أن تكون أنت جوابها، واطرحها على المساعدات التي تهمّك، وسجّل إن كنت تُذكر ويُوضع رابطك. أعِد الأسئلة الخمسة نفسها كل شهر. مقياس خام يتذبذب بين الجولات، ومع ذلك هو الوحيد المرتبط بالنتيجة التي تدفع مقابلها. أما تقرير يؤكد وجود ملف فحسب فلا يمكنه أن يفشل، ولهذا بالضبط لا يُعدّ دليلًا.

اعرف ما الذي يحجب الذكر

نتحقق من وصول زواحف الذكاء الاصطناعي، ونقيّم بنية محتواك، ونحصر بياناتك المنظمة، ونراجع وضوح الكيان وإشارات الحداثة، ونضيف لمحة عن ظهور منافسيك في الذكاء الاصطناعي، ونسلّمك قائمة إصلاحات مرتّبة بالأولوية، بسعر ثابت ٤٩٩ دولارًا.
Hamed Azimi

Hamed Azimi

المؤسّس، NexusWave

حامد عظيمي هو مؤسّس ⁨NexusWave Technologies⁩، وكالة رقمية واستوديو منتجات يعتمد الذكاء الاصطناعي ومقرّه ⁨Vancouver⁩.

من الفريق
Hamed Azimi
Hamed Azimi
المؤسّس، ⁨NexusWave⁩
لنبنِ شيئًا معًا.

نكتب هذه الأدلة من عمل عملاء حقيقي — ⁨GEO⁩ و⁨SEO⁩ وإنشاءات أطلقناها. وإن أثار مقال سؤالًا حول موقعك، يسعدنا أن نُلقي نظرة عليه.

  • إجابات مباشرة، دون الحاجة إلى عقد شهري
  • نردّ بلغتك — ⁨EN⁩ · العربية
  • مقرّنا في كندا، ونعمل حول العالم
ابدأ محادثة ←اطّلع على ما نقوم به ←
موجز NexusWave
رسالة إلكترونية مفيدة واحدة شهريًا — نتائج GEO وملاحظات البناء، بلا ضجيج. تأكيد مزدوج للاشتراك.
الأسئلة الشائعة

الأسئلة الأكثر شيوعًا

هل أحذف ملف llms.txt الموجود لديّ؟

لا. تقديمه لا يكلّف شيئًا والمحركات تتجاهله، فحذفه لا يشتري لك شيئًا أيضًا. أبقِه إن كانت أداة لديك تقرأه، وإلا فاتركه يتقادم، وتوقّف عن احتسابه عملًا للبحث بالذكاء الاصطناعي في أي فاتورة.

إن حجبت GPTBot، هل أختفي من أجوبة ChatGPT؟

ليس من تلقاء نفسه. فGPTBot يزحف لتدريب النموذج؛ وOAI-SearchBot هو الزاحف وراء ميزات البحث في ChatGPT. وحجب زاحف التدريب مع السماح لزاحف البحث موقف متماسك، وهو ما تريده معظم الأعمال فعلًا. افحص السطرين، لأن قاعدة واحدة واسعة موجَّهة إلى OpenAI تلتقط كليهما عادةً.

هل هناك ملف يفيد فعلًا؟

robots.txt، وبهذا المعنى فقط: أنه يحدّد من يدخل. وبعد الوصول، الرافعة هي الصفحة نفسها: جواب مباشر قريب من الأعلى، وبيانات منظمة مطابقة للمحتوى المرئي، ومادة تبقى محدَّثة. ولا ملف تضيفه يحلّ محلّ أن تكون جديرًا بالاقتباس.

قراءات ذات صلة
كل المقالات →
GEO والبحث بالذكاء الاصطناعي
كيف يقرّر مساعدو الذكاء الاصطناعي أيّ الأعمال يوصون بها
داخل الإشارات التي تزنها محرّكات الذكاء الاصطناعي قبل ذكر عمل في إجابة — والخطوات التي تكسب استشهادًا.
Hamed Azimi
Hamed Azimiالمؤسّس، NexusWave
⁨٢٠ يونيو ٢٠٢٦⁩⁨٢ دقيقة⁩٤:٥٦
GEO والبحث بالذكاء الاصطناعي
ما هو GEO؟ الدليل الكامل لأصحاب الأعمال
كيف تُستشهَد الأعمال في إجابات الذكاء الاصطناعي من ChatGPT وPerplexity وGoogle AI Overviews — ما هو وكيف تبدأ.
Hamed Azimi
Hamed Azimiالمؤسّس، NexusWave
⁨١٢ يونيو ٢٠٢٦⁩⁨٢ دقيقة⁩٦:٥٣
الإعلانات المدفوعة والتواصل الاجتماعي
إعلانات ChatGPT أزالت سقف المزايدة. أثبت أن تتبّعك يعمل
استبدلت إعلانات ChatGPT سقف المزايدة بهدف للتكلفة في ٩ نوفمبر. الهدف متوسط لا سقف، فصار تتبّع التحويل هو مكبح إنفاقك.
Hamed Azimi
Hamed Azimiالمؤسّس، NexusWave
⁨١٧ نوفمبر ٢٠٢٦⁩⁨٣ دقيقة⁩٨:٠٧
لنبدأ
أخبِرنا بما تبنيه.
شارِكنا أهدافك لتحصل خلال يوم عمل واحد على عرضٍ مكتوب ومفصّل — بالإنجليزية أو الفارسية أو العربية. دون التزام، دون ضغط.
تجاوز النموذج — احجز مباشرة
مكالمة تعارف مدّتها ٣٠ دقيقة، تُزامَن مباشرة مع تقويمنا عبر Skejel.
اختَر وقتًا
ابدأ المحادثةردّ خلال يوم
⁨نطاق الميزانية: *⁩
يُسجَّل مباشرة في Zoho CRM. يُلتقط رابط الصفحة واللغة ومعامِلات UTM تلقائيًا لأغراض الإسناد.
تفضّل الدردشة؟ فقاعة SalesIQ في الزاوية تصلك بإنسان — الروبوت يتولّى التحية الأولى فقط.
٥٫٠ · Google وClutchردّ خلال يوم عملEN · FA · AR