يمكن لمبرمجك أن يضيف ملف llms.txt بعد ظهر اليوم. أما زواحف الذكاء الاصطناعي التي تضيفه من أجلها فلن تطلبه. وهذه الفجوة — بين ملف يُنشر في ساعة وملف لا يجلبه شيء أبدًا — هي حيث ذهب جزء كبير من ميزانية البحث بالذكاء الاصطناعي هذا العام.
الملف نفسه فكرة معقولة. يوضع llms.txt في جذر موقعك ويسرد صفحاتك المهمة بصيغة Markdown، ليحصل نموذج لغوي على خريطة نظيفة لمحتواك بدل أن يفكّ قائمة تنقّلك. الاقتراح هندسة سليمة. مشكلته أنه عُرف لم يوافق عليه أحد في جهة القراءة.
من الذي يجلب llms.txt فعلًا؟
أجابت Ahrefs عن ذلك في ١٥ يونيو ٢٠٢٦ ببيانات السجلات لا بالرأي. فمن بين ١٣٧٬٢١٠ نطاقًا لها حركة في مايو ٢٠٢٦ داخل أداة القياس الخاصة بها، نشر ٢٨ في المئة ملف llms.txt صالحًا — ولم يتلقَّ ٩٧ في المئة من تلك الملفات أي طلب في الشهر كله. ومن الطلبات التي وصلت إلى الـ٣ في المئة الباقية، شكّلت زواحف الاسترجاع بالذكاء الاصطناعي، أي تلك التي تجلب صفحة للإجابة عن سؤال حيّ، ١٫١ في المئة. وتجاوزتها أدوات التدقيق وزواحف الوِب العامة، وجاء ١٢ في المئة من تلك الحركة كلها من أدوات مهمتها التحقق من ملفات llms.txt نفسها.
والنتيجة التي تحسم النقاش هي تلك المتعلقة بالملفات غير الموجودة. نظرت Ahrefs في الطلبات الواردة على عناوين llms.txt التي لا تُعيد شيئًا، فكانت حصة زواحف الذكاء الاصطناعي منها صفرًا. لا زاحف ذكاء اصطناعي يسأل على سبيل التخمين. وإن لم يسأل شيء عن الملف، فنشره لا يمكن أن يغيّر سلوك أي زاحف — ولا يجده إلا أداة أنت من دلّها على مكانه.
وثمة فحص أصغر يشير إلى الجهة نفسها. نشر موقع واحد ملف llms.txt ثم قرأ ١٤ يومًا من سجلات nginx الخاصة به عبر ١٨ عائلة مُسمّاة من زواحف الذكاء الاصطناعي: جلبت تلك الزواحف robots.txt ٧٢٣ مرة وllms.txt صفر مرة، في حين أرسلت ١٥١ طلبًا إلى صفحات محتوى حقيقية. موقع واحد ليس إحصاءً شاملًا. لكنه شكل مفيد — فالزواحف كانت هناك، تقرأ الصفحات، وتقرأ الملف الذي صار معيارًا منذ ١٩٩٤.
فلماذا تنشره المواقع الكبيرة إذن؟
لأنه يؤدي مهمة واحدة جيدًا: إنه فهرس لأداة أنت من يدلّها عليه. فتوثيق المطورين الخاص بـOpenAI يُفتتح بإخبار القارئ أن فهرس التوثيق الكامل في ملف llms.txt لديه، وأن إضافة md. إلى عنوان أي صفحة تُعيدها بصيغة Markdown. هذا مهندس يسلّم مساعد البرمجة خريطة عن قصد. إنه تسهيل في التوثيق، وإن كنت تبيع أدوات للمطورين فقد يستحق الحفاظ عليه. لكنه ليس رافعة للظهور في البحث، وتقول Google ذلك بلا مواربة: لا تحتاج إلى إنشاء ملفات جديدة قابلة لقراءة الآلة، ولا ملفات نصية للذكاء الاصطناعي، ولا ترميز جديد لتظهر في ميزاتها الذكية، وبحث Google يتجاهلها، فالملف لا يرفع ترتيبك ولا يضرّه.
عدم الضرر ليس كالنفع
الملف لن يضرّ ظهورك، لأن المحركات تتجاهله. كلفته هي الاعتقاد المصاحب له — أن عمل التهيؤ للذكاء الاصطناعي قد انتهى. أبقِه توثيقًا لأدوات تدلّها عليه أنت، وأنفق تلك الساعة على وصول الزواحف بدلًا من ذلك.
ما الذي يحكم فعلًا بوابة الذكر في جواب الذكاء الاصطناعي؟
الوصول أولًا، وهو أدقّ مما يفترضه معظم الناس. توثّق OpenAI أربعة زواحف منفصلة، تُضبط كلها من robots.txt: OAI-SearchBot يُظهر المواقع في ميزات البحث داخل ChatGPT، وGPTBot يزحف المحتوى لتدريب النموذج، وChatGPT-User ينفّذ عمليات الجلب التي يطلبها شخص داخل محادثة، وOAI-AdsBot يفحص الصفحات المُقدَّمة كإعلانات. مهام مختلفة، ووكلاء مستخدم مختلفون. والذي يحدّد إن كان ChatGPT قادرًا على ذكرك في جواب حيّ هو OAI-SearchBot — لا GPTBot. والعمل الذي حجب «زاحف OpenAI» ليُبعد كتابته عن التدريب ربما حجب نفسه عن الأجوبة بدلًا من ذلك. وهذان ناتجان متعاكسان من سطرين في الملف نفسه.
ثم الأمور العادية، التي تسردها Google دون أن تخترع ملفًا واحدًا جديدًا: أن تكون مُفهرسًا ومؤهلًا لمقتطف، وأن تسمح بالزحف في robots.txt وفي طبقة الاستضافة، وأن تحفظ المحتوى المهم نصًّا لا مختومًا داخل صور، وأن تجعل البيانات المنظمة مطابقة لما يراه الزائر فعلًا، وأن تُحدِّث Google Business Profile لديك، وأن توثّق الموقع في Search Console. لا شيء من ذلك جديد. وهذا هو المقصود. فالعمل الذي يكسب ذكرًا في جواب ذكاء اصطناعي هو العمل الذي كسب الترتيب، منفَّذًا جيدًا بما يكفي لأن تنتزع آلةٌ فقرة واحدة من سياقها وتبقى صائبة.
- افتح robots.txt لديك واقرأه سطرًا سطرًا.
- اسمح لزواحف البحث بالاسم، وأولها OAI-SearchBot.
- اقرر وصول التدريب منفصلًا عن وصول البحث.
- افحص قواعد الجدار الناري والزواحف أيضًا، لا الملف وحده.
- ابحث في سجلات أسبوع عن وكيل المستخدم لكل زاحف.
- ضع جوابًا مباشرًا في الفقرة الأولى من كل صفحة.
- احفظ الأسعار والمواعيد وأسماء الخدمات نصًّا لا صورًا.
ملف لا يجلبه شيء ليس تحسينًا. إنه سطر في فاتورة.
كيف تعرف أنها نجحت؟
فحصان، وعلى كليهما أن يكون قادرًا على الفشل. أولًا الوصول: اجلب robots.txt الخاص بك، وطابقه مع أسماء الزواحف التي تهمّك، ثم ابحث في سجلات أسبوع عن وكيل المستخدم لكل منها. القاعدة التي تظن أنها تسمح لزاحف ادعاء عن النيّة؛ وطلبٌ من ذلك الزاحف قابع في سجلك ادعاء عن الحال. وإن لم يظهر زاحف تريده قطّ، فالعمل محجوب عند الباب ولا شيء على الصفحة يهمّ بعد.
ثانيًا الذكر نفسه. اكتب خمسة أسئلة يطرحها عميل وينبغي أن تكون أنت جوابها، واطرحها على المساعدات التي تهمّك، وسجّل إن كنت تُذكر ويُوضع رابطك. أعِد الأسئلة الخمسة نفسها كل شهر. مقياس خام يتذبذب بين الجولات، ومع ذلك هو الوحيد المرتبط بالنتيجة التي تدفع مقابلها. أما تقرير يؤكد وجود ملف فحسب فلا يمكنه أن يفشل، ولهذا بالضبط لا يُعدّ دليلًا.
اعرف ما الذي يحجب الذكر
نكتب هذه الأدلة من عمل عملاء حقيقي — GEO وSEO وإنشاءات أطلقناها. وإن أثار مقال سؤالًا حول موقعك، يسعدنا أن نُلقي نظرة عليه.
- إجابات مباشرة، دون الحاجة إلى عقد شهري
- نردّ بلغتك — EN · العربية
- مقرّنا في كندا، ونعمل حول العالم



