كيف تحسّن موقعك للبحث بالذكاء الاصطناعي (GEO) + قوالب

الخطواتافتح الباب أمام زواحف البحث

1. حدّد سياستك

   يجعلك القالب A ظاهرًا في البحث بالذكاء الاصطناعي مع الامتناع عن تدريب النماذج. أما القالب B فيرحّب بكل شيء، بما فيه زواحف التدريب، وهو السياسة التي يعتمدها maxenius.com لأقصى قدر من الظهور.

2. اكتب الملف مع تكرار القواعد المشتركة

   يلتزم الزاحف بأكثر مجموعة مطابقة تحديدًا فقط، ومواصفة Google تنص على أن المجموعات المسماة ومجموعة * لا تُدمج. لذلك كرّر كل سطر Disallow تحتاجه داخل كل مجموعة مسماة.

   User-agent: *
   Disallow: /api/
   Disallow: /cart/
   Allow: /
   
   User-agent: OAI-SearchBot
   User-agent: ChatGPT-User
   User-agent: Claude-SearchBot
   User-agent: Claude-User
   User-agent: PerplexityBot
   User-agent: Perplexity-User
   Disallow: /api/
   Disallow: /cart/
   Allow: /
   
   User-agent: GPTBot
   User-agent: ClaudeBot
   User-agent: Applebot-Extended
   User-agent: CCBot
   Disallow: /
   
   Sitemap: https://www.example.com/sitemap.xml

   User-agent: *
   Disallow: /api/
   Allow: /
   
   User-agent: OAI-SearchBot
   User-agent: ChatGPT-User
   User-agent: GPTBot
   User-agent: Claude-SearchBot
   User-agent: Claude-User
   User-agent: ClaudeBot
   User-agent: PerplexityBot
   User-agent: Perplexity-User
   User-agent: Google-Extended
   User-agent: Applebot-Extended
   Disallow: /api/
   Allow: /
   
   Sitemap: https://www.example.com/sitemap.xml

3. أبقِ آليات الملف سليمة

   ضع أسطر Disallow قبل Allow: /، لأن المحللات البسيطة مثل robotparser في Python تتوقف عند أول تطابق. وقدّم ملفًا واحدًا لكل مضيف من المسار /robots.txt. وبموجب RFC 9309، تعني استجابة 5xx أن الزواحف تفترض أن كل شيء ممنوع، وتعني 404 أن لها أن تزحف إلى كل شيء. وملف robots.txt ليس وسيلة للتحكم في الوصول. وتقول OpenAI وPerplexity كلتاهما إن التغييرات تستغرق نحو 24 ساعة لتسري.

4. افحص الطبقة التي تعلو robots.txt

   تقول OpenAI إن مضيفك أو شبكة توزيع المحتوى لديك يجب أن تسمح بنطاقات عناوين IP المنشورة لديها، وتوثّق Perplexity قواعد WAF تجمع بين وكيل المستخدم وقوائم عناوين IP. وهناك فخّان: منذ 15 سبتمبر 2026، تحظر Cloudflare الزواحف متعددة الأغراض، ومنها Googlebot وApplebot وBingBot، عندما يفعّل العميل حظر التدريب، كما أن ملف robots.txt المُدار لديها يضيف في البداية قواعد Disallow تشمل Google-Extended. وعلى Vercel، يؤدي ضبط مجموعة قواعد AI Bots على Deny إلى حظر زواحف البحث أيضًا.

5. تحقق من نجاح الخطوةتحقق من نجاح الخطوة

   نفّذ curl -s https://yourdomain.com/robots.txt وتأكد من أن الملف المنشور يطابق ما في مستودعك، فقد تعيد شبكة توزيع المحتوى كتابته. ثم ابحث في سجلات الخادم أو الشبكة عن استجابات 200 لOAI-SearchBot وClaude-SearchBot وPerplexityBot وBingbot. وانتحال وكيل المستخدم بأداة curl يختبر قواعد وكيل المستخدم فقط، ولا يختبر القواعد المبنية على عناوين IP.

الخطواتاجعل الصفحة مقروءة دون JavaScript

1. اقرأ النتائج المؤرَّخة أولًا

   في ديسمبر 2024، وجدت دراسة Vercel وMERJ أن أيًّا من زواحف الذكاء الاصطناعي الكبرى التي درستها لم يعرض JavaScript، باستثناء Gemini عبر Googlebot وApplebot. ولا يزال إرشاد Vercel لعام 2026، اجعل موقعك مقروءًا لوكلاء الذكاء الاصطناعي، ينصح بتوليد المحتوى الذي تريد قراءته على الخادم. هذه نتائج مؤرَّخة، وليست وعدًا بشأن كل زاحف. ولا تذكر OpenAI ما إذا كان OAI-SearchBot يعرض الصفحات، فاختبر بدلًا من الافتراض.

2. ولِّد الأساسيات على الخادم

   ينبغي أن يكون العنوان والنص الرئيسي وcanonical وJSON-LD وروابط التنقل في HTML الأولي. تقول Google إن ليست كل الزواحف تنفّذ JavaScript، رغم أن Googlebot يفعل ذلك عمومًا.

3. لا تخفِ الإجابات

   أبقِ الإجابات الأساسية خارج علامات التبويب المغلقة والصور وملفات PDF. وتحذّر Microsoft وBing كلتاهما من إخفاء المحتوى المهم خلف العرض من جهة العميل.

4. تحقق من نجاح الخطوةتحقق من نجاح الخطوة

   اجلب الصفحة كما يفعل زاحف لا يعرض JavaScript، مثلًا باستخدام سكربت الحزمة: ./ai-bot-check.sh https://www.example.com/page "a sentence from the body". ينبغي أن يُظهر كل صف زاحف الحالة 200، وعدد كلمات قريبًا مما تراه في المتصفح، وPHRASE = yes. تحتوي الحزمة على سكربتين: ai-bot-check.sh يختبر سبعة وكلاء مستخدم لزواحف، وcheck-ai-crawl.sh (الموضح في قسم الأطر البرمجية) يفحص عملية جلب واحدة بحثًا عن العنوان وcanonical وJSON-LD.

الخطواتاجعل كل قسم قابلًا للاقتطاف

1. ابدأ بالإجابة

   ضع الإجابة المباشرة في الجمل الأولى تحت كل عنوان، واجعل العناوين محددة. وتنصح إرشادات Bing بإبراز المعلومات الأساسية مبكرًا وتعريف الحقائق صراحةً في عنوان URL نفسه.

2. موضوع واحد لكل عنوان URL، ولا صفحات بالجملة

   لا تنشئ صفحة لكل صيغة من صيغ توسيع الاستعلام. تصف Google ذلك بأنه إساءة استخدام المحتوى الموسّع. أضف بدلًا من ذلك تفاصيل من تجربة مباشرة وغير متاحة للجميع، بدل إعادة ما يقوله غيرك.

3. لا نص مخفيًا للنماذج

   تعدّ Bing حقن المطالبات والتعليمات المخفية الموجهة للنماذج اللغوية الكبيرة إساءة قد تُنزل موقعًا أو تحذفه من الفهرس. وتقول Google إنه لا يوجد طول مثالي ولا حاجة إلى التقطيع، فاكتب للناس.

4. تحقق من نجاح الخطوةتحقق من نجاح الخطوة

   اقرأ كل قسم H2 وحده. إذا كان يجيب عن عنوانه دون الفقرة التي تسبقه، فقد نجح.

الخطواتأضف ترميزًا يقول الحقيقة

1. تحقق من المتطلب

   تقول Google إن لا حاجة إلى schema خاص لميزات الذكاء الاصطناعي، وإن الترميز يجب أن يطابق النص الظاهر. ومع ذلك استخدم Article أو BlogPosting وOrganization وProduct وBreadcrumbList حيثما انطبقت.

2. استخدم JSON-LD، واهرب منه، وأضف التواريخ

   يمكن وضع JSON-LD في head أو body، وتقرأ Google JSON-LD المحقون، لكن الزواحف التي تتجاوز JavaScript لا تستطيع ذلك. وعند تحويل JSON إلى سلسلة داخل وسم script، استبدل كل < بالتسلسل \u003c (شرطة مائلة عكسية متبوعة بu003c) حتى لا تنهي سلسلة تحتوي على وسم إغلاق script الكتلة مبكرًا. وتفعل نماذج React وNext.js وAstro أدناه ذلك. أظهر تاريخًا مرئيًا واضبط datePublished وdateModified ليطابقاه، بحسب إرشادات Google بشأن بيانات الكاتب.

3. اعتبر FAQ schema اختياريًا

   أنهت Google نتيجة FAQ المنسّقة في 7 مايو 2026. أبقِ ترميز FAQ فقط إذا كان يعكس أسئلة ظاهرة، ولا تتوقع مساحة إضافية في صفحة النتائج.

4. تحقق من نجاح الخطوةتحقق من نجاح الخطوة

   اعرض مصدر الصفحة وتأكد من أن JSON-LD موجود في HTML الخام. شغّل Rich Results Test أو Schema Markup Validator، ثم قارن كل قيمة بما يراه الزائر.

الخطواتقرّر هل تنشر llms.txt

1. اعرف ما هو llms.txt

   llms.txt ملف Markdown في جذر موقعك، اقترحه Jeremy Howard في 3 سبتمبر 2024، ونُشر له تنسيق الإصدار الثاني في أغسطس 2026. يتكون من عنوان H1 (وهو الجزء الوحيد المطلوب)، وملخص اختياري في اقتباس، وأقسام H2 تسرد الروابط بصيغة - [name](url): notes.

2. ما يفعله اليوم

   تقول Google إن البحث لديها لا يتضرر ولا يستفيد منه. ولا تذكر أي من وثائق الزواحف التي راجعناها من OpenAI وAnthropic وPerplexity وBing وApple وMeta أن زاحفها يقرأه. ولدى Lighthouse في Chrome تدقيق للتصفح الوكيلي يُصنَّف «غير منطبق» عند غياب الملف. ويذكر إرشاد Vercel لعام 2026 أن إضافة llms.txt لم تغيّر الاسترجاع حين كانت الإجابة موجودة أصلًا في HTML الخادم، وأن 86 بالمئة من عمليات الجلب المنسوبة وصلت عبر روابط الصفحات.

3. قرّر هل تنشره

   هو اختياري ورخيص، فاعتمد عليه بعد الأساسيات. وأبقِه صغيرًا. أما llms-full.txt فهو عُرف تولّده بعض منصات التوثيق، وليس جزءًا من المواصفة، وقد تبلغ ملفاته الفعلية عشرات الميغابايت. ويقدّم ملف /llms.txt الافتراضي في Shopify تعليمات للوكلاء، وهو مشروح في قسم Shopify.

   # Example Co
   
   > Example Co makes refillable cleaning products and sells them online to customers in the US and Canada.
   
   Key facts:
   - Free shipping on US orders over $50; returns accepted within 30 days.
   - Support: support@example.com, Monday to Friday.
   
   ## Products
   
   - [All products](https://www.example.com/collections/all): Full catalog with prices and stock status
   - [Refill subscriptions](https://www.example.com/pages/subscriptions): How refills are billed, paused and cancelled
   
   ## Policies
   
   - [Shipping policy](https://www.example.com/policies/shipping-policy): Carriers, delivery times and costs
   - [Refund policy](https://www.example.com/policies/refund-policy): Return window and how refunds are paid

4. تحقق من نجاح الخطوةتحقق من نجاح الخطوة

   نفّذ curl -sI https://yourdomain.com/llms.txt وتوقع الحالة 200 ونوع محتوى نصيًا. ثم الصق الملف وحده في مساعد ذكاء اصطناعي واسأله عن نشاطك.

الخطواتعرّف بنفسك مرة واحدة، وفي عنوان واحد

1. انشر ترميز Organization

   أضف JSON-LD من نوع Organization في الصفحة الرئيسية مع الاسم وurl وlogo والوصف وروابط sameAs إلى ملفاتك الحقيقية، وفق وثيقة Google الخاصة بOrganization. استخدم الاسم نفسه في كل مكان كما تطلب إرشادات Bing، وأبقِ بيانات Business Profile وBing Places وMerchant Center متسقة.

2. اختر مضيفًا واحدًا

   يجب أن تتفق وسوم canonical وقيم loc في خريطة الموقع ووجهة إعادة التوجيه. تعامل Google إعادات التوجيه وrel=canonical على أنها إشارات قوية وخريطة الموقع إشارة ضعيفة، وتنصح بعدم الإعلان عن عناوين URL مختلفة بطرق مختلفة. وتشير Bing إلى أن النماذج اللغوية الكبيرة تجمّع النسخ المتشابهة وقد تختار عنوانًا قديمًا لتمثيلها.

3. اضبط lastmod من تغييرات حقيقية

   غيّر lastmod فقط عند تغيّر المحتوى الرئيسي أو البيانات المنظمة أو الروابط، وليس إلى وقت البناء أبدًا. تتجاهل Google القيمتين priority وchangefreq، وتقول Bing الأمر نفسه. واقرنه بتاريخ مرئي وبdateModified.

4. أرسل إشعارًا عبر IndexNow لBing

   يُخطر IndexNow محرك Bing وغيره من المحركات المشاركة بالتغييرات. وGoogle ليست مشاركة. واستجابة HTTP 200 تعني أن عنوانك استُلم، لا أنه فُهرس.

5. تحقق من نجاح الخطوةتحقق من نجاح الخطوة

   نفّذ curl -sI https://example.com/page | grep -i -E '^HTTP/|^location' لكل صيغة من صيغ المضيف، ثم قارن وجهة إعادة التوجيه بcanonical الصفحة وبإدخالها في خريطة الموقع. يجب أن تكون الثلاثة عنوان URL واحدًا.

الخطواتإعداد WordPress للبحث بالذكاء الاصطناعي

1. تأكد من أن المحتوى في HTML

   افتح صفحة رئيسية، واختر View Source (وليس Inspect)، وابحث عن جملة من النص. أو نفّذ curl -s https://example.com/page/ | grep -i "a sentence from the page". تُولِّد السمات ومنشئو الصفحات الشائعون المحتوى على الخادم، لكن المحتوى الموجود في علامات تبويب AJAX والعارضات الشريطية وأدوات «تحميل المزيد» قد لا يكون موجودًا.

   تأكد من أن التنقل يستخدم روابط <a href> حقيقية، لأن Google لا تستطيع الزحف إلا إلى الروابط المبنية بهذه الطريقة. ثم افتح Settings > Reading وتأكد من أن خيار «Search engine visibility» غير مفعّل. فعند تفعيله، تضيف نسخ WordPress الحالية وسم robots meta بقيمة noindex إلى كل صفحة، بدلًا من سطر Disallow في robots.txt.

   الفحص: تظهر جملتك في مخرجات curl، ويعيد curl -s https://example.com/ | grep -i noindex نتيجة فارغة.

2. تحكّم في robots.txt

   في غياب ملف فعلي، يبني WordPress ملف robots.txt افتراضيًا ويمرره عبر المرشّح robots_txt. والملف robots.txt الفعلي في جذر الموقع يتجاوز هذا المرشّح وكل محررات الإضافات في الجدول، ومحرر الملفات في Yoast ينشئ ملفًا كهذا تمامًا. اعرف في أي حالة أنت قبل تعديل أي شيء.

   إذا أردت مجموعة صريحة للذكاء الاصطناعي، فاستخدم إضافة mu-plugin المسماة geo-robots.php أدناه. وهي تكرر قواعد المسؤول داخل المجموعة، لأنه بموجب RFC 9309 لا يلتزم الزاحف الذي يجد مجموعة تسميه إلا بتلك المجموعة.

   أبقِ خيار Block AI Crawlers في AIOSEO وBot blocker في Yoast Premium معطّلين إذا أردت الظهور في البحث بالذكاء الاصطناعي. وإذا كان الموقع خلف Cloudflare، فافحص ملف robots.txt المُدار لديها، فهو يضيف قواعد Disallow فوق ملفك.

   الفحص: يُظهر curl -s https://example.com/robots.txt القواعد التي تتوقعها. وتقول OpenAI إن التغييرات قد تستغرق نحو 24 ساعة لتصل إلى بحث ChatGPT.

3. قرّر أي الزواحف تسمح لها

   زواحف البحث والاستشهاد هي OAI-SearchBot وClaude-SearchBot وPerplexityBot. أما زواحف التدريب مثل GPTBot وClaudeBot فقرار منفصل، وحظرها لا يُخرجك من بحث ذلك المزوّد. جدول المزوّدين الكامل في قسم الأسس.

   الفحص: لا يرد اسم أي زاحف تريده في البحث ضمن مجموعة Disallow.

4. انشر llms.txt من مصدر واحد فقط

   اختر ميزة الإضافة من الجدول، أو استخدم geo-llms-txt.php إن لم تكن لديك إضافة. لا تشغّل مصدرين أبدًا. فYoast لن يكتب فوق ملف موجود، وقد يحجب الملف الثابت ملفًا ديناميكيًا من إضافة أخرى.

   العائد غير مؤكد، كما في قسم llms.txt. وتقول وثائق Rank Math نفسها إن الاعتماد عليه محدود. وكلفته قليلة، فاعتبره فهرسًا مرتبًا لأفضل صفحاتك.

   الفحص: يعيد curl -sI https://example.com/llms.txt الحالة 200، ويبدأ المحتوى ب# Your site name.

5. أضف البيانات المنظمة عبر إضافتك

   لا تلصق كتلة Organization ثانية. يُخرج Yoast مخططًا مترابطًا واحدًا (@graph) ويتيح مرشّحات مثل wpseo_schema_organization (Schema API). اضبط الاسم والشعار والملفات أولًا في Yoast SEO > Settings > Site representation. ويتيح Rank Math توسيع الناشر عبر rank_math/json_ld. وفي غياب إضافة، استخدم geo-schema.php.

   الفحص: نفّذ curl -s https://example.com/ | grep -c 'application/ld+json'، ثم الصق كل كتلة في validator.schema.org وتأكد من وجود عقدة Organization واحدة.

6. أكمل بيانات الكاتب والكيان

   أكمل Users > Profile (الاسم المعروض والنبذة والموقع) لأن إضافات SEO تقرأ بيانات الكاتب منه. وبحسب إرشادات Google لArticle، يحمل author.name الاسم فقط، ويشير author.url إلى صفحة تعرّف بالكاتب تعريفًا فريدًا. أما للشركة فإن ترميز Organization مكانه الصفحة الرئيسية أو صفحة «من نحن»، وتوصي Google بتضمين name وurl وlogo وsameAs وبيانات الاتصال.

   الفحص: يرتبط اسم الكاتب أسفل المقال بصفحة كاتب، ويُظهر مصدر الصفحة الاسم نفسه في JSON-LD الخاص بArticle.

7. اربط داخليًا بنصوص رابط وصفية

   من كل صفحة محورية (الخدمات أو التصنيف أو الدليل) اربط بصفحات التفاصيل بنص رابط يصف الهدف. فعبارة «قائمة إعداد WooCommerce لدينا» تخبر الزاحف أكثر من «اقرأ المزيد».

   الفحص: لكل صفحة مهمة رابط نصي واحد على الأقل يشير إليها من صفحة أخرى.

8. شغّل مولّد خريطة موقع واحدًا

   استخدم النواة أو Yoast أو Rank Math أو AIOSEO، وليس أكثر من واحد. أرسل العنوان في Google Search Console وBing Webmaster Tools. وتطلب Bing قيم lastmod دقيقة بصيغة ISO 8601 مع التاريخ والوقت.

   الفحص: يفتح عنوان خريطة الموقع من الجدول، ولا تتغير قيمة lastmod إلا حين تعدّل صفحة فعلًا.

9. فعّل IndexNow، بمرسِل واحد

   اختر إضافة IndexNow الرسمية أو Instant Indexing من Rank Math أو AIOSEO أو Yoast Premium. تشغيل أكثر من واحدة يكرر الإرسال. وIndexNow يشارك العناوين المرسلة مع كل المحركات المشاركة.

   الفحص: انشر مقالًا تجريبيًا وابحث عنه في قائمة عمليات الإرسال الأخيرة في الإضافة.

10. أكمل بيانات منتجات WooCommerce

    لكل منتج، املأ Product data > Inventory > SKU وحقل «GTIN, UPC, EAN, or ISBN»، واكتب وصفًا مختصرًا حقيقيًا. يُخرج WooCommerce 11.1.2 ترميز Product بصيغة JSON-LD يتضمن sku وgtin وoffers والتقييمات، ويتيح توسيعه عبر woocommerce_structured_data_product. ويضيف ملف المرشّحات أدناه علامة تجارية (brand). وإذا كانت إضافة SEO تُخرج Product أيضًا، فقارن الكتلتين.

    يخطط WooCommerce في الفرع الرئيسي لإضافة ترميز OnlineStore وMerchantReturnPolicy في إصدار لاحق (موسوم 11.3.0)، فهو غير موجود في 11.1.2.

    الفحص: اعرض مصدر صفحة منتج وتأكد من وجود عقدة Product واحدة فقط تحتوي على GTIN الخاص بك.

11. تحقق من نجاح الخطوةتحقق من كل شيء من الطرفية

    استبدل النطاق والعبارة، ثم نفّذ الأوامر الأربعة:

    يعرض curl -s https://example.com/robots.txt المجموعات التي تقصدها وسطر Sitemap.

    يعيد curl -sI https://example.com/llms.txt الحالة 200 والنوع text/plain.

    يعيد curl -s https://example.com/ | grep -c 'application/ld+json' عدد الكتل التي تتوقعها.

    يعثر curl -s https://example.com/some-page/ | grep -i "a sentence from the body" على نصك.

الخطواتإعداد متجر Shopify للبحث بالذكاء الاصطناعي

1. افحص ما يقدّمه متجرك أصلًا

   افتح هذه العناوين الأربعة في متجرك ودوّن ما تراه: /robots.txt و/llms.txt و/agents.md و/sitemap.xml.

   لا تتوقع أن يطابق ملف robots.txt لديك ملف أي متجر آخر. ففي 7 أكتوبر 2026 رأينا متاجر أحدث تقدّم ملفًا افتراضيًا تشير تعليقاته الوكلاء إلى /agents.md، ومتاجر أخرى لا تزال تقدّم الملف الافتراضي الأقدم بمجموعات إضافية لأدوات مثل Nutch وAhrefsBot وPinterest. وكلاهما يترك زواحف الذكاء الاصطناعي تحت *.

   ملف /llms.txt الافتراضي مجموعة تعليمات للوكلاء (اكتشاف UCP، ونقطة نهاية MCP، ونقاط نهاية JSON للقراءة فقط، وروابط السياسات). وهو ليس فهرسًا منتقى لمحتواك. ثم مرّر عنوان منتج واحد عبر Rich Results Test من Google.

2. راجع واجهات المتاجر الوكيلية (Agentic storefronts)

   في لوحة الإدارة، انتقل إلى Sales channels > Agentic. وبحسب مساعدة Shopify، فهذه الميزة مفعّلة افتراضيًا للمتاجر المؤهلة، وتتطلب الموافقة على الشروط التكميلية لواجهات المتاجر الوكيلية (Agentic Storefronts Supplemental Terms). وتسرد Shopify حاليًا ChatGPT وMicrosoft Copilot وGoogle AI Mode وGemini وMeta.

   ما تحتاجه كل قناة:

   • ChatGPT: هو مصدر إحالة للاكتشاف. يُتمّ المتسوقون الدفع في متجرك أنت. ويجب أن يبيع متجرك لعملاء في الولايات المتحدة، وإن كان مقره في مكان آخر.
   • Copilot وGoogle: كلاهما يقدّم دفعًا مدعومًا من Shopify داخل المحادثة للمتاجر الأمريكية المؤهلة، وكلاهما يتطلب استكمال سياسات المتجر. وتحتاج Google أيضًا إلى حساب Merchant Center، مع مزامنة المنتجات عبر قناة Google وYouTube.
   • Shopify Catalog: بحسب صفحة المتطلبات، تحتاج إلى خطة Starter أو أعلى ومتجر ليس في الوضع الخاص. ويحتاج كل منتج إلى عنوان وصورة واحدة على الأقل وسعر أكبر من صفر ونشر في قناة لها عنوان URL. ولا تتأهل المنتجات غير المدرجة أو المخفية عن البحث.

   استخدم معاينة البحث في تلك الشاشة. فهي تقيّم كل منتج من حيث اكتمال الوصف وتغطية الصور والمراجعات وبيانات المتغيرات والسياسات. وقد يستغرق إيقاف وصول ChatGPT إلى الكتالوج ما يصل إلى 7 أيام ليسري.

3. أصلح بيانات منتجاتك

   هنا يتحقق معظم المكسب. تغطي صفحة Shopify تحسين المنتجات لمنصات الذكاء الاصطناعي العنوان والوصف والصور والنوع والمورّد والمجموعات والوسوم والباركود وأسماء خيارات المتغيرات والسياسات. والبنود 1 و3 و4 و9 أدناه توصيات منا، مع المصادر حيث توفرت:

   1. العنوان: محدد، ويتضمن نوع المنتج والخاصية الرئيسية والعلامة التجارية. أبقِ عنوان SEO قريبًا من 60 حرفًا.
   2. الوصف: أجب عما يسأل عنه المشترون (المواد والأبعاد ولمن هو والعناية).
   3. الصور: عدة صور، لكل منها نص بديل وصفي.
   4. الفئة: اضبطها ضمن Products > (your product) > Category من تصنيف المنتجات القياسي، ثم املأ الحقول الوصفية (metafields) للفئة.
   5. النوع والمورّد والمجموعات والوسوم: املأ الأربعة جميعًا.
   6. الباركود: ISBN أو UPC أو GTIN لكل متغير يحمل واحدًا.
   7. أسماء خيارات المتغيرات: «Size» و«Color»، وليس «Option 1».
   8. السياسات: الاسترداد والخصوصية والشروط والشحن، مكتملة.
   9. المراجعات: تحتسبها معاينة البحث. ولا يُظهر مثال structured_data على shopify.dev أي aggregateRating، فافحص JSON-LD المعروض الصادر عن تطبيق المراجعات لديك.
   10. تطبيق Knowledge Base (اختياري): تراجع فيه حقائق المتجر المولَّدة تلقائيًا وتكتب إجابات الأسئلة الشائعة لمنصات الذكاء الاصطناعي. وتقول Shopify إن هذه الإجابات لا تظهر في واجهة متجرك وإن التطبيق لا يغيّر عدد مرات ظهورك في نتائج الذكاء الاصطناعي.

4. خصّص llms.txt بقالب داخل السمة (اختياري)

   انتقل إلى Online Store > Themes > … > Edit code، ثم أضف قالبًا في مجلد templates. وبحسب وثائق agents.md.liquid، يغطي agents.md.liquid العناوين الثلاثة جميعًا، بينما يغطي llms.txt.liquid ذلك العنوان وحده. تبحث Shopify عن القالب الخاص بالمسار، ثم agents.md.liquid، ثم الافتراضي لديها.

   لا يوجد في هذه القوالب إلا الكائنان request وagents. ولا يمكنك المرور على المجموعات أو المقالات في حلقة، فاكتب روابطك يدويًا وأبقها محدّثة. أبقِ سطري UCP وMCP ديناميكيين عبر agents.* ولا تكتبهما ثابتين، ولا تُخرج أبدًا بيانات خاصة كالبريد الإلكتروني أو الهاتف.

   لا تعمل إعادات التوجيه ولا الملفات ولا وكلاء التطبيقات (app proxies) مع هذا الملف. فإعادات توجيه URL تعمل فقط على العناوين المعطوبة، والعنوان /llms.txt يعيد الآن 200. والملفات المرفوعة (Files) لا تُقدَّم من الجذر. ووكلاء التطبيقات لا تعمل إلا تحت /a و/apps و/community و/tools. القالب هو الطريق المدعوم.

   اعتبر هذا الملف مجاملة للوكلاء، وليس أداة للتأثير في الترتيب، فبحث Google لا يستخدم llms.txt.

5. لا تلمس robots.txt.liquid إلا إذا اضطررت إلى تغيير الوصول

   انتقل إلى Online Store > Themes > … > Edit code > Add a new template > robots > Create template. تصف Shopify هذا بأنه غير مدعوم، ولا يستطيع الدعم مساعدتك فيه، وتحذّر من أن خطأً واحدًا قد يكلفك كل الزيارات. انسخ ملف /robots.txt الحالي إلى مكان آمن أولًا. وحذف القالب يعيد الإعداد الافتراضي.

   أبقِ حلقة Shopify الافتراضية وأضف مجموعات نصية عادية حولها. والسبب المعتاد هو الامتناع عن تدريب النماذج، مثل GPTBot. وتوثّق OpenAI أن GPTBot وOAI-SearchBot مستقلان، فحظر GPTBot لا يُخرجك من بحث ChatGPT.

   لا تضف مجموعات Allow للترحيب بزواحف الذكاء الاصطناعي. انظر المزلق الأول أدناه.

6. اترك ترميز Product للقالب وأثرِ ما سواه

   يُخرج Dawn 16.0.0 وHorizon أصلًا {{ product | structured_data }} و{{ article | structured_data }}. لا تضف كتلة Product ثانية مكتوبة يدويًا. فكيانان لمنتج واحد يتعارضان.

   ولتقوية بيانات Organization، املأ روابط التواصل الاجتماعي ضمن Theme settings > Social media وارفع شعارًا. وفي ترويسة Dawn تغذّي هذه القيم sameAs، وتُعرض الإعدادات الفارغة كسلاسل فارغة. أما لصفحة أسئلة شائعة ظاهرة، فأضف قسم faq-schema.liquid أدناه مستخدمًا المرشّح | json، وللأسئلة الموجودة في الصفحة فقط.

7. انشر محتوى يجيب عن أسئلة المشترين

   اكتب أدلة شراء ومقارنات ضمن Content > Blog posts واربطها بالمنتجات والمجموعات. أعطِ كل مجموعة وصفًا حقيقيًا مع عنوان SEO خاص بها (توصي Shopify بما لا يزيد على 60 حرفًا) ووصفًا بنحو 160 حرفًا. وضع أسئلة شائعة ظاهرة في صفحة ضمن Online Store > Pages، ثم اربطها من llms.txt.liquid.

8. تحقق من نجاح الخطوةتحقق من نجاح الخطوة

   نفّذ هذه الأوامر من الطرفية، مستبدلًا النطاق ومعرّف المنتج (handle):

   يُفترض أن يُظهر curl -sI https://yourstore.com/llms.txt | head -n 5 الحالة 200، وأن يُظهر طلب GET محتواك المعدّل.

   يُفترض أن يُظهر curl -s https://yourstore.com/llms.txt | head -n 20 عناوينك وروابطك.

   يُفترض أن يعيد كل من curl -sI https://yourstore.com/agents.md وcurl -sI https://yourstore.com/sitemap.xml الحالة 200.

   يُفترض أن يظل curl -s https://yourstore.com/robots.txt محتويًا على قواعد منع السلة والدفع تحت *.

   يُفترض أن يُظهر curl -s https://yourstore.com/products/your-handle | grep -oE '"@type" ?: ?"(Product|ProductGroup)"' | sort | uniq -c كيانًا واحدًا.

   أعد فحص معاينة البحث الوكيلي (Agentic) بعد ذلك.

الخطواتاجعل تطبيق React SPA مقروءًا دون JavaScript

1. شخّص عبر عرض المصدر

   افتح صفحتك الرئيسية، واختر View Source (وليس DevTools) وابحث عن عنوانك الرئيسي. إذا وجدت div id="root" فارغًا فالزواحف التي لا تعرض JavaScript لا تحصل على شيء. ثم شغّل check-ai-crawl.sh أعلاه وابحث عن «Phrase in raw HTML: YES».

2. اختر حلًا بهذا الترتيب

   1. وضع إطار React Router مع prerender وssr: false. تقول وثائقه إن التوليد المسبق مفيد لSEO، خاصة في عمليات النشر دون عرض على الخادم.
   2. الانتقال إلى Next.js، وهو الموضوع التالي.
   3. لموقع تسويقي غني بالمحتوى: Astro مع جزر React.
   4. توليد مسبق مخصص بreact-dom/static. يعمل لكنه منخفض المستوى، والأطر البرمجية تستدعيه عادةً نيابةً عنك.

   تجنّب العرض الديناميكي. فقد أُوقف Create React App للتطبيقات الجديدة منذ 14 فبراير 2025. وراجع وثائق React Router للإصدار الذي ثبّتّه، لأن خيارات التوليد المسبق موثّقة لكل إصدار.

3. ولِّد مسبقًا كل عنوان محتوى، بما فيه المعرّفات النصية (slugs)

   يتجاوز prerender: true المسارات الديناميكية مثل /blog/:slug. استخدم صيغة الدالة وأضف المعرّفات بنفسك.

   import type { Config } from '@react-router/dev/config'
   import { getPostSlugs } from './app/lib/posts'
   
   export default {
   // No runtime server: every listed URL becomes a static HTML file at build time.
   ssr: false,
   async prerender({ getStaticPaths }) {
     const slugs = await getPostSlugs()
     return [...getStaticPaths(), ...slugs.map((s) => '/blog/' + s)]
   },
   } satisfies Config

4. ضع وسوم head في مكوّن المسار

   يوصي React Router بالعناصر المدمجة title وmeta وlink بدلًا من تصدير meta في وحدة المسار. وينقلها React 19 إلى head المستند. وفي بنائنا انتهت في head الملف المولَّد مسبقًا. أضف JSON-LD في المكوّن نفسه واهرب من <، لأن JSON.stringify يترك </script> كما هو.

   import { data, useLoaderData } from 'react-router'
   import { getPost } from '../lib/posts'
   
   const SITE_URL = 'https://www.example.com'
   
   // With prerendering, this loader runs at build time, so the post is in the HTML file.
   export async function loader({ params }: { params: { slug?: string } }) {
   const post = await getPost(params.slug ?? '')
   if (!post) throw data('Not found', { status: 404 })
   return { post }
   }
   
   export default function BlogPost() {
   const { post } = useLoaderData<typeof loader>()
   const url = SITE_URL + '/blog/' + post.slug
   const article = {
     '@context': 'https://schema.org',
     '@type': 'Article',
     headline: post.title,
     description: post.description,
     datePublished: post.publishedAt,
     mainEntityOfPage: url,
   }
   return (
     <article>
       <title>{post.title}</title>
       <meta name="description" content={post.description} />
       <link rel="canonical" href={url} />
       <script
         type="application/ld+json"
         dangerouslySetInnerHTML={{ __html: JSON.stringify(article).replace(/</g, '\u003c') }}
       />
       <h1>{post.title}</h1>
       <p>{post.body}</p>
     </article>
   )
   }

5. انشر مع بديل ضيق النطاق

   قدّم build/client. وأعد كتابة المسارات التي لم تولّدها مسبقًا فقط إلى __spa-fallback.html. هذه الإعادة تردّ 200 على كل عنوان مجهول، فأبقِ خريطة موقعك دقيقة. وفي بيانات Vercel لعام 2024 رأت زاحف ChatGPT يصرف حصة كبيرة من عمليات الجلب على أخطاء 404، لذلك فالعناوين المعطوبة أو الشاردة تكلّفك.

6. تحقق من نجاح الخطوةتحقق من نجاح الخطوة

   ينبغي أن يطبع سجل البناء سطرًا مثل Prerender (html): /blog/hello-geo -> build/client/blog/hello-geo/index.html. افتح ذلك الملف وتأكد من وجود العنوان وcanonical ونص المقال فيه، ثم شغّل check-ai-crawl.sh على العنوان المنشور. المطلوب هو Phrase in raw HTML: YES.

الخطواتأرسل نص الإجابة والبيانات الوصفية في الاستجابة الأولى

1. أبقِ نص الإجابة في مكوّنات الخادم

   الصفحات والتخطيطات مكوّنات خادم افتراضيًا. وتُولَّد مكوّنات العميل مسبقًا أيضًا، لكن البيانات المحمّلة في useEffect ليست في ذلك HTML. وفي اختبارنا على 16.4.0، أرسلت صفحة 'use client' تحمّل نصها في effect ملف HTML لا يحتوي إلا على «Loading…». استخدم مكوّنات العميل للتفاعل، وليس للإجابة.

2. اضبط البيانات الوصفية الجذرية بmetadataBase

   في app/layout.tsx، صدّر metadata مع metadataBase: new URL(SITE_URL) وقالب للعنوان وalternates.canonical وopenGraph. وتصديرات البيانات الوصفية لا تعمل إلا في مكوّنات الخادم.

3. استخدم generateMetadata وgenerateStaticParams

   params هو Promise في الإصدارات الحالية. وتوليد المقالات مسبقًا يعني أن البيانات الوصفية والمقال كاملًا موجودان في HTML الأولي، ويظهر المسار على أنه SSG في جدول البناء.

   import type { Metadata } from 'next'
   import { notFound } from 'next/navigation'
   import { getPost, getPosts } from '@/lib/posts'
   import { SITE_URL } from '@/lib/site'
   import { jsonLd } from '@/lib/json-ld'
   
   type Props = { params: Promise<{ slug: string }> }
   
   // Prerender every post at build time so the full article is in the HTML response.
   export async function generateStaticParams() {
   return (await getPosts()).map((p) => ({ slug: p.slug }))
   }
   
   export async function generateMetadata({ params }: Props): Promise<Metadata> {
   const { slug } = await params
   const post = await getPost(slug)
   if (!post) return {}
   return {
     title: post.title,
     description: post.description,
     alternates: { canonical: '/blog/' + post.slug },
   }
   }
   
   export default async function Page({ params }: Props) {
   const { slug } = await params
   const post = await getPost(slug)
   if (!post) notFound()
   
   const article = {
     '@context': 'https://schema.org',
     '@type': 'Article',
     headline: post.title,
     datePublished: post.publishedAt,
     dateModified: post.updatedAt ?? post.publishedAt,
     mainEntityOfPage: SITE_URL + '/blog/' + post.slug,
   }
   
   return (
     <article>
       <script type="application/ld+json" dangerouslySetInnerHTML={{ __html: jsonLd(article) }} />
       <h1>{post.title}</h1>
       <div>{post.body}</div>
     </article>
   )
   }

4. اعرض JSON-LD كوسم script أصلي ومُهرَّب

   يقول دليل JSON-LD في Next.js إن عليك استخدام وسم script عاديًا، وليس next/script، واستبدال < بتهريبه بصيغة unicode لأن JSON.stringify لا ينقّي المدخلات. ضع ذلك في دالة مساعدة واحدة.

   // JSON.stringify does not escape "<", so "</script>" inside a value would end the tag early.
   export function jsonLd(data: object): string {
   return JSON.stringify(data).replace(/</g, '\u003c')
   }

5. اكتب robots.ts مع تكرار قواعد المنع

   يقبل app/robots.ts مصفوفة في userAgent. ويلتزم الزاحف بأكثر مجموعة مطابقة تحديدًا فقط، فكرّر قواعد المنع. وعامل زواحف التدريب على أنها قرار منفصل عن زواحف البحث.

   import type { MetadataRoute } from 'next'
   import { SITE_URL } from '@/lib/site'
   
   export default function robots(): MetadataRoute.Robots {
   return {
     rules: [
       { userAgent: '*', allow: '/', disallow: ['/api/', '/account/'] },
       {
         userAgent: [
           'OAI-SearchBot', 'ChatGPT-User', 'Claude-SearchBot', 'Claude-User',
           'PerplexityBot', 'Perplexity-User', 'GPTBot', 'ClaudeBot', 'Google-Extended',
         ],
         allow: '/',
         disallow: ['/api/', '/account/'],
       },
     ],
     sitemap: SITE_URL + '/sitemap.xml',
   }
   }

6. اكتب sitemap.ts بقيمة lastModified حقيقية

   تتجاهل Google القيمتين priority وchangefreq ولا تستخدم lastmod إلا إذا كانت دقيقة باستمرار. خذ التاريخ من المحتوى، وليس من new Date() أبدًا.

   import type { MetadataRoute } from 'next'
   import { getPosts } from '@/lib/posts'
   import { SITE_URL } from '@/lib/site'
   
   export default async function sitemap(): Promise<MetadataRoute.Sitemap> {
   const posts = await getPosts()
   return [
     { url: SITE_URL, lastModified: '2026-10-01' },
     ...posts.map((p) => ({
       url: SITE_URL + '/blog/' + p.slug,
       lastModified: p.updatedAt ?? p.publishedAt,
     })),
   ]
   }

7. قدّم llms.txt من معالج مسار

   معالجات مسارات GET لا تُخزَّن مؤقتًا افتراضيًا، فأضف force-static. وإذا فعّلت cacheComponents فاحذف ذلك السطر: فالخيار يُزال في ذلك الوضع، ويُولَّد المعالج الذي لا يقرأ بيانات الطلب مسبقًا. ابنِ القائمة من دالة المقالات نفسها التي تستخدمها الصفحات.

   import { getPosts } from '@/lib/posts'
   import { SITE_NAME, SITE_URL } from '@/lib/site'
   
   // Delete this line if cacheComponents is enabled.
   export const dynamic = 'force-static'
   
   export async function GET() {
   const posts = await getPosts()
   const body = [
     '# ' + SITE_NAME,
     '',
     '> One or two sentences: what you do, for whom, and where.',
     '',
     '## Guides',
     ...posts.map((p) => '- [' + p.title + '](' + SITE_URL + '/blog/' + p.slug + '): ' + p.description),
     '',
   ].join('\n')
   
   return new Response(body, { headers: { 'Content-Type': 'text/plain; charset=utf-8' } })
   }

   ينطبق التنبيه السابق نفسه: هذا الملف مكمّل لHTML الخادم، وليس بديلًا عنه.

8. تعامل مع المسارات وقت الطلب: فخ htmlLimitedBots

   المسارات التي تقرأ ملفات تعريف الارتباط أو الترويسات أو بيانات غير مخزنة مؤقتًا تُعرض وقت الطلب. ومنذ Next.js 15.2، تُبَثّ مخرجات generateMetadata فيها إلى body لأي زاحف ليس في قائمة الزواحف المحدودة بHTML. قرأنا القائمة الافتراضية في الشيفرة المصدرية ولا تضم أي زاحف ذكاء اصطناعي. وفي اختبارنا على 16.4.0، حصل GPTBot وClaudeBot على title في body افتراضيًا، وفي head بعد أن أضفناهما.

   ضبط الخيار يستبدل القائمة الافتراضية، فانسخ الافتراضية وأضف إليها زواحف الذكاء الاصطناعي. أعد فحص النسخة عند كل ترقية لNext.js. ولا تتأثر الصفحات المولَّدة مسبقًا كاملةً. وتقول وثائق Next.js إن البث لا يضر بSEO؛ وهذا القول يخص Google التي تنفّذ JavaScript، فلا تعمّمه على زواحف الذكاء الاصطناعي.

   import type { NextConfig } from 'next'
   
   // Copied from the Next.js default (canary html-bots.ts, October 2026). Re-check on upgrade.
   const NEXT_DEFAULT = String.raw`[\w-]+-Google|Google-[\w-]+|Chrome-Lighthouse|Slurp|DuckDuckBot|baiduspider|yandex|sogou|bitlybot|tumblr|vkShare|quora link preview|redditbot|ia_archiver|Bingbot|BingPreview|applebot|facebookexternalhit|facebookcatalog|Twitterbot|LinkedInBot|Slackbot|Discordbot|WhatsApp|SkypeUriPreview|Yeti|googleweblight`
   const AI_CRAWLERS = 'GPTBot|OAI-SearchBot|ChatGPT-User|ClaudeBot|Claude-SearchBot|Claude-User|PerplexityBot|Perplexity-User'
   
   const nextConfig: NextConfig = {
   htmlLimitedBots: new RegExp(NEXT_DEFAULT + '|' + AI_CRAWLERS, 'i'),
   }
   
   export default nextConfig

9. قرّر هل تحتاج إلى التصدير الثابت

   مع output: 'export'، يكتب Next.js ملفات HTML إلى out/ ويجب أن تكون معالجات المسارات force-static لتُولَّد مسبقًا. وهذا يناسب موقعًا تعريفيًا مستضافًا على تخزين بسيط.

10. تحقق من نجاح الخطوةتحقق من نجاح الخطوة

    في جدول المسارات الناتج عن next build، ينبغي أن تظهر مسارات المحتوى ثابتة أو SSG، وليس ديناميكية. ثم اجلب /robots.txt و/sitemap.xml و/llms.txt (ويُفترض أن يعيد الأخير text/plain; charset=utf-8) وشغّل check-ai-crawl.sh على مقال واحد. وينبغي أن يعيد معرّف مجهول الحالة 404.

الخطواتأضف ملفات مقروءة للذكاء الاصطناعي إلى موقع Astro

1. أبقِ نص الإجابة خارج client:only

   المكوّنات التي لا تحمل توجيه client:* تُعرض كHTML عادي. أما client:only فهو يتخطى العرض على الخادم كليًا، فلا تضع نص الإجابة في مكوّن كهذا أبدًا.

2. أضف مكوّن JSON-LD يهرّب المدخلات

   لا يهرّب Astro قيمة set:html، ويترك JSON.stringify الوسم </script> كما هو. وفي اختبارنا على Astro 7.0.5، أنهى وصف يحتوي على </script> الكتلة مبكرًا وفشل تحليل JSON. وأصلح تهريب < المشكلة. ولا يعالج Astro وسم script الذي له سمات غير src، فتُخرج الكتلة كما كُتبت.

   ---
   interface Props {
   data: Record<string, unknown>;
   }
   const { data } = Astro.props;
   const json = JSON.stringify(data).replace(/</g, '\u003c');
   ---
   <script type="application/ld+json" set:html={json} />

3. ولِّد llms.txt من مجموعة المحتوى

   تبني نقطة نهاية ملف ثابتة في src/pages/llms.txt.ts العنوان /llms.txt وقت البناء. والقراءة من getCollection() تعني أنه لا يمكن أن ينحرف عن الصفحات المنشورة.

   import type { APIRoute } from 'astro';
   import { getCollection } from 'astro:content';
   
   export const GET: APIRoute = async ({ site }) => {
   const url = (path: string) => new URL(path, site).href;
   const posts = (await getCollection('blog', ({ data }) => !data.draft)).sort(
     (a, b) => b.data.publishDate.getTime() - a.data.publishDate.getTime(),
   );
   
   const body = [
     '# Example Co',
     '',
     '> One or two sentences: what you do, for whom, and where.',
     '',
     '## Guides',
     ...posts.map((p) => '- [' + p.data.title + '](' + url('/blog/' + p.id) + '): ' + p.data.description),
     '',
   ].join('\n');
   
   return new Response(body, { headers: { 'Content-Type': 'text/plain; charset=utf-8' } });
   };

4. اختر مصدرًا واحدًا لrobots.txt

   استخدم public/robots.txt أو نقطة نهاية، وليس كليهما. يمكن لنقطة النهاية إعادة استخدام site وتكرار القواعد في مجموعة الذكاء الاصطناعي، كما تبيّن وثائق تكامل خريطة الموقع لخرائط المواقع.

   import type { APIRoute } from 'astro';
   
   const AI_AGENTS = [
   'OAI-SearchBot', 'ChatGPT-User', 'Claude-SearchBot', 'Claude-User',
   'PerplexityBot', 'Perplexity-User', 'GPTBot', 'ClaudeBot', 'Google-Extended',
   ];
   
   export const GET: APIRoute = ({ site }) => {
   const sitemapURL = new URL('sitemap-index.xml', site);
   const rules = 'Allow: /\nDisallow: /api/';
   return new Response(
     [
       'User-agent: *\n' + rules,
       // A crawler that matches a named group ignores the * group, so repeat the rules.
       AI_AGENTS.map((ua) => 'User-agent: ' + ua).join('\n') + '\n' + rules,
       'Sitemap: ' + sitemapURL.href,
       '',
     ].join('\n\n'),
   );
   };

5. اضبط lastmod في خريطة الموقع من frontmatter، لملفات .md و.mdx

   يحتاج @astrojs/sitemap إلى الخيار site ولا يستطيع سرد المسارات الديناميكية المعروضة على الخادم (SSR). استخدم serialize() لضبط lastmod من كل مقال. وطابق الامتدادين معًا، وإلا فإن تحويل مقال إلى MDX يُسقط تاريخه بصمت. اكتشفنا هذا في موقعنا نحن.

   import { defineConfig } from 'astro/config';
   import sitemap from '@astrojs/sitemap';
   import { readdirSync, readFileSync } from 'node:fs';
   
   const postDates = Object.fromEntries(
   readdirSync('./src/content/blog')
     .filter((f) => /\.mdx?$/.test(f))
     .map((f) => {
       const fm = readFileSync('./src/content/blog/' + f, 'utf8').split('---')[1] ?? '';
       const date = fm.match(/^updatedDate:\s*(\S+)/m)?.[1] ?? fm.match(/^publishDate:\s*(\S+)/m)?.[1];
       return ['/blog/' + f.replace(/\.mdx?$/, ''), date];
     }),
   );
   
   export default defineConfig({
   site: 'https://www.example.com',
   integrations: [
     sitemap({
       serialize(item) {
         const path = new URL(item.url).pathname.replace(/\/$/, '');
         const date = postDates[path];
         if (date) item.lastmod = new Date(date).toISOString();
         return item;
       },
     }),
   ],
   });

6. اربط الملف ليجده الوكلاء

   أضف link rel="alternate" type="text/plain" href="/llms.txt" أو رابطًا في التذييل. وتستخدم مواصفة llms.txt v2 القيمة rel="describedby" لهذا الغرض.

7. تحقق من نجاح الخطوةتحقق من نجاح الخطوة

   نفّذ npx astro build. وافتح dist/llms.txt وdist/robots.txt وdist/sitemap-0.xml وملفًا واحدًا هو dist/blog/your-post/index.html. وبعد النشر، شغّل check-ai-crawl.sh على العنوان الحي وابحث عن «Phrase in raw HTML: YES».

الخطواتقِس ظهورك في البحث بالذكاء الاصطناعي

1. افصل مرات الظهور عن ميزات الذكاء الاصطناعي

   ابدأ من هنا في أي صفحة لها مرات ظهور عالية ونقرات تكاد تكون معدومة.

   1. في Search Console، افتح Performance، وصفِّ Page على عنوانك، ودوّن مرات الظهور والنقرات ونسبة النقر ومتوسط الموضع.
   2. افتح تقرير أداء الذكاء الاصطناعي التوليدي، وانتقل إلى تبويب Pages، وابحث عن العنوان نفسه.
   3. قارن عددي مرات الظهور. تقرير الذكاء الاصطناعي مجموعة جزئية من Web، فلا تجمعهما أبدًا. وإذا كانت ميزات الذكاء الاصطناعي تمثل معظم مرات الظهور، فالموضع الجيد مع نسبة نقر منخفضة متوقع، لأن كل الروابط في AI Overviews تتشارك موضعًا واحدًا.
   4. إذا كان التقرير غائبًا، فتقول Google إن الموقع لم تكن له مرات ظهور كافية في الذكاء الاصطناعي بعد. هذا ليس خطأ.
   5. افتح Settings > Search generative AI وتأكد من أن الموقع غير مضبوط على Exclude وأنه لا يرث Exclude من موقع أب. راجع التحكم في Search generative AI.
   6. أضف تعليقًا توضيحيًا (annotation) في يوم نشر تغييراتك: انقر بزر الفأرة الأيمن على مخطط Performance، بحد أقصى 120 حرفًا (مساعدة التعليقات التوضيحية).

2. استخدم قناة AI Assistant المدمجة

   في GA4، انتقل إلى Reports > Acquisition > Traffic acquisition. اضبط البُعد الأساسي على Session default channel group وابحث عن صف AI Assistant. وأضف Session source بُعدًا ثانويًا لترى أي مساعد أرسل كل جلسة. ولن تجد هنا نقرات AI Overviews ووضع الذكاء الاصطناعي. وفي Plausible، افتح Sources > Channels > AI Assistants.

3. أضف مجموعة قنوات مخصصة

   انتقل إلى Admin > Data display > Channel groups، وأنشئ مجموعة، وأضف قناة يطابق فيها Source التعبير النمطي أدناه. اسحبها فوق Referral، لأن الزيارات تذهب إلى أول قناة تطابقها. تسمح الخصائص القياسية بمجموعتين مخصصتين، والمجموعات المخصصة ليست في تصدير BigQuery.

   تجاوز التعبير النمطي النموذجي في مقال مساعدة Google هذا النطاق في اختبارنا: فقد التقط help.openai.com وgithub.com/copilot وchatgptlist.org و«shanghai» أيضًا. استخدم هذا الأضيق بدلًا منه.

   ^(.*\.)?(chatgpt\.com|chat\.openai\.com|perplexity\.ai|claude\.ai|copilot\.microsoft\.com|gemini\.google\.com)$

   يقبل chatgpt.com وchat.openai.com وwww.perplexity.ai وclaude.ai وcopilot.microsoft.com وgemini.google.com. ويرفض google وmail.google.com وopenai.com وhelp.openai.com وnotchatgpt.com وperplexity.ai.evil.com وbing.com. ويغطي مضيف www والمضيف القديم لChatGPT لأن chat.openai.com يعيد التوجيه إلى chatgpt.com وperplexity.ai يعيد التوجيه إلى www.perplexity.ai. والتعبيرات النمطية في GA4 مطابقة كاملة وحساسة لحالة الأحرف افتراضيًا، وتستخدم RE2، وتُحدّ مرشحات التقارير ب250 حرفًا. وتُبقي الأوتاد هذا النمط صحيحًا في وضعي المطابقة. أضف مساعدات أخرى فقط بعد أن تظهر في تقرير Session source لديك.

4. انتبه إلى معاملات UTM الضائعة

   ابحث في Session source / medium عن صفوف chatgpt.com الواقعة في Unassigned أو Referral، لأن Google لا توثّق كيف يحسم GA4 قيمة utm_source بلا medium مقابل قاعدة AI Assistant. كما أن إعادة التوجيه التي تُسقط سلسلة الاستعلام، كقاعدة الشرطة المائلة الختامية أو www أو http إلى https، تُسقط UTM أيضًا. اختبر عنوانًا موسومًا عبر كل إعادة توجيه تستخدمها.

5. ابنِ استكشافًا (Exploration) (اختياري)

   تخطَّ هذا إذا كان تقرير القناة المدمج يجيب عن سؤالك. في Explore، ابدأ استكشافًا فارغًا. استورد الأبعاد Session source وSession source / medium وLanding page + query string وSession default channel group، إضافةً إلى المقاييس Sessions وEngaged sessions وKey events. ضع Session source ثم Landing page + query string في Rows، وصفِّ Session source بالتعبير النمطي نفسه.

6. اقرأ استشهادات Copilot وBing

   1. وثّق ملكية الموقع في Bing Webmaster Tools وافتح تقرير AI Performance.
   2. اقرأ Total Citations وAverage Cited Pages واستعلامات التأريض وقائمة Pages. انقر على استعلام تأريض لترى صفحاته المستشهَد بها، أو على صفحة لترى استعلامات التأريض الخاصة بها.
   3. استخدم Compare لتراكب الفترة التالية لنشر تغييراتك. النوايا والمواضيع وحصة الاستشهاد ميزات معاينة.
   4. صدّر CSV أو Excel شهريًا. واقرأ الأسئلة الشائعة لمعرفة قواعد أخذ العينات والتحديث.
   5. أرسل العناوين المتغيرة عبر IndexNow. وتوصي Bing به لتستخدم إجابات الذكاء الاصطناعي النسخة الحالية من الصفحة.

7. عُدّ زيارات زواحف الذكاء الاصطناعي في سجلات الخادم

   ابحث عن وكلاء المستخدم هؤلاء. البحث: OAI-SearchBot وClaude-SearchBot وPerplexityBot وGooglebot وbingbot. التدريب: GPTBot وClaudeBot. ما يطلقه المستخدم: ChatGPT-User وClaude-User وPerplexity-User. ولن يظهر Google-Extended أبدًا، لأنه رمز في robots.txt وليس له وكيل مستخدم خاص به.

   الزيارات التي يطلقها المستخدم هي الأهم. فكل واحدة تعني أن محادثة حقيقية قرأت صفحتك، ولأن هذه العمليات لا تنفّذ JavaScript، فإن GA4 وPlausible لا يريانها أبدًا.

   عدّ سريع من سجل بالصيغة المجمّعة. تعدّ نسخة awk هذه كل سطر مرة واحدة، بينما كان grep العادي يعدّ bingbot مرتين في كل سطر:

   awk 'match($0, /OAI-SearchBot|ChatGPT-User|GPTBot|Claude-SearchBot|Claude-User|ClaudeBot|PerplexityBot|Perplexity-User|Googlebot|bingbot/) { print substr($0, RSTART, RLENGTH), $7 }' access.log | sort | uniq -c | sort -rn

   وكلاء المستخدم سهلو الانتحال، فتحقق من عناوين IP. سكربتنا ai_bot_report.py (Python 3، بالمكتبة القياسية فقط، وهو في الحزمة) يعدّ الزيارات حسب اليوم والزاحف والحالة والمسار، ويفحص كل عنوان IP مقابل القائمة المنشورة من المشغّل لدى OpenAI وAnthropic وPerplexity وGoogle وBing. والصف الذي فيه ip_verified=NO وكيل مستخدم منتحل. وهو يرصد GPTBot مزيفًا من عنوان IP غير مدرج.

   python3 ai_bot_report.py access.log > ai-bots.csv
   zcat access.log.*.gz | python3 ai_bot_report.py - > ai-bots.csv

   وبدون السكربت، استخدم البحث المزدوج: يجب أن يعيد البحث العكسي في DNS عن عنوان IP اسم مضيف تابعًا لGoogle (googlebot.com أو google.com أو googleusercontent.com) أو اسمًا ينتهي بsearch.msn.com لBingbot، ويجب أن يعيد البحث الأمامي عن ذلك الاسم عنوان IP نفسه.

   على Vercel، انتقل إلى Firewall > Rules > Bot Management واضبط مجموعة قواعد AI Bots على Log، وليس Deny (مجموعات قواعد WAF المُدارة). ثم استخدم Firewall > Traffic وجمّع حسب User Agents وRequest Paths (المراقبة). وتُظهر سجلات وقت التشغيل الطلبات الثابتة المقدّمة من الذاكرة المؤقتة فقط. والسجل الكامل يتطلب Drains، وهي في خطتي Pro وEnterprise، مع proxy.userAgent في كل سجل:

   jq -r 'select(.proxy) | [(.proxy.timestamp/1000|todate), .proxy.clientIp, .proxy.path, (.proxy.statusCode|tostring), (.proxy.userAgent|join(" "))] | @tsv' drain.ndjson \
   | awk -F'\t' 'match($5, /OAI-SearchBot|ChatGPT-User|GPTBot|Claude-SearchBot|Claude-User|ClaudeBot|PerplexityBot|Perplexity-User|Googlebot|bingbot/) { print substr($5, RSTART, RLENGTH) "\t" $3 }' \
   | sort | uniq -c | sort -rn

   على Cloudflare، افتح AI Crawl Control. وإذا كانت زيارات زواحف الذكاء الاصطناعي قريبة من الصفر، فتحقق هل يضيف إعداد robots.txt المُدار قواعد Disallow في البداية لGPTBot أو ClaudeBot أو Google-Extended.

8. نفّذ اختبار مطالبات قابلًا للتكرار

   لا توجد أداة رسمية تعرض استشهادات ChatGPT أو Claude أو Perplexity، لذلك اختبر يدويًا ببروتوكول ثابت.

   1. اكتب من 20 إلى 40 مطالبة تشمل أسئلة كيفية وأخرى مقارنة وأخرى خاصة بالمنصات وسؤالين أو ثلاثة عن العلامة التجارية. أعطِ كلًا منها معرّفًا دائمًا. ولتغيير الصياغة، أوقف المعرّف وأضف معرّفًا جديدًا.
   2. المحركات: ChatGPT مع تفعيل البحث، وGoogle AI Mode، وGoogle AI Overviews (بحث عادي)، وGemini، وPerplexity، وMicrosoft Copilot، وClaude مع تفعيل البحث في الويب.
   3. ثبّت الإعدادات: الدولة واللغة وحالة تسجيل الدخول. في ChatGPT استخدم Temporary chat مضبوطة على Unpersonalized، وهي تتجاوز الذاكرة والتعليمات المخصصة. أما وضع Personalized فقد يستخدم ذكريات موجودة. وفي غيرها، استخدم ملفًا جديدًا أو جلسة دون تسجيل دخول ودوّن الوضع أو النموذج.
   4. شغّل كل مطالبة 3 مرات لكل محرك. تتفاوت الإجابات بين التشغيلات.
   5. الوتيرة: خط أساس شهري، وإعادة تشغيل واحدة بعد 2 إلى 4 أسابيع من أي تغيير كبير في المحتوى.
   6. سجّل كل تشغيل في ai-prompt-tracker.csv (26 عمودًا، وصفان نموذجيان موسومان بوضوح). واحسب معدل الذكر ومعدل الاستشهاد وحصة الاستشهاد (عناوينك المستشهَد بها مقسومة على كل العناوين المستشهَد بها، وهي الفكرة نفسها في مقياس Bing).
   7. احتفظ بلقطات الشاشة دليلًا خاصًا. ولا تنشر واجهات أطراف ثالثة.

   Mention rate   =COUNTIF(runs!N2:N1000,"yes")/COUNTA(runs!C2:C1000)
   Citation rate  =COUNTIF(runs!P2:P1000,"yes")/COUNTA(runs!C2:C1000)
   Citation share =SUM(runs!R2:R1000)/SUM(runs!S2:S1000)

9. تحقق من نجاح الخطوةتحقق من نجاح الخطوة

   تأكد من أربعة أمور:

   • لديك رقم «قبل» للعنوان (إجمالي مرات الظهور ومرات الظهور في ميزات الذكاء الاصطناعي) وتعليق توضيحي بتاريخ يوم النشر.
   • يعيد مرشّح GA4 مضيفات المساعدات فقط.
   • تُظهر مخرجات الزواحف طلباتك أنت. أنشئ طلبًا بcurl -A 'OAI-SearchBot' -s -o /dev/null https://yourdomain.com/robots.txt، ثم ابحث عن صف فيه اسم الزاحف والحالة 200.
   • يحتوي متتبع المطالبات على صف خط أساس لكل معرّف مطالبة ولكل محرك.