زاحف <bdi dir="ltr">Meta</bdi> الجديد يفهرس الويب من أجل إجابات <bdi dir="ltr">Meta AI</bdi>

لدى Meta الآن طريقة جديدة لقراءة الويب، والعلامات التجارية هي المادة الخام لها. تُدرج وثائق Meta للمطورين الآن Meta-WebIndexer، وهو زاحف يتصفح الويب المفتوح لتحسين جودة إجابات بحث Meta AI، وبحسب تعبير Meta نفسها، للاستشهاد بمحتوى الموقع والربط إليه في تلك الإجابات. وبالنسبة إلى العلامات التجارية متعددة الفروع، يعني ذلك أن Meta AI، المساعد داخل WhatsApp وInstagram وFacebook، أصبح واجهة اكتشاف تقرأ مواقعها مباشرة.

ما الذي حدث

توثّق Meta مجموعة من الزواحف الموجهة لمديري المواقع، والزاحف المخصص للبحث هو Meta-WebIndexer، الذي يرسل عامل المستخدم meta-webindexer/1.1. وتصف إرشادات Meta هذا الزاحف بأنه يتصفح الويب لتحسين جودة نتائج بحث Meta AI، وتقول إن السماح له يساعد Meta على الاستشهاد بمحتواك والربط إليه في إجابات Meta AI. ويقف هذا الزاحف إلى جانب Meta-ExternalAgent، الزاحف الأوسع الذي تشغّله Meta منذ عام 2024 لتدريب نماذجها وفهرسة المحتوى، ويمكن التحكم فيه بالطريقة نفسها عبر robots.txt.

والخلفية الاستراتيجية لهذا التطور معروفة منذ فترة. فقد ذكرت The Information لأول مرة في عام 2024 أن Meta كانت تبني فهرس ويب خاصاً بها لتقليل اعتمادها على Google وBing في النتائج الحية التي تغذي Meta AI. وزاحف Meta-WebIndexer الموثّق هو الوجه الظاهر من هذا المسعى: فهرسة مخصصة مهمتها المعلنة تحسين إجابات Meta AI ونسب المصادر التي تعتمد عليها.

Allowing Meta-WebIndexer helps Meta cite and link to your content in Meta AI’s responses.

Meta for Developers, web crawlers documentation

لماذا يهم هذا

هذا هو نمط الزحف والإجابة نفسه الذي أعاد تشكيل نتائج Google، وهو يصل الآن إلى مجموعة من التطبيقات لا تزال فيها لكثير من العلامات التجارية أكبر جمهور لها. يقرأ مساعد الذكاء الاصطناعي محتوى الويب العام، ويؤلّف منه إجابة، وقد يستشهد بالمصادر التي اعتمد عليها. والعلامات التجارية الأكثر ترجيحاً للاستشهاد بها هي تلك التي تملك محتوى دقيقاً وقابلاً للزحف وجيد البنية. أما حظر الزاحف، أو ترك صفحات ضعيفة وغير متسقة في طريقه، فيجعل ظهور العلامة التجارية أو الاستشهاد بها أقل احتمالاً بكثير.

كما يحوّل هذا التطور إعداداً تقنياً إلى قرار استراتيجي. فقاعدة واحدة في ملف robots.txt تحدد الآن ما إذا كان بإمكان Meta AI تمثيل العلامة التجارية في إجاباتها. وإذا تُرك هذا القرار لمالكي المواقع كلٌّ على حدة، فسيُتخذ بشكل غير متسق عبر نطاق رقمي كبير: بعض النطاقات مؤهلة للاستشهاد بها، وأخرى مستبعدة بصمت، دون أن يتولى أحد مسؤولية النتيجة.

ماذا يعني هذا للعلامات التجارية متعددة الفروع

المهمة الأولى هي الحوكمة. قرروا مركزياً ما إذا كان مسموحاً لـMeta-WebIndexer بالوصول إلى كل موقع تديره العلامة التجارية، وطبّقوا هذه القاعدة في كل مكان بدلاً من اكتشاف لاحقاً أن نصف النطاق الرقمي غير متاح لـMeta-WebIndexer بينما النصف الآخر متاح. فسياسة الزواحف أصبحت الآن جزءاً من حوكمة العلامة التجارية، لا هامشاً تقنياً يخص مدير الموقع.

والمهمة الثانية هي جوهر ما يقرأه الزاحف. فـMeta AI لا يمكنها الاستشهاد إلا بمحتوى دقيق ومنظم بما يكفي لتثق به، لذا حافظوا على قائمة النشاط التجاري المحلية لكل موقع صحيحة ومتسقة عبر الأسواق، وأداروا الحضور من أجل محركات الإجابة لا من أجل مشاهدة صفحة واحدة. وبناء الانضباط اللازم للظهور في نتائج البحث بالذكاء الاصطناعي، إلى جانب طبقة حضور منظمة مثل Places AI، يساعد العلامة التجارية على البقاء قابلة للاقتباس عبر المساعدين الذين باتوا يؤلّفون الإجابات الآن، وفي مقدمتهم Meta AI. والعمل الذي كان يُطبَّق أصلاً على واجهات الذكاء الاصطناعي لدى Google صار له الآن بُعد خاص بـMeta، والاتساق نفسه على مستوى النطاق الرقمي بأكمله هو ما يحمل العلامة التجارية عبر الاثنين معاً.

الخلاصة

يجعل Meta-WebIndexer من Meta AI محرك إجابة إضافياً يقرأ الويب المفتوح ويقرر أي العلامات التجارية يستشهد بها. والرافعة هنا مباشرة بشكل غير معتاد: قاعدة زاحف وجودة المحتوى خلفها. وفرق المؤسسات الكبرى التي تضع سياسة واحدة مدروسة على مستوى نطاقها الرقمي بأكمله، وتحافظ على دقة بياناتها الأساسية، هي التي سيكون لدى Meta AI ما تقوله عنها.