Bingbot

ما هو Bingbot ؟

Bingbot هو روبوت زحف ويب (Web Crawler) تابع لشركة Microsoft، يُستخدم لجمع المعلومات من صفحات الإنترنت بهدف إنشاء فهرس يمكن لمحرك البحث Bing استخدامه لعرض نتائج البحث.
تمامًا مثل Googlebot الخاص بجوجل، يقوم Bingbot بزيارة صفحات المواقع، وتحليل محتواها، وحفظ البيانات التي تساعد على ترتيب الصفحات في نتائج البحث.
أُطلق Bingbot في أكتوبر 2010، ومنذ ذلك الحين أصبح أداة الزحف الرئيسية لمحرك بحث Bing.
وفقًا لـ Cloudflare Radar، يُصنّف Bingbot كثالث أكثر روبوتات الزحف نشاطًا على مستوى العالم، بينما يأتي AhrefsBot في المرتبة الرابعة.

Bingbot يستخدم عدة سلاسل تعريف “User Agent strings” لتعريف نفسه عند زيارة المواقع، ومنها:

Mozilla/5.0 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm)

Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm) Chrome/W.X.Y.Z Safari/537.36

Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/W.X.Y.Z Mobile Safari/537.36 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm)

هذه السلاسل تُستخدم لتُظهر للموقع أن الزائر هو Bingbot، مما يسمح له بالتفاعل بشكل ملائم حسب إعدادات الموقع.

وكأي روبوت زحف، يلتزم Bingbot بقواعد ملف robots.txt، ويُراعي أوامر “nofollow” الموجودة على الروابط والصفحات، مما يعني أنه لا يزحف على الصفحات أو الروابط المحظورة له صراحة.

إلى جانب Bingbot، لدى Microsoft روبوتات أخرى مثل:

AdIdxBot: خاص بإعلانات Bing (Bing Ads)

BingPreview: يُستخدم لتوليد معاينات (snapshots) للصفحات.