تتيح لك الأداة الجلب مثل Googlebot رؤية الصفحة كما تراها Googlebot. ويعد ذلك الأمر مفيدًا خاصةً إذا كنت تتحرى الخلل وتحاول إصلاحه في ما يتعلق بالأداء الضعيف لصفحةٍ ما في نتائج البحث. على سبيل المثال، إذا كنت تستخدم ملفات الوسائط المتعددة التفاعلية لعرض المحتوى، فقد لا تحتوي الصفحة التي تعرضها الأداة على هذا المحتوى إذا لم يكن بإمكان محرك بحث Google الزحف إليها بشكل فعال. يمكنك اختيار جلب الصفحة كما تظهر لزاحف ويب Google العادي، أو عند نشرك محتوى الجوال كما تفعل برامج زحف الجوال لدينا.
تتضمن المعلومات التي تعرضها الأداة ما يلي:
* استجابة HTTP التي يعرضها الخادم
* تاريخ ووقت طلب الزحف
* شفرة HTML
* أول 100 كيلوبايت للنص (القابل للفهرسة) الذي يظهر في الصفحة. في حالة عدم ظهور المحتوى، فهذا يشير إلى أن الصفحة تم إنشاؤها بشكل كامل من ملفات جافا سكريبت أو ملفات الوسائط المتعددة التفاعلية، وليس من خلال المحتوى النصي. يجب مراجعة هذا النص لضمان أنه لا يشتمل على محتوى غير متوقع والذي قد يوضح ومفادها أنه قد تم الاستيلاء على موقعك. (ملاحظة: قد يزحف Googlebot إلى أكثر من أول 100 كيلوبايت من النص.)
إذا تم الاستيلاء على موقعك، فيمكن للأداة الجلب مثل Googlebot مساعدتك في التعرف على الصفحات التي بها مشكلات. فلنفترض أن هاني، وهو مشرف
[ندعوك للتسجيل في المنتدى أو التعريف بنفسك لمعاينة هذا الرابط] يبحث عن موقعه في Google. وتفاجأ عندما اكتشف أن الموقع يظهر في نتائج البحث للمصطلحات الشائعة غير المرغوب فيها مثل "فياجرا"، لاسيما عندما تكون تلك العبارات غير موجودة في الشفرة المصدر لصفحات الموقع. ولحسن الحظ فقد تم تأكيد ملكية موقعه في أدوات مشرفي المواقع، ولذا استخدم الأداة الجلب مثل Googlebot لاستيعاب ما يشاهده Google على الموقع بالضبط. حيث تعرض الأداة تفاصيل الصفحة التي تم جلبها ومحتوياتها - وبها يمكنه مشاهدة الكلمة فياجرا والمصطلحات الأخرى غير المرغوب فيها بوضوح.
يمكن أن يحدث ذلك عندما يتسلل مخترق ضار أمان الموقع ويدرج محتوى غير مرغوب فيه، ويخفيه كي لا يظهر للمستخدمين العاديين، ولكن يظهر لـ Googlebot فقط. ونظرًا لظهور الشفرة المصدر لهذا الموقع بشكل عادي لكل الأشخاص باستثناء Googlebot، يصعب تشخيص المشكلة بدون استخدام الأداة الجلب مثل Googlebot.
ننصح باستخدام أداة الجلب مثل Googlebot للتأكد من القدرة على الزحف إلى موقعك، إلى جانب أدوات أخرى مثل:
* اختبار ملف robots.txt: توضح هذه الأداة ما إذا كنت تمنع من غير قصد برنامج Googlebot من الزحف إلى أية صفحات أو أدلة على موقعك.
* اقتراحات HTML: تعرض هذه الأداة اقتراحات من أجل تحسين علامات العنوان والأوصاف التعريفية وعناصر HTML الأخرى التي قد تؤثر على أداء موقعك عند إجراء عمليات البحث.
* أخطاء الزحف: تعرض الصفحات التي واجهت Google مشكلات عند الزحف إليها.
لاستخدام أداة الجلب مثل Googlebot، يجب أن تتم إضافة موقعك والتحقق منه في أدوات مشرفي المواقع. ثم اتبع الإرشادات التالية:
1. في الصفحة الرئيسية لأدوات مشرفي المواقع، انقر على الموقع الذي تريده.
2. في لوحة البيانات، ضمن بيانات التشخيص، انقر على جلب مثل Googlebot.
3. في مربع النص، اكتب مسار الصفحة التي تريد التحقق منها.
4. في اللائحة المنسدلة، حدّد نوع الجلب الذي تريده. وللاطلاع على ما يراه برنامج زحف الويب Googlebot، حدّد الويب. للاطلاع على ما يراه برنامج زحف الجوال Googlebot-Mobile، حدّد cHTML (يستخدم هذا أساسًا لمواقع الويب اليابانية) أو Mobile XHTML/WML.
5. انقر على جلب.
ملاحظة: تم تصميم الأداة الجلب مثل Googlebot لمساعدة مشرفي المواقع في تحري المشكلات المحتملة وإصلاحها من خلال الزحف إلى الموقع. وعلى الرغم من أن الأداة تعكس ما يشاهده Googlebot، فقد توجد بعض الاختلافات. فعلى سبيل المثال، لا تتبع الأداة الجلب مثل Googlebot عمليات إعادة التوجيه.