لماذا تُعدّ أدوات جلب البيانات التي يُفعّلها المستخدم مهمة؟
أحيانًا، لا تصل برامج الزحف الخاصة بمحرك البحث إلى موقعك تلقائيًا. بل يتم تشغيلها نتيجةً لإجراء تتخذه أنت أو مستخدم آخر. تُسمى هذه أدوات جلب البيانات التي يتم تشغيلها بواسطة المستخدم. إنها لا تقوم بفحص موقعك للفهرسة مثل برنامج Googlebot العادي؛ بدلاً من ذلك، تقوم بجلب صفحات محددة للمساعدة في مهام مثل الاختبار أو التحقق أو المعاينات.
تُعد أدوات جلب البيانات التي يتم تشغيلها بواسطة المستخدم مهمة لأنها تسمح لأصحاب المواقع وخبراء تحسين محركات البحث بما يلي:
- اختبار كيفية رؤية Google للصفحة (دون انتظار الزحف المجدول).
- التحقق من ملكية الموقع في أدوات مثل Search Console.
- تحقق مما إذا كانت البيانات المنظمة تعمل.
- معاينة كيفية ظهور المحتوى في خدمات جوجل.
أدوات جلب البيانات التي يحفزها المستخدم من Google
فيما يلي أدوات الجلب الرئيسية التي قد تواجهها:
التحقق من موقع جوجل
يتم استخدام هذا المُجلب عند التحقق من ملكية الموقع في Google Search Consoleإنه عبارة عن أداة جلب لمرة واحدة تظهر فقط عند طلبك لها.
أداة فحص جوجل
يتم تشغيل هذا الجلب عند استخدام أدوات مثل أداة فحص عنوان URL، اختبار النتائج الغنية، أو اختبار التوافق مع الأجهزة المحمولة. يقوم بجلب الصفحة عند الطلب للتحقق من حالتها.
زاحف AMP
يُستخدم هذا المُستقبِل للتحقق من صفحات AMP ومعاينتها. ويضمن عمل صفحات AMP بشكل صحيح وجاهزيتها لفهرسة محركات البحث.
التصفح الآمن
يقوم هذا المُستقبِل بجلب عناوين URL للتحقق من سلامة المحتوى للمستخدمين. وهو مُستقبِل أمني يُساعد في الحفاظ على أمان الإنترنت للجميع.
إعلانات بوت
يتحقق هذا المُستقبِل من جودة صفحات الهبوط لإعلانات Google. ويضمن عمل صفحات الهبوط بشكل صحيح وملاءمتها لإعلاناتك.
الأشياء الأساسية التي يجب معرفتها
- لا تقوم أدوات الجلب هذه بالزحف إلى البيانات من أجل الفهرسة، بل تظهر فقط عندما تستخدم أداة Google أو تطلب فحصًا.
- إنها عبارة عن برامج زحف حسب الطلب، يتم تشغيلها من خلال إجراءات مستخدم محددة.
- منعهم في
robots.txtقد يؤدي ذلك إلى تعطيل خدمات Google المهمة (مثل التحقق من الموقع أو فحص الإعلانات). - إنها لا تؤثر على ميزانية الزحف الخاصة بك لأنها ليست جزءًا من الزحف العادي.
إذا كنت تريد التعرف على الروبوتات المستمرة التي تقوم بفهرسة المحتوى الخاص بك، فراجع قائمة أدوات الزحف الشائعة في Google
كيفية التحقق من أداة جلب البيانات التي يتم تشغيلها بواسطة المستخدم
تمامًا كما هو الحال مع أدوات الزحف الأخرى من Google، يمكنك التأكد من أنها أصلية من خلال التحقق من عنوان IP الخاص بها:
الخطوة 1: ابحث عن عنوان IP الخاص بالمتتبع
قم بإلقاء نظرة على عنوان IP في سجلات الخادم الخاص بك.
الخطوة 2: قم بإجراء بحث DNS عكسي
قم بإجراء بحث عكسي في DNS على عنوان IP هذا. يجب أن تشير النتيجة إلى نطاق ينتهي بـ googlebot.com or google.com.
الخطوة 3: التأكيد باستخدام بحث DNS الأمامي
خذ اسم النطاق هذا وابحث عنه مجددًا لترى إن كان يُرجع إلى عنوان IP نفسه. إذا تطابق، فهذا يعني أن برنامج الزحف هو برنامج زحف جوجل أصلي.
