ユーザートリガーフェッチャーが重要な理由
検索エンジンのクローラーは、ウェブサイトに自動的にアクセスするのではなく、ユーザーや他のユーザーが行ったアクションによってトリガーされることがあります。これらは ユーザートリガーフェッチャー通常の Googlebot のようにインデックス作成のためにサイトをクロールするのではなく、テスト、検証、プレビューなどのタスクに役立つ特定のページを取得します。
ユーザーがトリガーするフェッチャーは、サイト所有者と SEO が次のことを可能にするため重要です。
- Googleがページをどのように認識するかをテストする (スケジュールされたクロールを待たずに)。
- サイトの所有権を確認する Search Console などのツールで。
- 構造化データが機能しているかどうかを確認します。
- コンテンツがどのように表示されるかをプレビューする Google サービスで。
Googleのユーザートリガーフェッチャー
遭遇する可能性のある主なフェッチャーは次のとおりです。
Google サイト検証
このフェッチャーは、サイトの所有権を確認するときに使用されます。 Google Search Consoleリクエストしたときにのみ表示される 1 回限りのフェッチャーです。
Google 検査ツール
このフェッチャーはURL検査ツールなどのツールを使用するときに実行されます。 豊富な結果テスト、またはモバイルフレンドリーテスト。オンデマンドでページを取得し、そのステータスを確認します。
AMPクローラー
このフェッチャーは、AMP ページの検証とプレビューに使用されます。これにより、AMP ページが正しく動作し、検索エンジンのインデックスに登録できる状態であることを確認します。
セーフブラウジング
このフェッチャーは、URLを取得して、コンテンツがユーザーにとって安全かどうかを確認します。これは、インターネットをすべての人にとって安全に保つためのセキュリティ関連のフェッチャーです。
広告ボット
このフェッチャーは、Google 広告のランディング ページの品質をチェックします。ランディング ページが正しく機能し、広告との関連性が高いことを確認します。
知っておくべき重要なこと
- これらのフェッチャーはインデックス作成のためにクロールすることはなく、Google ツールを使用したりチェックをリクエストしたりした場合にのみ表示されます。
- これらは、特定のユーザー アクションによってトリガーされるオンデマンド クローラーです。
- ブロックする
robots.txt重要な Google サービス（サイトの検証や広告のチェックなど）が機能しなくなる可能性があります。 - これらは通常のクロールの一部ではないため、クロール バジェットに影響しません。
あなたのコンテンツをインデックスするボットについて知りたい場合は、 Googleの一般的なクローラーのリスト
ユーザーがトリガーするフェッチャーを検証する方法
他の Google クローラーと同様に、IP をチェックすることで本物かどうかを確認できます。
ステップ1: クローラーのIPアドレスを見つける
サーバー ログの IP アドレスを確認します。
ステップ2: 逆DNSルックアップを実行する
そのIPアドレスで逆DNSルックアップを実行してください。結果は、 googlebot.com or google.com.
ステップ3: DNSフォワードルックアップで確認する
そのドメイン名を再度検索し、同じIPアドレスに解決されるかどうかを確認します。一致する場合、クローラーは正規のGoogleクローラーです。
