検索エンジン ボットを含む、サイトに対して行われたすべてのリクエストを記録するサーバー ファイル。
ログファイルが重要な理由
ログファイルは、ウェブサイトの直接的なファーストパーティデータを提供するため、非常に重要です。 クロール性 クローラーの健全性と技術的な健全性。Google Search Consoleなどのツールは有益な情報を提供してくれますが、Googlebotの活動のサンプルしか提供していません。ログファイルは、すべてのクローラーの活動をリアルタイムで把握できる情報源です。ログファイルを分析することで、以下のことが可能になります。
- クロール動作を確認する: 検索エンジン ボットがどのページをどのくらいの頻度で訪問しているかを正確に確認します。
- クロールバジェットの最適化: ボットが価値の低いページで時間を浪費している場所を特定し、最も重要なコンテンツにボットの注意を向けることができます。
- 隠れた問題を発見する: サーバー側のエラーを見つける 壊れたリンク、読み込みが遅いページ、他のツールでは表示されない可能性のあるリダイレクト チェーンなどがあります。
- 孤立したページを発見: 内部リンクがないにもかかわらず、ボットによってクロールされているページを識別します。
このデータは、Web サイトの可視性とパフォーマンスを向上させるための戦略的な意思決定を行う上で非常に貴重です。
異なるCMSプラットフォーム間で
ログ ファイルにアクセスして分析することは、どの CMS でも実行できる技術的な SEO タスクです。
WordPress
WordPressサイトのログファイルにアクセスするには、通常、ホスティングプロバイダーのcPanelまたはFTPクライアントを使用してサーバーからファイルをダウンロードする必要があります。ファイルを入手したら、ログファイル分析ツールを使用して、検索エンジンのクローラー向けにデータをフィルタリングできます。
Shopifyサービス
Shopifyはよりクローズドなシステムを採用しており、生のサーバーログファイルへの直接アクセスは一般的に提供されていません。代わりに、Google Search Consoleなどのサードパーティツールからのデータを利用して、検索エンジンがサイトとどのようにやり取りしているかを推測する必要があります。
ウィックス
Shopifyと同様に、Wixユーザーはサーバーのログファイルに直接アクセスできません。このプラットフォームは、多くの処理を行えるように設計されています。 SEOの技術的な問題 自動的に実行されますが、クロール エラーを監視するには Google Search Console を使用する必要があります。
ウェブフロー
Webflowはウェブサイトを高度に制御できますが、生のログファイルへの直接アクセスはホスティング設定によって異なる場合があります。Webflowサイトがカスタムサーバー上にある場合は、ログファイルに直接アクセスできます。
カスタムCMS
カスタムCMSを使用すると、サーバーのログファイルに簡単にアクセスでき、最大限の制御が可能になります。課題となるのは、この生のデータを解析・分析することです。これには、専用のツールやSEO専門家が必要になることがよくあります。
さまざまな業界にわたって
ログ ファイルから得られる洞察は、あらゆる業界に適用できます。
E-コマース
Eコマースサイト、特に商品数が多く、ファセットナビゲーションを備えたサイトでは、クロールバジェットが無駄に消費されることがよくあります。ログファイル分析は、こうした価値の低いページを特定してブロックし、最も重要な商品ページがクロールされ、インデックスに登録されるようにするのに役立ちます。
地元企業
ローカルビジネスでは、主要ページ（ホームページ、サービス、お問い合わせページ）が定期的にクロールされているか確認するためにこれを活用できます。また、問題を発見するのにも役立ちます。 Googleビジネスプロフィール ローカル検索ランキングに影響している可能性があります。
SaaS企業
SaaS企業は、検索エンジンが自社のブログやマーケティングページとどのようにやり取りしているかをモニタリングするために、このツールを活用できます。これにより、クロールされていないページを特定し、クロールを妨げている可能性のある問題を修正するのに役立ちます。
ブログ
ブログでは、どの記事が最も頻繁にクロールされているかを確認するためにこれを利用できます。これにより、人気のあるコンテンツを特定し、より関連性の高いコンテンツに更新することができます。また、 孤立したページ クロールされていないもの。
べし・べからず集
ドーズ
- 定期的にログ ファイルにアクセスしてダウンロードしてください。 これは、検索エンジンがサイトとどのようにやり取りしているかを 100% 正確かつフィルタリングなしで把握できる唯一の方法です。
- ログ ファイル分析ツールを使用してください。 専用のツールを使用すると、手動で行うのが難しいデータの解析、フィルタリング、分析を行うことができます。
- 検索エンジンボットのフィルターを実行します。 これにより、人間の訪問者ではなく、検索エンジンがサイトとどのようにやり取りしているかに分析の焦点を当てることができます。
しないでください
- Google Search Console だけに頼らないでください。 これは素晴らしいツールですが、サンプルを提供するだけです Googlebotの アクティビティが表示されず、他の検索エンジンのクローラーは表示されません。
- データを無視しないでください。 クロールが不足していたり、ログ ファイルに多数のエラーがある場合は、対処が必要な問題があることを明確に示しています。
- ログ ファイルを確認せずに古いコンテンツを削除しないでください。 検索エンジンによってまだクロールされ、インデックスされているコンテンツを削除している可能性があります。
避けるべき一般的な間違い
- 検索エンジンボットのフィルタリングに失敗しました: これはよくある間違いです。検索エンジンがサイトとどのようにやり取りしているかを明確に把握するには、「Googlebot」、「Bingbot」、「YandexBot」などのユーザーエージェントをフィルタリングする必要があります。
- ステータスコードの確認に失敗しました: 「404」や「500」などのステータス コードは、対処が必要な問題を明確に示します。
- クロール頻度を監視していません: クロール頻度の急激な低下や急増は、問題の兆候である可能性があります。
よくあるご質問
ログファイル分析は Google Search Console とどう違うのでしょうか?
ログファイル分析では、あらゆる検索エンジンにおけるサイト上のすべてのボットアクティビティを、フィルタリングされていない生の状態で包括的に確認できます。Google Search Console では、Googlebot のアクティビティのみを簡略化した集約ビューを提供します。
ログ ファイルはクロール バジェットの最適化にどのように役立ちますか?
ログファイルを分析することで、検索エンジンボットが最も頻繁にクロールしているページを確認できます。これにより、無駄に時間を費やしている価値の低いページを特定できます。 クロールの予算 検索エンジンの注目を最も重要なコンテンツに向け直すことができます。
ログ ファイルにはどのような情報が含まれていますか?
これには、リクエスト元の IP アドレス、リクエストの日時、アクセスしたページの URL、サーバーの応答コード (例: 200、404、500)、ユーザー エージェント (例: Googlebot、Bingbot) など、さまざまな情報が含まれます。
ログ ファイル分析における「孤立ページ」とは何ですか?
孤立ページとは、内部リンクが全く存在しないページのことです。ログファイルの分析は、サイト構造の断片化の兆候となる可能性のある、こうしたページを見つけるのに役立ちます。
ログ ファイルは Web サイトの移行に役立ちますか?
はい。ウェブサイトの移行後、検索エンジンが期待通りに応答しているかどうかを確認するには、ログファイルが最適です。ログファイルには、ボットが新しいURLを発見しているか、エラーが発生しているか、古いパスをクロールし続けているかどうかが記録されます。
