Liste der vom Benutzer ausgelösten Google-Fetcher

Warum benutzergesteuerte Fetcher wichtig sind

Manchmal gelangen die Crawler einer Suchmaschine nicht automatisch auf Ihre Website. Stattdessen werden sie durch eine Aktion ausgelöst, die Sie oder ein anderer Benutzer ausführen. Diese nennt man Vom Benutzer ausgelöste AbrufprogrammeSie crawlen Ihre Site nicht zur Indexierung wie ein normaler Googlebot, sondern rufen bestimmte Seiten ab, um bei Aufgaben wie Tests, Überprüfungen oder Vorschauen zu helfen.

Vom Benutzer ausgelöste Fetcher sind wichtig, weil sie Websitebesitzern und SEOs Folgendes ermöglichen:

• Testen Sie, wie Google eine Seite sieht (ohne auf einen geplanten Crawl zu warten).
• Überprüfen Sie den Site-Besitz in Tools wie der Search Console.
• Überprüfen Sie, ob strukturierte Daten funktionieren.
• Vorschau, wie Inhalte angezeigt werden könnten in Google-Diensten.

Googles benutzergesteuerte Fetcher

Hier sind die wichtigsten Abrufer, auf die Sie stoßen können:

Google Site Verification

Dieser Fetcher wird verwendet, wenn Sie den Site-Besitz in Google Search Console. Es handelt sich um einen einmaligen Abruf, der nur angezeigt wird, wenn Sie ihn anfordern.

Google-InspectionTool

Dieser Fetcher wird ausgeführt, wenn Sie Tools wie das URL-Inspektionstool verwenden. Reichhaltiger Ergebnistest, oder Mobile-Friendly Test. Es ruft bei Bedarf eine Seite ab, um ihren Status zu überprüfen.

AMP Crawler

Dieser Fetcher dient zur Validierung und Vorschau Ihrer AMP-Seiten. Er stellt sicher, dass Ihre AMP-Seiten ordnungsgemäß funktionieren und für den Index einer Suchmaschine bereit sind.

Safe Browsing

Dieser Fetcher ruft URLs ab, um zu prüfen, ob die Inhalte für Benutzer sicher sind. Es handelt sich um einen sicherheitsrelevanten Fetcher, der dazu beiträgt, das Internet für alle sicher zu halten.

AdsBot

Dieser Fetcher prüft die Qualität der Zielseiten für Google Ads. Er stellt sicher, dass Ihre Zielseiten korrekt funktionieren und für Ihre Anzeigen relevant sind.

Wichtige Dinge zu wissen

• Diese Fetcher führen kein Crawlen zum Indexieren durch – sie werden nur angezeigt, wenn Sie ein Google-Tool verwenden oder eine Überprüfung anfordern.
• Es handelt sich um On-Demand-Crawler, die durch bestimmte Benutzeraktionen ausgelöst werden.
• Blockieren Sie sie robots.txt könnte wichtige Google-Dienste (wie Site-Verifizierung oder Anzeigenprüfungen) beschädigen.
• Sie wirken sich nicht auf Ihr Crawl-Budget aus, da sie nicht Teil des regulären Crawlings sind.

Wenn Sie mehr über Bots erfahren möchten, die Ihre Inhalte indexieren, lesen Sie unsere Liste der gängigen Crawler von Google

So überprüfen Sie einen vom Benutzer ausgelösten Fetcher

Genau wie bei anderen Google-Crawlern können Sie die Echtheit der Website durch Überprüfung ihrer IP bestätigen:

Schritt 1: IP-Adresse des Crawlers ermitteln

Sehen Sie sich die IP-Adresse in Ihren Serverprotokollen an.

Schritt 2: Führen Sie eine umgekehrte DNS-Suche durch

Führen Sie eine Reverse-DNS-Suche für diese IP durch. Das Ergebnis sollte auf eine Domäne mit der Endung verweisen. googlebot.com or google.com.

Schritt 3: Bestätigen Sie mit einer Forward-DNS-Suche

Nehmen Sie diesen Domänennamen und suchen Sie ihn erneut, um zu sehen, ob er wieder zur gleichen IP-Adresse aufgelöst wird. Wenn dies der Fall ist, handelt es sich bei dem Crawler um einen echten Google-Crawler.