gowikibot

Der Webrobot gowikibot indexiert und analysiert Inhalte von Webseiten. Er zeigt sich meistens mit der IP Adresse 209.180.91.43 und unter Verwendung des User Agent Mozilla/5.0 (compatible; Gowikibot/1.0; http://www.gowikibot.com). Mit 0% Marktanteil ist gowikibot auf Platz 351 der aktivsten Webrobots im Internet.

3Zugriffe
Nov. 2018Erstmals gesehen
10.01.2019Zuletzt aktiv

Was ist gowikibot?

indexiert und analysiert Inhalte von Webseiten.

Der Webrobot gowikibot indexiert und analysiert Inhalte von Webseiten. Er zeigt sich meistens mit der IP Adresse 209.180.91.43 und unter Verwendung des User Agent Mozilla/5.0 (compatible; Gowikibot/1.0; http://www.gowikibot.com). Mit 0% Marktanteil ist gowikibot auf Platz 351 der aktivsten Webrobots im Internet.

„Gowikibot is the web crawler for the privacy-focused Gowiki search engine which is currently in development. Our bots are identified by the following user-agent: Mozilla/5.0 (compatible; Gowikibot/1.0; +http://www.gowikibot.com) Our bots respect the robots.txt instructions, the meta robots tag, and the link rel follow/nofollow directives. In the robots.txt file, our bots will respond to either User-agent: Gowikibot or User-agent: gowikibot or, if neither is present, User-agent: *. We attempt to not burden servers by only crawling a few pages of a site at a time and by using a reasonable crawl delay between each request. At this time, we only crawl html and pdf files, as well as robots.txt files. We appreciate your understanding and you continuing to allow access to our web crawlers. Please note that our search engine is only accessible from the United States at this time (https://www.gowiki.com)"

— Offizielle Beschreibung des Betreibers
Basisanalyse

Technische Einordnung von gowikibot

gowikibot wurde in Webserver-Logs als Bot oder Crawler erkannt. Die wichtigsten technischen Hinweise findest du auf dieser Seite: bekannte User-Agents, beobachtete IP-Adressen, Aktivitätsdaten und passende robots.txt-Regeln.

Für eine konkrete Entscheidung solltest du zusätzlich prüfen, welche URLs gowikibot abruft, wie häufig die Zugriffe sind und ob der Bot deine robots.txt-Regeln respektiert.

Tipp: Wenn der Bot viel Traffic erzeugt oder sensible Bereiche abruft, prüfe neben robots.txt auch Firewall- oder WAF-Regeln.

Gefahreneinschätzung und Bewertung

Sollte man gowikibot blockieren?

Prüfe zuerst Zugriffshäufigkeit, aufgerufene URLs und User-Agent. Danach kannst du entscheiden, ob eine Blockierung sinnvoll ist.

Erst Logdaten prüfen

Betreiber

Organisation
Noch nicht geprüft

Auf einen Blick

Typ
Web-Crawler
Häufige IP
209.180.91.43
User-Agent-Varianten
1

robots.txt – gowikibot blockieren

Füge diese Zeilen in deine robots.txt ein, um gowikibot den Zugriff auf deine Website zu verwehren:

robots.txt
User-agent: gowikibot
Disallow: /

Du kannst den Zugriff auch gezielt einschränken, statt ihn komplett zu blockieren:

robots.txt (selektiv)
User-agent: gowikibot
Disallow: /wp-admin/
Disallow: /wp-includes/
Allow: /

Häufige Fragen zu gowikibot

Ist gowikibot gut oder schlecht?

Das hängt vom Einsatzzweck ab. gowikibot ist als Web-Crawler eingeordnet. Entscheidend sind Nutzen, Serverlast, Crawl-Verhalten und ob der Bot deine robots.txt-Regeln respektiert.

Wie erkenne ich gowikibot in Server-Logs?

Suche nach dem User-Agent-Namen gowikibot. Ein beobachteter User-Agent ist Mozilla/5.0 (compatible; Gowikibot/1.0; http://www.gowikibot.com). Vergleiche ausserdem IP-Adressen, Zugriffsmuster und aufgerufene URLs.

Reicht robots.txt zum Blockieren?

robots.txt ist ein Hinweis für regelkonforme Crawler. Unerwünschte oder aggressive Bots können diese Regeln ignorieren. In solchen Fällen helfen zusätzlich Firewall-Regeln, WAF-Regeln oder Blockierungen im Hosting/CDN.

Kann ein Bot seinen User-Agent fälschen?

Ja. Ein User-Agent ist leicht zu fälschen. Für wichtige Entscheidungen solltest du zusätzlich IP-Adresse, Reverse-DNS, Zugriffsmuster, Häufigkeit und aufgerufene URLs prüfen.

IP-Adressen 1 bekannte IPs

Diese IP-Adressen wurden bisher von gowikibot verwendet:

US 209.180.91.43

User Agents

Mit diesen User-Agent-Strings identifiziert sich gowikibot:

  • Mozilla/5.0 (compatible; Gowikibot/1.0; http://www.gowikibot.com)

Weitere nützliche Tools