Was ist bitlybot?
indexiert und analysiert Inhalte von Webseiten.
Der Webrobot bitlybot indexiert und analysiert Inhalte von Webseiten. Er zeigt sich meistens mit der IP Adresse 107.20.32.80 und unter Verwendung des User Agent bitlybot. Mit 0% Marktanteil ist bitlybot auf Platz 275 der aktivsten Webrobots im Internet.
Betreiber & Risiko
Risiko unbekannt
- Keine öffentlichen Betreiber-Infos bekannt
robots.txt – bitlybot blockieren
Füge diese Zeilen in deine robots.txt ein, um bitlybot den Zugriff auf deine Website zu verwehren:
robots.txt
User-agent: bitlybot
Disallow: /Du kannst den Zugriff auch gezielt einschränken, statt ihn komplett zu blockieren:
robots.txt (selektiv)
User-agent: bitlybot
Disallow: /wp-admin/
Disallow: /wp-includes/
Allow: /IP-Adressen 4 bekannte IPs
Diese IP-Adressen wurden bisher von bitlybot verwendet:
107.20.32.80
50.17.69.56
54.198.188.134
54.227.49.251
User Agents
Mit diesen User-Agent-Strings identifiziert sich bitlybot:
bitlybot