Was ist facebot?
indexiert und analysiert Inhalte von Webseiten.
Der Webrobot facebot indexiert und analysiert Inhalte von Webseiten. Er zeigt sich meistens mit der IP Adresse 104.28.62.31 und unter Verwendung des User Agent Mozilla/5.0 (Macintosh; Intel Mac OS X 10_11_1) AppleWebKit/601.2.4 (KHTML, like Gecko) Version/9.0.1 Safari/601.2.4 facebookexternalhit/1.1 Facebot Twitterbot/1.0. Mit 0.0007% Marktanteil ist facebot auf Platz 183 der aktivsten Webrobots im Internet.
Gefahreneinschätzung und Bewertung
Sollte man facebot blockieren?
Prüfe zuerst Zugriffshäufigkeit, aufgerufene URLs und User-Agent. Danach kannst du entscheiden, ob eine Blockierung sinnvoll ist.
robots.txt – facebot blockieren
Füge diese Zeilen in deine robots.txt ein, um facebot den Zugriff auf deine Website zu verwehren:
User-agent: facebot
Disallow: /
Du kannst den Zugriff auch gezielt einschränken, statt ihn komplett zu blockieren:
User-agent: facebot
Disallow: /wp-admin/
Disallow: /wp-includes/
Allow: /
Häufige Fragen zu facebot
Ist facebot ein guter oder schlechter Bot?
Das hängt vom Einsatzzweck ab. facebot ist als Web-Crawler eingeordnet. Entscheidend sind Serverlast, Crawl-Verhalten, Nutzen für deine Website und ob der Bot deine Regeln respektiert.
Wie erkenne ich facebot in Server-Logs?
Suche nach dem User-Agent-Namen facebot. Ein beobachteter User-Agent ist Mozilla/5.0 (Macintosh; Intel Mac OS X 10_11_1) AppleWebKit/601.2.4 (KHTML. Vergleiche ausserdem IP-Adressen, Zugriffsmuster und aufgerufene URLs.
Reicht robots.txt zum Blockieren?
robots.txt ist ein Hinweis für regelkonforme Crawler. Unerwünschte oder aggressive Bots können diese Regeln ignorieren. In solchen Fällen helfen zusätzlich Firewall-Regeln, WAF-Regeln oder Blockierungen im Hosting/CDN.
IP-Adressen 12 bekannte IPs
Diese IP-Adressen wurden bisher von facebot verwendet:
104.28.62.31
185.64.148.20
217.149.169.222
66.220.159.112
66.220.159.113
66.220.159.114
66.220.159.115
66.220.159.116
66.220.159.117
66.220.159.118
66.220.159.119
78.193.158.102
User Agents
Mit diesen User-Agent-Strings identifiziert sich facebot:
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_11_1) AppleWebKit/601.2.4 (KHTML, like Gecko) Version/9.0.1 Safari/601.2.4 facebookexternalhit/1.1 Facebot Twitterbot/1.0Facebot/1.0