Was ist facebookexternalhit?
Der Webrobot facebookexternalhit indexiert und analysiert Inhalte von Webseiten. Er zeigt sich meistens mit der IP Adresse 173.252.70.114 und unter Verwendung des User Agent facebookexternalhit/1.1 (+http://www.facebook.com/externalhit_uatext.php). Mit 0.0003% Marktanteil ist facebookexternalhit auf Platz 215 der aktivsten Webrobots im Internet.
„Auf dieser Seite werden die User-Agent-Strings (UA-Strings) aufgeführt, die die gängigsten Webcrawler von Meta identifizieren. Außerdem wird erläutert, wofür jeder dieser Crawler verwendet wird."
— Offizielle Beschreibung des Betreibers
robots.txt – facebookexternalhit blockieren
Füge diese Zeilen in deine robots.txt ein, um facebookexternalhit den Zugriff auf deine Website zu verwehren:
User-agent: facebookexternalhit
Disallow: /Du kannst den Zugriff auch gezielt einschränken, statt ihn komplett zu blockieren:
User-agent: facebookexternalhit
Disallow: /wp-admin/
Disallow: /wp-includes/
Allow: /IP-Adressen 27 bekannte IPs
Diese IP-Adressen wurden bisher von facebookexternalhit verwendet:
173.252.70.114
173.252.82.1
173.252.82.112
173.252.82.114
173.252.82.18
173.252.82.2
173.252.82.24
173.252.82.26
173.252.82.29
173.252.82.4
173.252.87.12
173.252.95.112
173.252.95.114
173.252.95.58
57.141.8.36
57.141.8.54
69.171.231.15
69.171.231.23
69.171.231.24
69.171.231.27
69.171.231.7
69.63.184.10
69.63.184.113
69.63.184.116
69.63.184.2
69.63.184.22
69.63.189.25
User Agents
Mit diesen User-Agent-Strings identifiziert sich facebookexternalhit:
facebookexternalhit/1.1 (+http://www.facebook.com/externalhit_uatext.php)