Was ist smtbot?
Der Webrobot smtbot indexiert und analysiert Inhalte von Webseiten. Er zeigt sich meistens mit der IP Adresse 209.190.113.85 und unter Verwendung des User Agent Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/68.0.3440.75 Safari/537.36 (compatible; SMTBot/1.0; http://www.similartech.com/smtbot). Mit 0.0685% Marktanteil ist smtbot auf Platz 45 der aktivsten Webrobots im Internet.
Technische Einordnung von smtbot
smtbot wurde in Webserver-Logs als Bot oder Crawler erkannt. Die vorhandenen Hinweise auf dieser Seite helfen dir, den Bot in Logs einzuordnen und eine sinnvolle Blockier- oder Erlaubnisentscheidung zu treffen.
Prüfe insbesondere Zugriffshäufigkeit, aufgerufene URLs, User-Agent, IP-Adressen und ob der Bot deine robots.txt-Regeln respektiert.
Gefahreneinschätzung und Bewertung
Sollte man smtbot blockieren?
Prüfe zuerst Zugriffshäufigkeit, aufgerufene URLs und User-Agent. Danach kannst du entscheiden, ob eine Blockierung sinnvoll ist.
robots.txt – smtbot blockieren
Füge diese Zeilen in deine robots.txt ein, um smtbot den Zugriff auf deine Website zu verwehren:
User-agent: smtbot
Disallow: /Häufige Fragen zu smtbot
Warum gibt es zu smtbot nur eine Basisanalyse?
Die Seite zeigt die wichtigsten technischen Hinweise aus den verfügbaren WebRobots-Daten. Für die konkrete Entscheidung solltest du zusätzlich deine eigenen Serverlogs prüfen.
Reicht robots.txt zum Blockieren?
robots.txt ist ein Hinweis für regelkonforme Crawler. Unerwünschte oder aggressive Bots können diese Regeln ignorieren. In solchen Fällen helfen zusätzlich Firewall-Regeln, WAF-Regeln oder Blockierungen im Hosting/CDN.