Was ist surdotlybot?
indexiert und analysiert Inhalte von Webseiten.
Der Webrobot surdotlybot indexiert und analysiert Inhalte von Webseiten. Er zeigt sich meistens mit der IP Adresse 100.24.9.135 und unter Verwendung des User Agent Mozilla/5.0 (compatible; SurdotlyBot/1.0; +http://sur.ly/bot.html). Mit 0.0034% Marktanteil ist surdotlybot auf Platz 118 der aktivsten Webrobots im Internet.
„A bot (also: a web crawler, spider) is a computer program that browses the Web in a methodical and automated manner to gather information, which can be a part of how some services work (for example search engines like Google)."
— Offizielle Beschreibung des Betreibers
Technische Einordnung von surdotlybot
surdotlybot wurde in Webserver-Logs als Bot oder Crawler erkannt. Die wichtigsten technischen Hinweise findest du auf dieser Seite: bekannte User-Agents, beobachtete IP-Adressen, Aktivitätsdaten und passende robots.txt-Regeln.
Für eine konkrete Entscheidung solltest du zusätzlich prüfen, welche URLs surdotlybot abruft, wie häufig die Zugriffe sind und ob der Bot deine robots.txt-Regeln respektiert.
Gefahreneinschätzung und Bewertung
Sollte man surdotlybot blockieren?
Prüfe zuerst Zugriffshäufigkeit, aufgerufene URLs und User-Agent. Danach kannst du entscheiden, ob eine Blockierung sinnvoll ist.
robots.txt – surdotlybot blockieren
Füge diese Zeilen in deine robots.txt ein, um surdotlybot den Zugriff auf deine Website zu verwehren:
User-agent: surdotlybot
Disallow: /Du kannst den Zugriff auch gezielt einschränken, statt ihn komplett zu blockieren:
User-agent: surdotlybot
Disallow: /wp-admin/
Disallow: /wp-includes/
Allow: /Häufige Fragen zu surdotlybot
Ist surdotlybot gut oder schlecht?
Das hängt vom Einsatzzweck ab. surdotlybot ist als Web-Crawler eingeordnet. Entscheidend sind Nutzen, Serverlast, Crawl-Verhalten und ob der Bot deine robots.txt-Regeln respektiert.
Wie erkenne ich surdotlybot in Server-Logs?
Suche nach dem User-Agent-Namen surdotlybot. Ein beobachteter User-Agent ist Mozilla/5.0 (compatible; SurdotlyBot/1.0; +http://sur.ly/bot.html). Vergleiche ausserdem IP-Adressen, Zugriffsmuster und aufgerufene URLs.
Reicht robots.txt zum Blockieren?
robots.txt ist ein Hinweis für regelkonforme Crawler. Unerwünschte oder aggressive Bots können diese Regeln ignorieren. In solchen Fällen helfen zusätzlich Firewall-Regeln, WAF-Regeln oder Blockierungen im Hosting/CDN.
Kann ein Bot seinen User-Agent fälschen?
Ja. Ein User-Agent ist leicht zu fälschen. Für wichtige Entscheidungen solltest du zusätzlich IP-Adresse, Reverse-DNS, Zugriffsmuster, Häufigkeit und aufgerufene URLs prüfen.
IP-Adressen 128 bekannte IPs
Diese IP-Adressen wurden bisher von surdotlybot verwendet:
100.24.9.135
100.26.29.10
107.20.5.105
107.21.56.77
107.23.139.83
174.129.120.166
18.207.116.36
18.209.12.132
18.209.18.45
18.209.67.68
18.212.225.236
18.212.86.24
18.215.145.245
18.232.147.142
18.232.149.163
184.72.89.253
199.101.132.161
199.101.134.196
199.101.134.200
199.101.134.202
204.155.150.131
204.155.150.135
204.155.150.141
204.155.150.144
208.88.224.203
208.88.224.217
208.88.225.18
208.94.232.182
208.94.233.138
23.22.200.99
3.208.10.86
3.80.100.174
3.82.57.29
3.84.118.113
3.88.184.2
3.88.212.253
3.94.102.93
3.95.60.72
34.201.102.89
34.201.91.42
34.201.98.74
34.203.14.63
34.204.108.66
34.224.215.100
34.224.74.211
34.226.192.130
34.227.194.77
34.228.116.43
34.228.156.110
34.228.199.214
34.229.121.55
34.229.156.120
34.229.193.170
34.229.202.145
34.229.75.168
34.230.30.180
34.230.82.175
34.230.90.248
34.233.124.6
34.234.63.205
34.235.126.20
34.235.137.91
34.235.151.87
34.235.89.66
34.236.150.176
35.173.128.139
44.222.205.195
44.223.28.68
44.223.4.97
52.201.238.40
52.201.255.133
52.206.19.128
52.207.225.106
52.23.186.17
52.23.205.103
52.54.139.212
52.6.80.58
52.73.2.144
52.90.127.216
52.90.94.252
52.91.141.81
52.91.173.52
52.91.185.85
52.91.49.184
54.145.7.201
54.146.19.171
54.146.228.187
54.152.34.242
54.157.249.185
54.160.213.136
54.162.157.34
54.162.201.84
54.163.213.72
54.163.215.135
54.164.115.66
54.165.102.184
54.165.106.170
54.165.234.77
54.172.146.141
54.172.95.206
54.173.235.235
54.173.62.75
54.174.235.73
54.175.162.204
54.209.204.49
54.210.226.230
54.211.15.226
54.221.108.182
54.221.131.78
54.221.86.29
54.224.104.31
54.226.17.197
54.226.229.214
54.226.229.57
54.234.194.147
54.234.254.175
54.235.59.15
54.237.197.136
54.237.227.221
54.237.236.228
54.242.124.17
54.243.21.123
54.85.248.86
54.86.111.21
54.88.114.188
54.88.128.221
54.90.84.207
74.117.179.18
User Agents
Mit diesen User-Agent-Strings identifiziert sich surdotlybot:
Mozilla/5.0 (compatible; SurdotlyBot/1.0; +http://sur.ly/bot.html)Mozilla/5.0 (compatible; SurdotlyBot/1.0; +http://sur.ly/bot.html; Linux; Android 4; iPhone; CPU iPhone OS 6_0_1 like Mac OS X) AppleWebKit/536.26 (KHTML, like Gecko) Version/6.0 Mobile/10A523 Safari/8536.25Mozilla/5.0 (compatible; SurdotlyBot/1.0; http://sur.ly/bot.html)