Was ist surdotlybot?
indexiert und analysiert Inhalte von Webseiten.
Der Webrobot surdotlybot indexiert und analysiert Inhalte von Webseiten. Er zeigt sich meistens mit der IP Adresse 100.24.9.135 und unter Verwendung des User Agent Mozilla/5.0 (compatible; SurdotlyBot/1.0; +http://sur.ly/bot.html). Mit 0.0034% Marktanteil ist surdotlybot auf Platz 115 der aktivsten Webrobots im Internet.
„A bot (also: a web crawler, spider) is a computer program that browses the Web in a methodical and automated manner to gather information, which can be a part of how some services work (for example search engines like Google)."
— Offizielle Beschreibung des Betreibers
Gefahreneinschätzung und Bewertung
Sollte man surdotlybot blockieren?
Prüfe zuerst Zugriffshäufigkeit, aufgerufene URLs und User-Agent. Danach kannst du entscheiden, ob eine Blockierung sinnvoll ist.
robots.txt – surdotlybot blockieren
Füge diese Zeilen in deine robots.txt ein, um surdotlybot den Zugriff auf deine Website zu verwehren:
User-agent: surdotlybot
Disallow: /Du kannst den Zugriff auch gezielt einschränken, statt ihn komplett zu blockieren:
User-agent: surdotlybot
Disallow: /wp-admin/
Disallow: /wp-includes/
Allow: /Häufige Fragen zu surdotlybot
Ist surdotlybot ein guter oder schlechter Bot?
Das hängt vom Einsatzzweck ab. surdotlybot ist als Web-Crawler eingeordnet. Entscheidend sind Serverlast, Crawl-Verhalten, Nutzen für deine Website und ob der Bot deine Regeln respektiert.
Wie erkenne ich surdotlybot in Server-Logs?
Suche nach dem User-Agent-Namen surdotlybot. Ein beobachteter User-Agent ist Mozilla/5.0 (compatible; SurdotlyBot/1.0; +http://sur.ly/bot.html). Vergleiche ausserdem IP-Adressen, Zugriffsmuster und aufgerufene URLs.
Reicht robots.txt zum Blockieren?
robots.txt ist ein Hinweis für regelkonforme Crawler. Unerwünschte oder aggressive Bots können diese Regeln ignorieren. In solchen Fällen helfen zusätzlich Firewall-Regeln, WAF-Regeln oder Blockierungen im Hosting/CDN.
IP-Adressen 123 bekannte IPs
Diese IP-Adressen wurden bisher von surdotlybot verwendet:
100.24.9.135
100.26.29.10
107.20.5.105
107.21.56.77
107.23.139.83
174.129.120.166
18.207.116.36
18.209.12.132
18.209.18.45
18.209.67.68
18.212.225.236
18.212.86.24
18.232.147.142
18.232.149.163
184.72.89.253
199.101.132.161
199.101.134.196
199.101.134.200
199.101.134.202
204.155.150.131
204.155.150.135
204.155.150.141
204.155.150.144
208.88.224.203
208.88.224.217
208.88.225.18
208.94.232.182
208.94.233.138
23.22.200.99
3.208.10.86
3.80.100.174
3.82.57.29
3.84.118.113
3.88.212.253
3.94.102.93
3.95.60.72
34.201.102.89
34.201.91.42
34.201.98.74
34.203.14.63
34.204.108.66
34.224.215.100
34.224.74.211
34.226.192.130
34.227.194.77
34.228.116.43
34.228.156.110
34.228.199.214
34.229.121.55
34.229.156.120
34.229.193.170
34.229.202.145
34.229.75.168
34.230.30.180
34.230.82.175
34.230.90.248
34.233.124.6
34.234.63.205
34.235.126.20
34.235.137.91
34.235.151.87
34.235.89.66
34.236.150.176
35.173.128.139
44.222.205.195
44.223.28.68
44.223.4.97
52.201.238.40
52.201.255.133
52.206.19.128
52.207.225.106
52.23.186.17
52.23.205.103
52.54.139.212
52.6.80.58
52.73.2.144
52.90.127.216
52.90.94.252
52.91.141.81
52.91.173.52
52.91.185.85
52.91.49.184
54.145.7.201
54.146.19.171
54.146.228.187
54.152.34.242
54.157.249.185
54.160.213.136
54.162.157.34
54.162.201.84
54.163.213.72
54.164.115.66
54.165.102.184
54.165.106.170
54.165.234.77
54.172.146.141
54.172.95.206
54.173.235.235
54.173.62.75
54.174.235.73
54.175.162.204
54.209.204.49
54.210.226.230
54.211.15.226
54.221.108.182
54.221.131.78
54.221.86.29
54.224.104.31
54.226.229.214
54.226.229.57
54.234.194.147
54.234.254.175
54.235.59.15
54.237.197.136
54.237.227.221
54.237.236.228
54.242.124.17
54.243.21.123
54.85.248.86
54.86.111.21
54.88.114.188
54.88.128.221
74.117.179.18
User Agents
Mit diesen User-Agent-Strings identifiziert sich surdotlybot:
Mozilla/5.0 (compatible; SurdotlyBot/1.0; +http://sur.ly/bot.html)Mozilla/5.0 (compatible; SurdotlyBot/1.0; +http://sur.ly/bot.html; Linux; Android 4; iPhone; CPU iPhone OS 6_0_1 like Mac OS X) AppleWebKit/536.26 (KHTML, like Gecko) Version/6.0 Mobile/10A523 Safari/8536.25Mozilla/5.0 (compatible; SurdotlyBot/1.0; http://sur.ly/bot.html)