semrushbot

Der Webrobot semrushbot indexiert und analysiert Inhalte von Webseiten. Er zeigt sich meistens mit der IP Adresse 104.131.42.50 und unter Verwendung des User Agent Mozilla/5.0 (compatible; SemrushBot/6~bl; http://www.semrush.com/bot.html). Mit 14.64% Marktanteil ist semrushbot auf Platz 3 der aktivsten Webrobots im Internet.

1.577.431Zugriffe
14,64%Marktanteil
Okt. 2014Erstmals gesehen
04.09.2019Zuletzt aktiv

Was ist semrushbot?

indexiert und analysiert Inhalte von Webseiten.

Der Webrobot semrushbot indexiert und analysiert Inhalte von Webseiten. Er zeigt sich meistens mit der IP Adresse 104.131.42.50 und unter Verwendung des User Agent Mozilla/5.0 (compatible; SemrushBot/6~bl; http://www.semrush.com/bot.html). Mit 14.64% Marktanteil ist semrushbot auf Platz 3 der aktivsten Webrobots im Internet.

„SEMrush.com -> Bot"

— Offizielle Beschreibung des Betreibers

Betreiber & Risiko

? Risiko unbekannt

robots.txt – semrushbot blockieren

Füge diese Zeilen in deine robots.txt ein, um semrushbot den Zugriff auf deine Website zu verwehren:

robots.txt 
User-agent: semrushbot
Disallow: /

Du kannst den Zugriff auch gezielt einschränken, statt ihn komplett zu blockieren:

robots.txt (selektiv) 
User-agent: semrushbot
Disallow: /wp-admin/
Disallow: /wp-includes/
Allow: /

IP-Adressen 89 bekannte IPs

Diese IP-Adressen wurden bisher von semrushbot verwendet:

US 104.131.42.50
192.243.53.51
DM 192.243.56.76
US 213.174.146.212
US 213.174.146.213
213.174.147.83
213.174.152.181
213.174.152.182
213.174.152.183
213.174.152.184
213.174.152.185
213.174.152.186
213.174.152.187
NL 46.229.161.131
NL 46.229.164.100
NL 46.229.164.101
NL 46.229.164.102
NL 46.229.164.111
NL 46.229.164.112
NL 46.229.164.113
NL 46.229.164.114
NL 46.229.164.115
NL 46.229.164.97
NL 46.229.164.98
NL 46.229.164.99
NL 46.229.168.129
NL 46.229.168.130
NL 46.229.168.131
NL 46.229.168.132
NL 46.229.168.133
NL 46.229.168.134
NL 46.229.168.135
NL 46.229.168.136
NL 46.229.168.137
NL 46.229.168.138
NL 46.229.168.139
NL 46.229.168.140
NL 46.229.168.141
NL 46.229.168.142
NL 46.229.168.143
NL 46.229.168.144
NL 46.229.168.145
NL 46.229.168.146
NL 46.229.168.147
NL 46.229.168.148
NL 46.229.168.149
NL 46.229.168.150
NL 46.229.168.151
NL 46.229.168.152
NL 46.229.168.153
NL 46.229.168.154
US 46.229.168.161
US 46.229.168.162
46.229.168.163
46.229.168.65
46.229.168.66
NL 46.229.168.67
NL 46.229.168.68
NL 46.229.168.69
NL 46.229.168.70
NL 46.229.168.71
46.229.168.72
46.229.168.73
NL 46.229.168.74
46.229.168.75
NL 46.229.168.76
NL 46.229.168.77
46.229.168.78
NL 46.229.168.79
NL 46.229.168.80
46.229.168.81
NL 46.229.168.82
NL 46.229.168.83
46.229.168.84
NL 46.229.168.85
NL 46.229.168.86
46.229.173.137
NL 46.229.173.66
PL 46.248.173.98
85.208.96.1
85.208.96.2
85.208.96.65
85.208.96.66
85.208.96.67
85.208.96.68
85.208.96.69
85.208.96.7
85.208.96.70
85.208.96.71

User Agents

Mit diesen User-Agent-Strings identifiziert sich semrushbot:

  • Mozilla/5.0 (compatible; SemrushBot/6~bl; http://www.semrush.com/bot.html)
  • Mozilla/5.0 (compatible; SemrushBot/1.0~bm; http://www.semrush.com/bot.html)
  • SEMrushBot
  • Mozilla/5.0 (compatible; SemrushBot/3~bl; http://www.semrush.com/bot.html)
  • Mozilla/5.0 (compatible; SemrushBot-BA; http://www.semrush.com/bot.html)
  • Mozilla/5.0 (compatible; SemrushBot/2~bl; http://www.semrush.com/bot.html)
  • Mozilla/5.0 (compatible; SemrushBot-SA/0.97; http://www.semrush.com/bot.html)
  • Mozilla/5.0 (compatible; SemrushBot-SI/0.97; http://www.semrush.com/bot.html)
  • Mozilla/5.0 (compatible; SemrushBot/1.2~bl; http://www.semrush.com/bot.html)
  • Mozilla/5.0 (compatible; SemrushBot/0.98~bl; http://www.semrush.com/bot.html)