Was ist gptbot?
Der Webrobot gptbot indexiert und analysiert Inhalte von Webseiten. Er zeigt sich meistens mit der IP Adresse 74.7.227.137 und unter Verwendung des User Agent Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; GPTBot/1.3; +https://openai.com/gptbot). Mit 0.0394% Marktanteil ist gptbot auf Platz 49 der aktivsten Webrobots im Internet.
robots.txt – gptbot blockieren
Füge diese Zeilen in deine robots.txt ein, um gptbot den Zugriff auf deine Website zu verwehren:
User-agent: gptbot
Disallow: /
Du kannst den Zugriff auch gezielt einschränken, statt ihn komplett zu blockieren:
User-agent: gptbot
Disallow: /wp-admin/
Disallow: /wp-includes/
Allow: /
IP-Adressen 10 bekannte IPs
Diese IP-Adressen wurden bisher von gptbot verwendet:
74.7.227.137
74.7.227.140
74.7.227.151
74.7.227.153
74.7.227.160
74.7.227.38
74.7.243.210
74.7.243.217
74.7.243.223
74.7.243.230
User Agents
Mit diesen User-Agent-Strings identifiziert sich gptbot:
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; GPTBot/1.3; +https://openai.com/gptbot)