[l] Ich habe alleine gestern über 11000 Zugriffe auf das Blog von einem User-Agent namens "GPTBot" gehabt.
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; GPTBot/1.2; +https://openai.com/gptbot)
Bei mir hat er immerhin robots.txt zu Laden versucht. Andere Leser schreiben mir, dass der Bot bei ihnen einmal alles runtergeladen hat, außer robots.txt.
Wenn ihr also immer schön Bots nachpflegt: Der Bot ist glaube ich der wichtigste, den man abweisen sollte.
There are no comments yet.