OpenAI GPTBot hat in den letzten 7 Tagen 1 Mio Request an meinen Server geschickt. Was ist mit deren Crawler los? Scheitert an einem guten alten phpBB?
Zum Vergleich: Anthropic Claude Bot "nur" 50k Anfragen.
OpenAI GPTBot hat in den letzten 7 Tagen 1 Mio Request an meinen Server geschickt. Was ist mit deren Crawler los? Scheitert an einem guten alten phpBB?
Zum Vergleich: Anthropic Claude Bot "nur" 50k Anfragen.
Problem ist u. a., dass der Bot zu blöd ist, mit dem "sid"-Parameter umzugehen. Auf der anderen Seite ist dieser Parameter ohnehin ein unnützes Relikt aus alten Zeiten.
Hier hat einer beschrieben, wie man den sid param für Gäste rauswirft:
https://www.phpbb.com/community/viewtopic.php?p=16064881#p16064881