IlpoKotisivulle kaiken kieltävän robots.txt:n lisääminen poisti accesslokeista botit, joiden useragentista näki ketä ne olivat.
Nyt lokit on vain täynnä jotain Ihan Tavallisia Chromeja Ja Safareja :) jostain alibaban ja muutaman muun verkosta.
Ari Sovijärvi@feuer Jos tilastoi selainversioita web-serverin logeista, tulee hyvin äkkiä esille nuo haku/AI-botit jotka yrittävät esittää tavallista selainta. Yleensä on hirveä piikki hyvin tietyssä versionumerossa joka ei ole ollut ajankohtainen pitkään aikaan.
100 eri IP:tä hakemassa koko siten sisältöä vuoden vanhalla Chromella jossa on täsmälleen sama versionumero? Se on hyvin sus.