Thema: Bots

Nicht Besucher verursachen den größten Teil des Datenverkehrs, sondern Bots. Auf vielen Websites entfällt mehr als die Hälfte der Anfragen auf Crawler, Scraper und Trainingsdatensammler – Zugriffe, für die Server rechnen und Netze übertragen, die aber niemand liest. Das Bemerkenswerte daran: Diese Last taucht in keinem Analysewerkzeug auf, das mit JavaScript im Browser misst. Sie steht nur im Server-Log. Wer dort hineinschaut, findet regelmäßig Einsparungen, die keinem Menschen fehlen würden.