Fodr botterne: Et sjovt eksperiment med LLM-skrabere
lol... babble.c... mon ikke min kone har fået en kopi af det stykke kode? 😅 Spøg til side — sjovt lille eksperiment med bot-crawling her, læseværdigt. 📚👍🏻
LLM-bots oversvømmer websider, ignorerer regler og skifter IP’er konstant. Den billigste modstrategi? Fodr dem med meningsløst skrammel, så de sluger ressourcer uden værdi.
Opsummering
Artiklen beskriver, hvordan forfatteren satte en dynamisk “nonsense maze” op for at identificere LLM-skrabere, som nu står for næsten al servertrafik uden at øge den samlede mængde forespørgsler. Han hævder, at disse bots er aggressive, ignorerer robots.txt og skifter user-agent eller IP-adresse for at undgå blokering. Samtidig gør de omkostninger til lager og båndbredde mærkbare. Ifølge forfatteren virker traditionelle modforanstaltninger som blokering, rate limits og paywalls dårligt.