Spiders e roBots contro il web Cloacking

Friday, August 4th, 2006

Mi capita di controllare spesso i log del mio server più per scrupolo che per altro e mi ritrovo sempre più spesso delle richieste a pagine inesistenti da parte di agent che corrispondono a motori di ricerca Un esempio l'url /SlurpConfirm404/modem.html sul mio server non esiste ma il signor Slurp l'ha ...