Tag Archives: robots.txt
mercredi / Sep 04, 2013 /
Bloquer les robots crawler indésirables
Bon, pour reprendre le sketch des inconnus il y a le bon bot et le mauvais bot.Le bon passe inaperçu chope “ses” datas (et oui sur internet la data est tienne), pourri un peut les stats et se casse… le mauvais bots chope “ses” data, te pourri tes stats, te pique tes mail et tes…
Lire +
Commentaires récents