Nous avons réussi à mettre en place une sorte de robots txt au niveau serveur Nginx qui va stopper les vilains robots connus pour tout le monde... avec un code 444 (voir awstats/cpanel en exemple ici :
| 444 | Unknown error | 4 751 | 2.9 % | 0 |
Pourquoi ?
- beaucoup d'entre vous oublient de le créer, notament les wordpresseurs ! et de plus ce n'est pas toujours simples, certes...
- les bots ne respectent plus les contenus des robots.txt :
http://www.kloth.net/internet/badbots.php
Nous espérons que cela ne causera pas de problème, nous allons voir les retours les prochains temps...
Voyez vos visites en temps réel dans cpanel/visiteurs/cliquez état dans le bouton réglages à droite afin de voir les codes érreur, et si vous voyez 444 contactez-nous pour qu'on regarde ce qu'on peut faire...
******************************
20/12/2015 06h01 - Premier retour :
Il semble que notre système fonctionne pas mal du tout pour ces premiers 24h, 3-7% du traffic selon chaque site est pris dans les mailles et envoyés au trou noir... Nous allons voir si nous pouvons faire mieux les prochains jours, et il faut avoir des stats su run mois entier à partir du 1 du mois pour savoir les chiffres éxacts... et surtout avoir des retours sur du traffic légitime qui seraient bloqué : peu probable mais pas impossible
Saturday, December 19, 2015
