Je me demandais quelles solutions vous utilisiez concrètement pour bloquer les mauvais robots sur vos sites WordPress. J'ai bien sûr regardé du côté du fichier robots.txt, mais j'ai l'impression que c'est facilement contournable. Est-ce qu'il existe des plugins ou des techniques plus efficaces, notamment pour limiter le spam ou l'aspiration de contenu ? Je suis preneuse de vos retours d'expérience !
Salut, Pour compléter, tu cherches surtout à te protéger de quel type de robots exactement ? Spam, scraping de contenu, brute force login... ? La solution idéale dépendra beaucoup de ton principal problème, je pense.
C'est vrai que ma question manquait de précision. Je vise principalement à limiter le scraping de contenu et le spam via les formulaires de commentaires. Je me suis rendu compte que certains robots aspirent une quantité importante d'articles en un temps record, ce qui impacte les performances du serveur. Pour le spam, même si Akismet fait bien son travail, j'aimerais réduire le nombre de requêtes inutiles.
Pour le scraping, une approche assez efficace consiste à surveiller les schémas d'accès anormaux dans tes logs serveur. Tu peux identifier les IPs qui font un nombre de requêtes suspect en peu de temps, et les bloquer via .htaccess ou directement au niveau du firewall. Ya aussi des plugins qui font ça automatiquement, mais faut voir si ça vaut le coup niveau perfs. Sinon, pour le spam, t'as pensé à mettre en place un honeypot sur tes formulaires ? C'est un champ invisible pour les humains, mais que les robots remplissent systématiquement. Ça permet de filtrer pas mal de bots sans trop d'efforts.
Clairement, l'analyse des logs serveur, c'est du boulot, mais c'est payant ! J'ajouterais qu'en complément du .htaccess, certains hébergeurs proposent des outils anti-DDoS ou de filtrage des IPs malveillantes directement dans leur panel. Côté honeypot, c'est super simple à mettre en place et tellement efficace, j'adhère complètement.
L'idée de l'honeypot, c'est vrai que c'est bête comme chou, mais tellement malin ! Je vais regarder ça de plus près. Pour les outils anti-DDoS des hébergeurs, je vais me renseigner aussi, merci du tuyau.
En parlant de robots.txt, je suis tombée sur cette vidéo
https://www.youtube.com/watch?v=4NYqCmJ1-LA[/video] qui explique bien son utilité (et ses limites) pour le SEO. Ça vulgarise pas mal le truc, et ça permet de revoir les bases si besoin.
Merci pour le partage de la vidéo sur robots.txt ! C'est toujours bien de revoir les bases, même si on pense maîtriser le sujet. Il y a tellement de subtilités parfois...
Je suis d'accord, les bases sont toujours bonnes à revoir. 👌 Et puis, une piqûre de rappel sur le robots.txt, ça ne peut pas faire de tort. 😉
EchoDuVent55 : le 17 Avril 2025