Bloquer les robots Majestic, Ahrefs, Semrush ?

[JGSEO]

Bonjour à tous collègues SEO !
Question simple : est-ce que ça vaut le coup, selon vous, de bloquer les bots des Outils SEO avec le .htaccess pour camoufler son réseau de PBN ?

Est-ce que cela impacte la puissance du PBN en question ?

Merci d'avance !

[Nicolaseo]

C'est même très important de le faire pour eviter de se faire dénoncer par un concurrent et ca n'influence en rien le référencement

[Cyril G.]

C'est même très important de le faire pour eviter de se faire dénoncer par un concurrent et ca n'influence en rien le référencement

+1

[Zer00CooL]

Si on n'utilise pas de PBN, est ce qu'il est quand même nécessaire de bloquer les robots du type Semrush ?
Je constate dans mes logs un énorme trafic venant du bot de semrush, j'ai des requêtes toutes les 2 ou 3 secondes, en continue.
Je suppose que cela a un impact sur les performances du serveur.

Bloquer le robot de semrush a un impact sur le référencement du contenu ?

User-agent: SemrushBot
Disallow: /

[Cyril G.]

j'essaye de bloquer un max.oui cela peut jouer sur le serveur. Par contre je ne vois pas comment semrush agirait sur le seo

[Julie]

Bloquer des robots à forcément un impact sur le référencement et c'est pour cette raison que nous le faisons ou pas.

Les robots viennent pour obtenir des infos sur ton site. Si tu leur bloque l'accès il ne vont pas te référencer ou mal.

Faut juste ce poser la question simple "Est ce que mon site gagne quelque chose à être présent dans tel ou tel classement ?".

Si tu vend du SEO et que ton site cartonne sur Semrush ceux qui l'utilisent vont souvent te voir et ça peut t'apporter des ventes ou des partenariats.

Tu peux aussi recevoir beaucoup de demandes d'échanges de liens.

Mais à l'heure du Big Data tu peux aussi te retrouver dans beaucoup d'autres listings et certains t'offriront des liens indexable donc oui ca peut avoir un réel impact sur le SEO et ton biz.

[JGSEO]

Zer00CooL, est-ce que tu as fais une recherche en aval pour savoir si les IPs de ces robots étaient effectivement des IPs associées à Semrush ?
Parce que j'ai récemment eu un soucis de trafic énorme par des soi-disants crawlers de Google... il s'est avéré au final que c'étaient des tentatives de hacker mon WP via xmlrpc.php. Des connexions qui utilisaient l'user-agent Google pour être moins suspicieuses.

Après il faut bien savoir que bloquer Semrush sur ton site, ça veut dire que les liens sortant de TON site n'apparaitront pas dans leur base de donnée. Donc ton profil de liens à toi ne sera pas changé, vu qu'ils viennent de sites externes.

Par contre pour les autres fonctionnalités de tools notamment en lien avec le contenu, ça peut effectivement poser problème si tu bloques..

[Cyril G.]

Hello, avec l'outil Vous devez être inscrit et présenté pour voir les liens ainsi que d'autres éléments qui peuvent être caché aux invités. , tu peux paramétrer cela dans ton htaccess. Ils mettent à jour régulièrement le blocage des ip des bot majestic et semrush