Archivos de etiquetas: Bot

Hace unos días publicamos una entrada sobre Cómo eliminar una web de archive.org bloqueando sus bots a través de robots.txt. Hoy os explicamos como bloquear los bots de archive.org en WordPress.

Últimamente me han preguntado varias personas como puede ser que haya determinadas páginas web bien posicionadas en términos muy competidos, pero que en herramientas como AHREFS, MajesticSEO o MOZ no tienen casi enlaces entrantes. Una de las formas de conseguirlo es bloqueando el acceso a los bots de estos servicios a las páginas que enlazan al «money-site».

Los bots o arañas web pueden suponer un serio problema de rendimiento en las instalaciones de WordPress, pero también nos ayudan a que nuestras páginas aparezcan en los buscadores. Por estas razones es importante encontrar un equilibrio y controlar todos estos accesos.