La tarea de eliminar páginas individuales o todo el sitio de los motores de búsqueda la enfrenta un webmaster cuando cambia información, cambia un dominio, combina varios recursos y una serie de otras razones. Hay varias formas de resolver el problema, según el resultado deseado.
Instrucciones
Paso 1
Elimine la página que se va a desindexar para que el servidor devuelva un mensaje de error cuando intente navegar a la página web seleccionada HTTP / 1.1 404 No encontrado. Para aplicar los cambios seleccionados, debe esperar a que el robot vuelva a acceder a la página requerida.
Paso 2
Utilice el archivo robots.txt del archivo raíz del robot para excluir las secciones o páginas seleccionadas de la indexación del motor de búsqueda. Para evitar que se muestre el panel de administración en el motor de búsqueda, use el comando: User-Agent: * Diaallow: / admin / O, para excluir la página seleccionada de la indexación, ingrese el valor: User-Agent: * Disallow: / selected_page.html # Para aplicar los cambios, el robot debe visitar nuevamente la página seleccionada.
Paso 3
Utilice el método de metaetiquetado para agregar una regla especificada en código HTML a todas las páginas requeridas: esto es necesario para excluir páginas no deseadas del motor de búsqueda.
Paso 4
Seleccione un método para crear X-Robots-Tag para introducir comandos en el encabezado http que no se muestran en el código de página: X-Robots-Tag: noindex, nofollow Este método es más útil para excluir páginas o secciones seleccionadas de la indexación de motores de búsqueda extranjeros.
Paso 5
Utilice una página de control de webmasters especial en Yandex: https://webmaster.yandex.ru/deluri.xml o en Google: https://www.google.com/webmasters/tools. Esto se hace para prohibir la visualización de los página, sección o sitio completo en el motor de búsqueda seleccionado.
