A veces, un webmaster necesita eliminar una de las páginas indexadas del motor de búsqueda. La mayoría de las veces, se recurre a esta operación después de ingresar por error la dirección de la página en la lista general del mapa del sitio. En un momento, los especialistas de la compañía Megafon encontraron este error (los mensajes sms estuvieron disponibles para cualquier usuario del motor de búsqueda Yandex).
Es necesario
Sitio personal
Instrucciones
Paso 1
Una de las formas más fáciles de eliminar su propia página web de los archivos de los motores de búsqueda es eliminarla físicamente, cambiar la dirección de ubicación y eliminarla falsamente (debe establecer el atributo de la página eliminada). Después de transformar esta página, el robot de búsqueda verá la siguiente línea en lugar del contenido: HTTP / 1.1 404 Not Found. Sin embargo, no olvide que los robots de búsqueda pueden visitar el sitio cada 3 horas, y quizás una vez cada 2-3 días. Por lo tanto, debe esperar un poco para obtener el resultado.
Paso 2
La siguiente forma es editar el archivo robots.txt, que determina la ruta del rastreador tan pronto como llega a su sitio. Este documento de texto siempre tiene una ubicación: la raíz del sitio. En el primer párrafo, generalmente se indican los parámetros de indexación para el robot Yandex (se diferencia notablemente de otros robots), en el segundo párrafo para todos los demás motores de búsqueda.
Paso 3
Al comienzo del párrafo, debe especificar el título del agente "User-Agent: *" y las direcciones de las páginas que se ocultarán - "Disallow: /wp-content/foto/fotojaba.html". Del mismo modo, debe especificar las direcciones de las páginas o secciones que desea cerrar de la indexación. Tenga en cuenta que este método no proporciona resultados rápidos. Si su sitio tiene poca actividad y las noticias no se difunden en las redes sociales, el procesamiento de nuevos datos puede durar varios días. Además, deberá eliminar las versiones de estas páginas del archivo del servicio de búsqueda.
Paso 4
Un método alternativo para establecer enlaces en el archivo robots.txt es utilizar la metaetiqueta robots del mismo nombre. La sintaxis de esta etiqueta es la siguiente: debe colocarse entre las etiquetas emparejadas [head] y [/head]. El valor de los robots debe colocarse en la metaetiqueta de nombre. Un ejemplo se vería así:
