Las páginas indexadas por los motores de búsqueda garantizan un tráfico estable al recurso. Pero si en este momento su sitio está en desarrollo, entonces la aparición de robots de búsqueda en las páginas del recurso es altamente indeseable, ya que la información sobre las secciones sin completar que ha ingresado a la búsqueda puede privar a su recurso de visitantes objetivo durante mucho tiempo. Para proteger temporalmente el sitio contra el rastreo de robots, debe prohibir su indexación. Para hacer esto, es suficiente realizar algunos cambios simples en el código del recurso.
Es necesario
- - tener al menos conocimientos básicos de HTML
- - sepa cómo abrir la carpeta raíz del directorio de archivos de su sitio
Instrucciones
Paso 1
Primero, verifique si su sitio tiene un archivo robots.txt que sea responsable de la correcta indexación del recurso. Para hacer esto, vaya a http: ⁄ ⁄ www site ru ⁄ robots.txt ⁄, reemplazando http: ⁄ ⁄ www site ru por la dirección de su sitio web.
Paso 2
Si, al hacer clic en este enlace, se abre un registro del formulario "Agente de usuario: * No permitir …", significa que el archivo requerido está presente en su sitio. En este caso, vaya a la carpeta raíz donde se almacenan todos los archivos de su sitio y busque el archivo robots.txt.
Paso 3
Si el sistema de administración de su sitio le permite editar este archivo directamente desde la carpeta raíz, abra robots.txt a través de un servicio auxiliar. Si es imposible realizar cambios en el archivo a través de la interfaz del sistema, guarde el documento en su computadora y luego ábralo a través del programa Bloc de notas.
Paso 4
Cambie las dos primeras líneas del documento a lo siguiente:
Agente de usuario: *
No permitir: /.
La inscripción "User-agent: *" indica que las siguientes reglas se aplican a todos los robots de búsqueda, y "Disallow: /" significa que todo el sitio no está indexado. Después de corregir el contenido, guarde el archivo.
Paso 5
Si su sitio no tiene un archivo robots.txt, cree un nuevo documento en el Bloc de notas. Ingrese las mismas dos entradas, colocando cada una de ellas en una nueva línea y guarde el archivo usando el comando "Archivo-Guardar como …" bajo el nombre robots.txt.
Paso 6
Sube el documento creado a la carpeta raíz de tu sitio y verifica su funcionamiento nuevamente siguiendo el enlace http: ⁄ ⁄ www · sitio · ru ⁄ robots.txt ⁄, donde en lugar de "http: ⁄ ⁄ www · sitio · ru" ingresa la dirección de su recurso.
Paso 7
Otra forma de prohibir la indexación es insertar metaetiquetas especiales en el código HTML de las páginas del sitio. Para utilizar este método, busque en el código de una de las páginas del sitio las inscripciones " y colóquelo inmediatamente después de la " línea ".
Paso 8
Si su sitio está escrito en HTML, entonces este código debe insertarse en cada página. Para un recurso PHP, es suficiente colocar dicha entrada en el archivo header.php.
