robots.txt: Configuración Exhaustiva para SEO
El fichero robots.txt es una herramienta clave para el alcance de tu plan SEO, ya que controla cuáles motores web pueden explorar tu sitio web . A través de este sencillo sistema , puedes bloquear que se rastreen secciones innecesarias de tu sitio web , conservando recursos y asegurando una mejor