El fichero robots.txt es una herramienta fundamental para el rendimiento de tu estrategia SEO, ya que controla los rastreadores web pueden indexar tu plataforma web . A través de este sencillo método , puedes restringir que se rastreen secciones innecesarias de tu sitio web , conservando recursos y