Apenas estoy arrancando con mi blog, pero ya llevo algo de conocimiento acumulado por las largas horas de lectura de otros blogs, y la infinidad de feeds que rápidamente leo relacionados a este tema.

robot.txt es un archivo que nos permite dar instrucciones a los buscadores (realmente a sus robots) de que contenido pueden a no ver de nuestro sitio; esto con el fin de protegernos y de mejorar nuestro posicionamiento en los buscadores.

En sigt.net encuentro un excelente archivo robot.txt especialmente diseñado para proteger nuestros archivos de  WordPress y para evitar abusos por parte de algunos robots.

Link

Compártelo