Ahora, cree el archivo 'robots.txt' en su directorio raíz. Copia el texto anterior y pégalo en el archivo de texto.
Generate a customized robots.txt file to guide search engine crawlers and improve indexing.