El documento robots.txt es un herramienta clave para toda sitio web que desea estar bien vista por los motores de búsqueda como Bing. Funciona como un mapa para los bots, indicándoles qué https://soloweb.mx/knowledgebase/211/Sitemap-y-robots.txt-para-mejorar-tu-web.html