El fichero robots.txt es una herramienta clave para la sitio web que desea estar bien vista por los motores de búsqueda como Bing. Opera como un mapa para los bots, indicándoles qué secciones de https://soloweb.mx/knowledgebase/211/Sitemap-y-robots.txt-para-mejorar-tu-web.html