El archivo robots.txt es un elemento fundamental para cualquier página web que desea ser bien posicionada por los motores de búsqueda como Bing. Funciona como una mapa para los bots, indicándoles https://soloweb.mx/knowledgebase/211/Sitemap-y-robots.txt-para-mejorar-tu-web.html