El documento robots.txt es una elemento clave para toda página web que desea ser bien posicionada por los motores de búsqueda como Bing. Opera como una mapa para los bots, indicándoles qué secciones de tu web pueden ser rastreadas y cuáles se deben excluir . La óptima configuración de este fichero p