El documento robots.txt es una elemento clave para toda sitio que pretende estar bien posicionada por los motores de búsqueda como Chrome . Funciona como un mapa para los bots, indicándoles qué áreas de tu web pueden deben rastreadas y cuáles no . La óptima configuración de este documento ayuda a evitar problemas de posicionamiento, mejorar