ROBOTS.TXT

Este fichero también lo he introducido en las dos web,ya que es útil y fácil de crear. Se trata de introducir el nombre del robots en un editor de texto y subirlo. Estos ficheros sirven para que tu web sea vista por los robots al rastrear y la indexen, de ese modo introducen la web en los respectivos directorios de los buscadores respectivos. Estuve buscando por internet y he encontrado más nombres de robots aparte del de google.