Der Index ist der Datenbestand einer Suchmaschine. Er enthält Informationen zu allen Websites, die über die Suchmaschine gefunden werden können.

Ist eine Website nicht im Index einer Suchmaschine, dann können Benutzer die Website nicht über die Suchmaschine finden. Die Suchmaschinen aktualisieren ihren Index regelmäßig. Bis zu einem gewissen Grad können Sie die Indexierung über das Anlegen einer robots.txt auf der obersten Ebene Ihres Webspaces steuern. 

Erklärungen und Beispiele zu Inhalten einer robots.txt finden Sie z.B. in der Google Search Central.