Der Google Index ist die Datenbank von Google, in der sämtliche Webadressen des frei zugänglichen World Wide Webs gespeichert sind. Jede Web Adresse, die bei einer Suchanfrage über Google in der Ergebnisliste angezeigt wird, ist also im Google Index hinterlegt. In der Summe sind dies Milliarden von Webseiten, die im über 100.000.000 Gigabyte großen Google Index gespeichert sind. 

Die Webseiten, die im Google Index gespeichert werden, wurden zuvor von einem Web-Crawler indexiert. Die Crawler-Technologie von Google, der Google Bot, ist ein Algorithmus, der von selbst arbeitet. Wenn dem Googlebot durch bestimmte Parameter der Zugang gewährt wird, lädt dieser eine Website herunter und speichert diese im Index von Google. Dabei erhält jedes einzelne Wort, das Crawler auf einer indexierten Seite gefunden haben, einen Eintrag im Index. Aus dem Index stammen wiederum die Informationen, die Google den Usern zur Verfügung stellt.

Mehr dazu hier!