engl. für "kriechen"

Ein Dienst von Suchmaschinen, der Web-Dokumente durchsucht und zu einer Datenbank hinzufügt. Nach der Indizierung einer Seite folgt er allen darin enthaltenen Verknüpfungen und indiziert diese Dokumente ebenfalls.

Mehr zum Thema