Eine dynamische Webseite wird vom Server erst im Moment des Seitenaufrufs erstellt und dem Nutzer angezeigt. Das hat den Vorteil, dass dem Nutzer aktuelle und auf ihn individualisierte Daten angezeigt werden können. Onlinekaufhäuser wie beispielsweise Amazon nutzen dynamische Webseiten, um ihren Kunden entsprechend bereits gekaufter Artikel oder getätigten Suchanfragen, weitere zum Nutzerprofil passende Artikel vorzuschlagen.
Googlebot
Als Googlebot wird der Crawler von Google bezeichnet, der so gut wie alle öffentlich zugänglichen Inhalte bzw. Dokumente des Word Wide Web sammelt, speichert und