Software von Suchmaschinen, die Websiten durchsucht, Inhalte ausliest und indexiert.

Einige Suchmaschinen schicken kleine Software-Robots durch das Internet, um möglichst viele Seiten zu erkennen und deren Inhalte zu kategorisieren und in Bezug auf Relevanz zu bewerten. Die Bewertung der Relevanz geschieht durch Filter und Algorithmen der jeweiligen Anbieter.

Suchmaschinen-Optimierung beinhaltet u.a. die Vorbereitung der Website für den Spider / Robot - d.h. die Optimierung der Erkennbarkeit von Inhalten. Weiter beinhaltet die Suchmaschinen-Optimierung die seriöse Erhöhung der Relevanz der Inhalte.