Linkstrukturen på nettet tjener til at binde alle de sider sammen. Links tillade, at søgemaskinernes robotter, kaldet "crawlers" eller "spiders", for at nå de mange milliarder af sammenkoblede dokumenter på nettet. Når motorerne finde disse sider, kan de dechifrere koden fra dem og gemme udvalgte værker i store databaser, til at være mindede om senere, når det er nødvendigt for en søgning. For at opnå den monumentale opgave at holde milliarder af sider, der kan tilgås i en brøkdel af et sekund, den søgemaskine virksomheder, der har bygget datacentre over hele verden. Disse monstrøse lagerfaciliteter hold tusindvis af maskiner, der behandler store mængder af information meget hurtigt. Når en person foretager en søgning på en af de store motorer, de kræver resultater med det samme; selv et en - eller to-sekunders forsinkelse kan medføre utilfredshed, så motorerne arbejder hårdt på at give svar så hurtigt som muligt.