Kapitola I: Rok 1994 Spomienka na prvý pavúk v sieti
„Pamätám si, ako mi kolega v roku 1995 ukazoval Altavistu,“ hovorí náš hlavný inžinier pri káve. Vtedy sa internet nepodobal na dnešný nablýskaný priestor. Bol to divoký západ textových súborov. Indexovanie vtedy znamenalo, že jednoduchý skript prechádzal stránku po stránke a ukladal si každé jedno slovo do obrovskej tabuľky. Ak ste hľadali slovo 'auto', systém vám vyhodil tisíce stránok, kde sa toto slovo nachádzalo, bez ohľadu na to, či išlo o predajňu alebo o článok o histórii dopravy.
— A to bolo všetko? — pýtam sa ho. „V podstate áno. Žiadny kontext, žiadna relevancia. Len hrubá sila databáz.“ Tento mechanický prístup dominoval dekádu. Crawler, alebo 'pavúk', bol vtedy hrdinom dňa. Navštevoval servery, sťahoval HTML a my sme dúfali, že tie kľúčové slová v meta-tagoch nie sú len spam. Bol to čas, kedy indexovanie bolo remeslom o kapacite diskov, nie o pochopení obsahu.