Indeks, w kontekście wyszukiwarek internetowych, to ogromna baza danych zawierająca informacje o stronach w sieci, które zostały przeszukane przez roboty wyszukiwarek (takie jak Googlebot w przypadku Google). Wyszukiwarki indeksują strony, aby móc szybko dostarczać użytkownikom dopasowane wyniki wyszukiwania na podstawie zapytań. Indeks zawiera nie tylko adresy URL stron, ale także kluczowe informacje o zawartości każdej strony, takie jak tekst, linki, dane o strukturze i hierarchii strony, a także metadane, które pomagają określić tematykę i wartość strony dla potencjalnych zapytań użytkowników.
W praktyce indeks jest używany przez algorytmy wyszukiwarek do szybkiego przeszukiwania i identyfikowania stron, które najlepiej odpowiadają zapytaniom użytkowników. Dzięki temu, gdy wpisujesz zapytanie w wyszukiwarkę, algorytm nie musi przeszukiwać całego Internetu na żywo, co byłoby czasochłonne. Zamiast tego wyszukiwarka przeszukuje swój indeks, aby znaleźć i wyświetlić najbardziej odpowiednie strony w wynikach wyszukiwania.
Indeksowanie stron jest ciągłym procesem, ponieważ w sieci pojawiają się co chwilę nowe strony, a istniejące są aktualizowane lub usuwane. Wyszukiwarki regularnie przeszukują zasoby, aby zaktualizować swój indeks i zapewnić, że wyniki wyszukiwania odzwierciedlają najnowsze informacje dostępne online.