Indeksowanie
Za indeksowanie danej strony internetowej odpowiadają roboty wyszukiwarki. Robot wchodząc na daną witrynę bada jej treść oraz składnię znaczników semantycznych. Warto zadbać o odpowiednią budowę tekstu, ponieważ ułatwia to proces indeksowania, a strona osiąga wyższe wyniki w wyszukiwarce internetowej. Robot to program, który chodząc po stronach, zapisuję ją w bazie danych wyszukiwarki na frazy, które zinterpretował jako kluczowe. Na podstawie tych informacji Google ustawia kolejność wyświetlania wyników.
Proces indeksowania
Proces indeksowania umożliwia bardzo szybkie dostarczanie odpowiedzi na zadane pytanie użytkownika, co ułatwia korzystanie z wyszukiwarki. Dopóki strona nie zostanie odwiedzona przez robota (nie zostanie zaindeksowana) nie wyświetla się w wynikach organicznych. Aby ułatwić nowym stronom start w sieci, można skorzystać ze specjalnych witryn, gdzie poprzez odpowiedni formularz, zgłaszamy nasza stronę do danej wyszukiwarki. Nie ma konieczności zgłaszania wszystkich podstron danego portalu. Robota, gdy wejdzie na stronę główną, poprzez menu odwiedzi także inne podstrony serwisu, w tym plik robots.txt i mapę strony.