Индексация — это процесс лексического анализа роботом поисковой системы содержимого веб-страниц, обнаружения новых страниц и изменений на существующих и внесения этой информации в базу данных поискового сервера.
Обычно индексация происходит в два этапа: обнаружение ссылки на страницу и постановка ее в очередь для индексации и непосредственно индексация содержимого страницы и запись этой сжатой информации в индекс поисковой системы. В этот момент происходит поиск в контенте страницы ссылок на другие документы веба.
Процесс индексации следует отличать от процесса ранжирования. Первое — это сбор информации, второе — упорядочивание положения страницы в индексе.