Процес додавання в індекс пошукової системи дані про нові сторінки веб-сайтів або оновлення інформації про змінені, які вже присутні в БД.
Опубліковані в мережі матеріали можуть стати доступними користувачам пошуковика лише після візиту пошукового робота, який здійснить індексацію веб-сайту.
Щоб це сталося швидше, доцільно повідомити про появу нового ресурсу. Можна використати функцію «add URL» (так звана «аддурілка»), яка є у всіх популярних пошукових систем.
Управляти рекомендаціями щодо індексації сайту пошуковими ботами можна за допомогою відповідного налаштування файлу robots.txt.