Ключевыми
понятиями для продвижения являются «ранжирование» и «индексирование». Без
понимания этих процессов невозможно заниматься грамотным SEO.
Процесс
сканирования страницы поисковыми роботами и размещение полученных файлов в
поисковом индексе называется индексацией.
Основная задача сеошника – проследить,
чтобы все веб - страницы сайта были проиндексированы, т.е. оказались в базе
данных поисковой системы (индексе).
Процесс
индексации можно осуществить двумя способами:
· вручную
добавить страницы в индекс поисковика;
· поисковый бот сам находит сайт и сканирует его содержание (в этом случае
работой робота можно управлять).
Ключевой
механизм влияния на этот процесс – текстовый файл robots.txt. Он содержит набор
инструкций, которым напрямую подчиняется бот. Через специальные директивы
указывают:
· для какой поисковой системы действуют правила;
· разрешение/запрет на сканирование отдельных
объектов;
· временные ограничения на скачивание и другие
параметры.
Файл sitemap.xml предоставляет
поисковому роботу основные материалы ресурса, которые должны быть
проиндексированы.
Когда
пользователь вводит поисковый запрос, то система находит десятки, а то и сотни
различных ответов на него. Процесс
ранжирования позволяет отсортировать найденные варианты с учетом их
релевантности, т.е. адекватности заданному вопросу.