Структура сайта — что это такое?

Структура сайта — это схема размещения всех страниц и разделов в интернет-ресурсе. Она может быть нескольких видов: линейная, блочная, древовидная.

При древовидной схеме страницы объединяются в отдельные ветки в зависимости от тематики. Такая архитектура чаще всего используется при создании коммерческих проектов, которые обладают широким семантическим ядром. Пример древовидной иерархии ресурса вы можете увидеть на скриншоте ниже:

Как создать структуру сайта?

Внутренняя структура проекта разрабатывается на этапе его создания. Грамотная организация разделов имеет очень важное значение для SEO-оптимизации, так как помогает поисковым роботам быстрее находить расположение новых элементов, а посетителям лучше ориентироваться в содержании ресурса.

Вебмастер может указать поисковой системе какие разделы и страницы ресурса можно включать в поиск, а какие необходимо закрыть от пользователей. Обычно для этого используется файл robots.txt.

Инструмент Яндекс.Вебмастера для внутреннего анализа структуры сайта

Чтобы убедиться, что правила индексации настроены верно и робот загружает контент правильно, в Яндекс.Вебмастере существует специальный инструмент. Чтобы воспользоваться им перейдите в раздел «Индексирование» — «Структура сайта». Сервис покажет статистику проекта в виде дерева:

• В столбце «Загружено» отображается общее количество страниц, к которым обратился поисковик. В данный показатель включаются как проиндексированные страницы, так и те, которые вернули ошибку.
• В графе «Страниц в поиске» указано количество страниц, которые были добавлены в результаты поиска.

Почему робот загрузил не все страницы?

Поисковый алгоритм совершает обход ресурса в течение определённого времени. Поэтому они попадают в выдачу не сразу. Чтобы ускорить этот процесс, вы можете обновить файл Sitemap.

Также обратите внимание, что сервис показывает статистику только по тем разделам структуры сайта, которые содержат более 10 страниц и составляют не менее 1% от общего количества страниц, загруженных в базу поисковой системы. Чтобы узнать статистику подраздела, который не удовлетворяет этим критериям, вы можете добавить его вручную.

Как добавить раздел?

Нажмите кнопку «Добавить раздел» и укажите в поле ссылку на нужный подраздел, начиная со знака «/» (например, «/podrazdel»).

Вы также можете указать в ссылке лишь часть названия подраздела, используя при этом символ «*». Например, ссылка «/*noutbooki» указывает, что в анализ нужно добавить все разделы, которые заканчиваются на «noutbooki».

Почему некоторые страницы из структуры сайта не попали в выдачу?

Причина может быть одной из следующих:

• Дублирование контента на двух страницах;
• Нарушение правил поисковых систем (спам, вирусы и т.д.);
• На странице размещён редирект;
• Страница возвращает ошибку.

Узнать точную причину можно с помощью инструмента «Проверить статус URL» в разделе «Индексирование» Яндекс.Вебмастера.

Как запретить поисковой системе индексировать разделы или страницы?

Подробнее об этом мы рассказывали в статье: «Анализ, использование и директивы файла robots.txt«.