Как узнать количество страниц на сайте?

Нередко перед владельцем сайта или seo-специалистом стоит вопрос о том, сколько же страниц имеет сайт, также иногда мы хотим узнать количество страниц на сайте конкурента. И разговор идёт не о количестве страниц сайта индексируемых той или иной поисковой системой, которые можно проверить, набрав в Google “site:[url вашего сайта]”. А о том, как проверить общее фактическое количество страниц на сайте, когда нужно учесть даже те страницы, которые заблокированы в robots.txt или просто по каким-то причинам не проиндексированы.

В Google поиске при проверке страниц в индексе лучше пролистать до последней страницы, именно на последней странице будет видно точное значение, а не примерное.

Инструменты для определения количества страниц на сайте

• ScreamingFrog

Данный инструмент чрезвычайно полезен. Собирает абсолютно все данные о сайте, включая количество страниц (даже страницы заблокированные файлом robots.txt), ошибки сервера и ссылки, перенаправления, внешние и внутренние ссылки и их статус, проблемы с заголовками страниц, метаданные, время отклика страниц, alt текст изображений, дубликаты и т.д. Для каждой операции сервис формирует отчёт, который можно скачать в таких форматах: CSV, XLS, XLSX, GSHEET.

Бесплатная версия сканирует до 500 URL-адресов и предлагает воспользоваться 7 функциями (анализом ключевых слов, поиском неработающих ссылок, дублей, ошибок). Если на вашем веб-сайте ссылок больше, вам нужно перейти на премиум-версию и тогда вы сможете пользоваться абсолютно всеми функциями программы (их 29 на сегодняшний день). Для этого вам необходимо будет скачать и установить этот инструмент.

• www.xml-sitemaps.com

Вообще этот инструмент предназначен для создания карт сайта. Он бесплатно и быстро создает карты сайта для ресурсов с количеством страниц меньше 500, для увеличения количества необходимо купить подписку. Во время генерации карты он обходит абсолютно весь ваш сайт, в итоге вы получаете точное число страниц на вашем ресурсе. Преимущество этого инструмента в том, что его не нужно скачивать и устанавливать на ваш компьютер.

• Beam Us Up

Бесплатный сервис, который сканирует сайты на наличие ошибок, таких, как: битые ссылки, а также недостающие заголовки страниц, дублированный контент и выявлять другие проблемы. Одним словом, делает всё то же, что и ScreamingFrog, но менее качественно, зато полностью бесплатно.

Подведем итоги

В этой статье мы указали лишь самые популярные и доступные инструменты для выявления точного количества страниц на сайте. На просторах интернета вы можете найти ещё десятки различных платных и бесплатных краулеров, которые помогут справиться с поставленной задачей. Но именно по нашему опыту, самым точным, удобным и надёжным инструментом является ScreamingFrog. С ним всегда можно быстро и эффективно провести выгрузку сайта и обнаружить все недостатки – от дублей заголовков до отсутствующих мета описаний на отдельных страницах.

Сергей Иванченко

CEO

Страница автора