Что такое мертвые страницы в SEO

Мертвые страницы в контексте SEO – это веб-страницы, которые больше не доступны пользователям и поисковым системам. Это могут быть удаленные страницы, страницы с ошибкой 404, или устаревшие URL, которые не перенаправляют на актуальный контент. Также мертвыми страницами называю страницы, на которые либо вообще нет никакого трафика, либо он совсем минимальный (например: на такие страницы заходят несколько пользователей в год). Ну и конечно мертвые страницы которые есть на сайте, но их нет в индексе поисковых систем.

Такие страницы портят общую видимость и показатель СЕО оптимизации сайта в глазах поисковых систем. От таких страниц нужно избавлять, причем не просто удалить, а правильно избавиться. В статье описал все возможные причины возникновения мертвых страниц, то, как с ними бороться и почему важно не допускать на своем сайте мертвые страницы.

Откуда берутся мертвые страницы на сайте

Причин появления мертвых страниц много, особенно если вы не знали что это такое и длительное время добавляли и удаляли страницы на своем сайте не знаю как это может повлиять на СЕО продвижение. Также в разных CMS структура URL может изменяться после обновления движка или если вы клацали настройки без понимания того, что вы делаете.

Основные причины появления мертвых страниц:

• Удаление страницы без создания перенаправления (301 redirect).
• Изменение структуры URL без обновления внутренних ссылок.
• Технические ошибки на сайте.
• Страницы дубли.
• Старые страницы/посты блога, которые никогда или давно не обновлялись.
• Истечение срока действия продуктов или услуг на страницах интернет-магазинов.
• Изменение названий страниц в админке (на некоторых платформах это действие пересоздает url страницы).
• Если вы нажимали кнопку в админке под название “пересоздать URL” или генерировать новые URL.
• Изменение или удаление категорий — также может быть причиной, если статьи были привязаны к определенной категории на сайте и структура постоянных ссылок включала иерархию категорий.
• Страницы закрыты тегом “NOINDEX”.
• Страницы Архивов по датам или авторов — часто встречаю такое на сайтах WordPress.
• Страницы меток и рубрик, которые не были заполнены, нигде не используются на сайте и пользователи не могут через сайт перейти на них (доступны только из админки).

Этот список можно писать очень долго, начиная от кривых плагинов, которые дублируют страницы, так и самими CMS которые генерируют несколько URL для одной страницы. Особенно популярная проблема на сайтах с несколькими языковыми версиями, где движок генерирует несколько урлов для на версию языка.

Пример:

Пример того когда одна и та же страница доступна по разным URL адресам.

/en/category-products/seo-stati?language=en

/en/category-products/seo-stati

Да да не удивляйтесь и такое бывает, но данную проблему можно решить правильным использованием тега “canonical”. Установите тег каноникал на такие страницы и поисковик будет определять обе страницы но индексировать только канонически главную страницу. Но вообще не следуют такое допускать у себя на сайте и лучше убирать такие дубли.

Как проверить наличие мертвых страниц на сайте

Чтобы найти все мертвые страницы на сайте можно использовать различные сервисы, программы или сделать это вручную. В зависимости от того, насколько много у вас страниц на сайте.

Ниже будет список бесплатных сервисов и программ, с помощью которых можно узнать о мертвых страницах. 

Бесплатные сервисы и программы для выявления мертвых страниц:

• Google Search Console
• Screaming Frog SEO Spider (бесплатная версия)
• Dead Link Checker
• Site Analyzer 
• Broken Link Checker (для сайтов на WordPress)
• W3C Link Checker
• Dr. Link Check
• Check My Links (расширение для Google Chrome)
• LinkChecker (расширение для Firefox)
• Ahrefs Backlink Checker (бесплатная версия)

Я рекомендую за основу взять гугл серч консоль, потому как основное продвижение сайтов сейчас идет под гугл и этот сервис как никто другой лучше покажет что именно гуглу не нравится. Все ошибки будут  отображены на вкладке “страницы” и справа будут все ошибки, которые можно посмотреть и там и будут все ваши битые урлы и мертвые страницы. Остальные сервисы также хорошо, особенно если вы еще не добавили сайт в серч консоль гугла и у вас еще не собиралась информация о данных по вашему сайту.

Платные сервисы и программы:

• Ahrefs Site Audit
• SEMrush Site Audit
• Moz Pro Site Crawl
• Majestic SEO Tools
• Serpstat Website Analysis
• DeepCrawl
• Botify
• Sitebulb
• OnCrawl
• WebCEO
• Netpeak Spider (особенно популярен в странах СНГ)
• SEO PowerSuite (включает Website Auditor)
• Raven Tools Site Auditor
• Screaming Frog SEO Spider (платная версия)
• CognitiveSEO

Платные сервисы покажут не только мертвые страницы но и другие показатели, но это уже другая история. Если бюджет позволяет, я бы посоветовал использовать serpstat или ahrefs — интуитивно понятный дизайн и навигация. Если не согласны напиши в комментарии что по вашему мнению лучше, я тоже начну пользоваться, если аргументируете на живом примере)

Как мертвые страницы влияют на SEO продвижение сайта

Влияние мертвых страниц на общий показатель seo оптимизации может быть как незначительным, так и критическим. Все всегда зависит от множества факторов, которые нужно знать и понимать. Например если у вас небольшой сайт и вы не частили с удалением старых страниц, то скорей всего это никак не повлияет на продвижение вашего сайта. Но если мы возьмем за пример старый сайт в большим количеством страниц, на котором постоянно что-то делается, время от времени добавляется и удаляется страницы. Тогда добро пожаловать в клуб “О Боже, что же мне теперь делать!?”)))

Но не спешите расстраиваться, тут есть много но и много если. Вот список по которому можно определить критичность и вред мертвых страниц для SEO вашего сайта:

• Объем и Качество Трафика, Теряемого из-за Мертвых Страниц: Понимание, сколько и какого качества трафик теряется из-за мертвых страниц.
• Количество Внутренних и Внешних Ссылок, Ведущих на Мертвые Страницы: Чем больше качественных ссылок ведет на недоступную страницу, тем выше вред. Особенно если это ссылки с хороших сайтов.
• Статус Кодов Ответа Сервера для Мертвых Страниц: Например, ошибки 404 или 410 указывают на различные типы мертвых страниц.
• История Ранжирования и Значимость Страницы для SEO: Определение, насколько важной была страница для SEO до того, как она стала мертвой.
• Соотношение Мертвых Страниц к Общему Числу Страниц на Сайте: Процент мертвых страниц от общего числа страниц сайта.
• Время Существования Мертвых Страниц: Продолжительность, в течение которой страница остается недоступной.
• Влияние на Пользовательский Опыт: Оценка, как мертвые страницы влияют на восприятие сайта пользователями.
• Релевантность и Актуальность Контента Мертвых Страниц: Насколько важен и актуален был контент мертвых страниц.
• Влияние на Структуру Сайта и Навигацию: Как мертвые страницы влияют на удобство навигации и структуру сайта.
• Влияние на Индексацию и Краулинг Сайта: Оценка, влияют ли мертвые страницы на эффективность индексации и краулинга сайта поисковыми

Если простыми словами, то это значит следующее: если ваши мертвые страницы не забирают на себя трафик, не ломают структуру навигации, не имеют важные входящие ссылки и их количество мало в % соотношении всех страниц на сайте, то волноваться незачем. В обратном случае, вам следует заняться работой с мертвяками прямо сейчас, а лучше вчера.

Рекомендации по работе с мертвыми страницами

Абсолютно не важно сколько у всего страниц на вашем сайте. Самое главное чтобы все они были доступны и получали трафик. Отслеживайте все url на своем сайте во избежание негативных последствий в будущем. Благо сейчас полно бесплатных сервисов, которые помогут автоматизировать этот процесс. Мои рекомендации для вас, запомните, а лучше сохраните:

• Google Search Console: Регулярно проверяйте отчеты в Google Search Console для выявления и исправления ошибок краулинга и индексации.
• Регулярный Аудит Сайта: Регулярно проводите аудит сайта с использованием SEO-инструментов для обнаружения мертвых или неработающих страниц.
• Создание 301 редиректов: Если вы удалили страницу или изменили ее URL, 
• Страница 404: Настройте кастомизированную страницу 404 с полезными ссылками, навигацией по сайту и поиском.
• Устаревший Контент: Периодически обновляйте или удаляйте устаревший контент, предварительно настроив перенаправления на актуальные страницы.
• Технический Мониторинг Сайта: Следите за техническим состоянием сайта, чтобы предотвратить возникновение ошибок, приводящих к появлению мертвых страниц или неправильных url адресов.

Интересные факты

• По данным Google, страницы с ошибкой 404 не наносят вреда рейтингу сайта, если они не содержат ценных внутренних ссылок.
• Применение 301 перенаправлений помогает передать до 90-99% ранжирующей силы старой страницы новой.
• Регулярный аудит сайта на наличие мертвых страниц помогает поддерживать его здоровье и улучшает SEO-показатели.

Финалочка

Управление мертвыми страницами – важный аспект SEO, который напрямую влияет на качество сайта в глазах пользователей и эффективность seo продвижения сайта. Регулярный мониторинг, анализ и корректировка мертвых ссылок помогает повысить общую производительность сайта и его позиции в поисковых системах.