Почему нужно удалять битые ссылки и как это сделать

Поисковые машины не любят ошибки, это факт. Они снижают в выдаче сайты, контент которых не подчиняется правилам орфографии и пунктуации. Они не жалуют проекты с ошибками в коде, с вирусами, ссылками на вредоносные сайты.

И, конечно же, не любят проекты, которые ссылаются на несуществующие страницы.

Чем опасны битые ссылки

Со стороны пользователя битые ссылки – это повод покинуть сайт. В результате получается, что ухудшаются поведенческие факторы, что, в свою очередь, может негативно сказываться на конверсиях и заработке с сайта.

Тем не менее, проблема несуществующих URL-адресов очень распространена. Например, битые ссылки могут массово возникать в интернет-магазинах, когда удаляются карточки неактуальных товаров, а ссылки на них остаются. Проблема служит сигналом для поисковиков, что сайтом не занимаются, и он не стоит внимания. Чтобы не терять их расположения, стоит периодически проверять и удалять линки, ведущие на несуществующие страницы.

Откуда могут появиться ссылки, ведущие в никуда

1 Распространенная причина – удаление старого контента. Бывает, что страницу просто удаляют, не настраивая 301-й редирект. В итоге ссылки, проставленные с существующих страниц на удаленную, остаются, но уже не представляют никакой ценности.

2 Человеческий фактор. Опечатки в URL-адресах часто становятся причиной битой ссылки, например, при ручной перелинковке. Когда проставляете ссылки, всегда проверяйте их работоспособность. Часто человеческий фактор встречается на форумах, где множество пользователей оставляют линки в постах и в подписях. Если это блог, то битые ссылки на свои сайты могут оставлять комментаторы. Бывает, что URL в комментариях 3-летней давности становятся несуществующими, потому что люди забрасывают свои проекты, не оплачивают больше домен и хостинг или переезжают на другое доменное имя. По этой причине, если вы позволяете людям оставлять ссылки на своем сайте, обязательно проверяйте их работоспособность с периодичностью хотя бы раз в неделю или месяц.

3 Удаленные картинки. Ситуация встречается, когда код изображения со ссылкой на нее в теге <img> имеется, а самой ее по этому адресу не существует. Битые картинки – не редкость, причем не только в статьях, но и в коде шаблона встречаются ошибки.

4 Ошибки в скриптах, в шаблонах, вирусы на сайте и т.п. Сомнительные партнерки или использование бесплатных тем для сайта - это факторы риска.

Как отыскать и удалить битые ссылки

Вручную, просматривая каждую страницу, сделать это невозможно. Однако самые поисковые системы подсказывают, что где-то есть проблема. Кроме того, для поиска несуществующих URL придуман специальный софт. Рассмотрим распространенные способы поиска.

Яндекс.Вебмастер

В Вебмастере показывается, какие URL адреса не существуют, и какие страницы на них ссылаются. Перейдите в «Ссылки – Внутренние ссылки». Во втором столбце в списке URL красным отмечены адреса, которые не индексируются (помечены как n/a) и которых нет (404 или 403). В левом столбце указаны урлы страниц, на которых есть битые ссылки (только в случае, если во 2-м столбце указан код ответа 404 или 403).

Также необходимо убедиться, что вы избавились от ошибок, и все страницы выдают правильный код ответа сервера (например, если вы настроили ЧПУ и сделали 301 редирект со старых урлов на новые). Сделать это можно в разделе «Инструменты – Проверка ответа сервера».

Google Webmaster

Переходим на вкладку «Сканирование – Ошибки сканирования». Посмотрите вкладки «Не найдено» и «Ошибка 404». В таблице под графиком будут отмечены несуществующие урл-адреса.

Кликом по каждой из них можно открыть окно, в котором указаны страницы с битыми ссылками на вкладке «ссылающиеся домены».

XENU

XENU – бесплатная программа, которую необходимо устанавливать на компьютер. Она отыщет все ссылки на сайте, включая внутренние и исходящие, а также подскажет, на каких страницах искать битые.

У программы есть неоспоримый плюс по сравнению с двумя приведенными выше способами проверки. Она сканирует сайт и выдает актуальную на текущий момент информацию. При анализе через инструменты веб-мастеров вы можете увидеть устаревшие данные и найти там битые ссылки, которые на самом деле вы уже удалены. Минус лишь в том, что Xenu работает довольно медленно, особенно, если на сайте сотни и тысячи страниц.

Итак, чтобы проверить урлы на сайте, откройте программу, перейдите в меню “File – Check URL”. Задайте адрес домена. Галочку “Check external links” лучше не снимать, потому что мы не увидим исходящие битые ссылки, да и «целые» потом можно будет просмотреть и удалить лишние, чтобы они не забирали вес с сайта. Нажимаем «Ок» и ждем результатов проверки.

URL, которые отмечены красным и пометкой “not found”, проверяем. Для этого вызовем контекстное меню правой кнопкой и выберем «URL properties».

На сайте Aff1.ru найдено целых 615 страниц, которые ссылаются на несуществующий файл с изображением. Заглядываем в код сайта, устраняем проблемы.

Кстати, в XENU можно одним кликом отсортировать все урлы по статусу. Так удобнее искать битые ссылки.

Хотя лучше сначала сформировать отчет в Экселе, а потом уже помечать себе там же ссылки, которые можно просто удалить, которые нуждаются в создании редиректа или которые невозможно убрать по каким-то причинам. Создать отчет можно при помощи команды “File –> Export to Tab Separated File”.

Анализируем ссылки и устраняем проблемы

После того как отчет сформирован, необходимо определить, почему появились битые ссылки. Например, была удалена страница или изменились ЧПУ на сайте (в таком случае придется настроить 301 редиректы). Также бывают временные неполадки на сервере, «поломанные» скрипты или, что хуже, вирусы. Причины бывают разные, как и методы устранения неполадок на сайте. Если проект торгует ссылками, и одна из них оказывается битой, то разумно сначала уведомить рекламодателя об этом и договориться о ее удалении или замене.

Подведем итог

И вообще, будьте осторожны, размещая скрипты и ссылки партнерских программ, отдельных рекламодателей. Вы можете столкнуться с так называемой подменой, когда в момент размещения линк ведет на вполне «белый» сайт, а потом его владелец ставит автоматический редирект и переводит посетителей на вредоносный ресурс. Если поисковики обнаружат, что ваш сайт ведет на плохие, запрещенные ресурсы, могут быть серьезные проблемы с продвижением. Это еще один повод проверять всякого рода ссылки и скрипты регулярно.