[yandex2]

Часто мы собственными руками создаем битые ссылки внутри своего же сайта. Например, когда удаляем статью, на которую уже где-то ссылались в своем же блоге.

Глупо говорить о том, что битая ссылка на сайте – это плохо, это и так очевидно. Во-первых, это плохо для наших посетителей, которые читают наши статьи и переходят по ссылкам на рекомендуемые ресурсы. Во-вторых, большое количество внутренних битых ссылок могут затруднить индексацию вашего сайта поисковыми роботами. Ведь бот всегда будет пытать перейти по ссылке и получать ответ сервера 404.

Поэтому надо взять себе за правило периодически проверять свой сайт на наличие битых ссылок. И тут встает вопрос, как проверить десятки, сотни, а у кого-то и тысячи страниц? Если необходимо проверить только внутренние ссылки, то достаточно посетить любой из инструментов для вебмастеров от поисковых систем.

Яндекс Вебмастер – раздел Индексирование сайта – Исключенные страницы – по типу. Переходим по ссылке HTTP-статус: Ресурс не найден (404), получаем список всех ссылок, которые были найдены Яндекс внутри сайта.

Или Google – раздел Диагностика – Ошибки сканирования – Не найдено. Будет список ссылок, которые ведут на несуществующие страницы вашего же сайта.

Но, как вы уже поняли, поисковые системы показывают только ссылки, которые находятся на вашем сайте и ведут на страницы вашего же сайта или ссылки, которые ведут на ваш сайта с других сайтов и вы не можете их исправить. Но мы же ссылаемся не только на свои статьи, и не только на нас ссылаются, часто мы сами ссылаемся на чужие материалы. Почему поисковые системы не сообщают нам, что у нас есть внешние битые ссылки? И как теперь решить эту проблему? Решение есть.

Когда я поставила перед собой задачу найти решение для проверки битых ссылок, то мне попадались различные платные программы, рекомендации нанять фрилансера, который это сделает неизвестно как, а также условно бесплатные, а на деле платные онлайн инструменты для проверки битых ссылок. Но к счастью, поиски мои были не долгими, и мне попалось описание одной программы – Xenu. Это было как раз то, что я искала. Теперь я делюсь своей находкой с вами.

[yandex]
Это иностранная разработка, поэтому единственный минус программы – это английский интерфейс, но в целом она очень простая и понятная. Официальная страничка программы находится здесь, а это ссылка на скачивание.
Устанавливаем программу на свой компьютер, открываем. Заходим File – Check URL.

Появляется окно настроек, в которое мы должны вписать условия поиска битых ссылок.

В поле под номером 1 указываем адрес сайта, который хотим проверить. Можно указывать как главную страницу, так и любую внутреннюю, главное, адрес должен начинаться с протокола http:// и заканчиваться слешем /. Если нам нужно проверить внешние ссылки, куда мы ссылаемся, то обязательно ставим галочку Check external links.

Во втором поле указываем адреса, которые относятся к нашему сайту, это могут быть поддомены.

В третьем указываем адреса, которые не нужно проверять. К ним относятся адреса рейтингов и счетчиков, которые установлены у вас на сайте, адрес RSS ленты.

Если у вас блог на Blogger или любой другой бесплатной платформе, то стоит указать адрес платформы, т.к. в шаблоне или в комментариях может быть много ссылок на платформу.

URL адреса указываются по одному в верхней строчке и добавляются в список кнопкой Add.

После этого можно перейти к более подробным настройкам – кнопка More options…

Но я не буду на них останавливаться. Лично я вообще туда не залезала и ничего не меняла, оставив настройки по умолчанию.

Осталось только нажать OK и программа начнет проверять все URL адреса сайта, которые встретит. По окончании проверки появится окно с сообщением:

Программа предлагает подключиться к сайту по ftp, чтобы проверить, нет ли на сервере таких страниц, на которые не стоит ни одной ссылки. Если вам это не нужно или у вас блог на бесплатной платформе, то отказываемся от этого. После этого программа сохранит отчет, который откроется в вашем браузере по умолчанию.

Начинается самая рутинная работа, перебрать все ссылки на наличие битых ссылок.

Я сделала скрин отчета, автоматически переведенного браузером, чтобы вам было проще разобраться, что есть что.

Как видите, у меня исключен поддомен domen.amateurblogger.ru, программой найдено 66 ссылок.

[ads1]Ниже идет список адресов, которые вы исключили из поиска. У меня с этой настройкой не срослось, т.к. кроме ссылки на форум все остальное я указала неправильно. Поэтому будьте внимательны и указывайте адреса правильно! Не берите с меня пример.

Но самое интересное начинается ниже, со слова Оглавление, а точнее, если не переводить, то со слов Table of contents.

Я не буду расписывать каждый пункт Оглавления, оставлю самое сладкое вам для самостоятельного изучения. Сейчас у нас тема статьи – как проверить битые ссылки на сайте. Ответ на этот вопрос нам дают первые два пункта Оглавления.

Broken links, ordered by link/Неработающие ссылки, упорядоченные по ссылке – сначала показан URL адрес, на который вы ссылаетесь и он не найден, а потом перечислены страницы вашего сайта, на которых найдена ссылка на этот ресурс.

Broken links, ordered by page/Неработающие ссылки, упорядоченные по странице – указана ваша страница, на которой стоит битая ссылка, а под ней адрес страницы, на которую ссылается ваша страница.
На мой взгляд первый вариант удобней.

Найдя битую ссылку, не торопитесь сразу ее удалять из блога, тем более, если вы обменивались постовыми или разместили ссылку за деньги. Необходимо сначала лично убедиться в том, что страница, на которую вы ссылаетесь действительно удалена. Ведь может быть и такое, что в момент проверки сайт был временно недоступен, или просто произошел обрыв связи. Поэтому…

1. Сначала пытаемся открыть сайт в браузере.
2. Затем проверяем статус страницы через специальный инструмент. Я пользуюсь этим инструментом. Тут вам нужно понимать, что такое код ответа сервера. Я немного писала об этом в предпоследней статье Как создать страницу ошибки 404 от 26 апреля.
3. Если есть возможность, связаться с владельцем ресурса (для случаев, если вы обменивались постовыми или размещали ссылку за деньги).

На всякий случай предупрежу, в некоторых случаях программа выдает ссылки, которые якобы принадлежат вашему сайту, хотя адрес имеют совершенно другой. В моем случае это были ссылки на файлы, расположенные в документах Google.

Вообще программа обладает более широким функционалом и есть ряд возможностей, о которых хотелось бы рассказать. Но я не буду это делать сейчас.
На этом все. Желаю успехов.

[yandex2]