Находим и исправляем битые ссылки

С помощью плагинов для WordPress

Самая популярная блоговая CMS давно уже имеет инструменты для борьбы с битыми адресами. Обычно, если какой-то адрес схож с другим, то ВП может автоматически перекидывать с 404-й страницы на реальную статью. Но это возможно не всегда.

Однако у нас всегда есть плагины. Тысячи различных вариантов, с помощью которых мы можем исправить ошибку 404 раз и навсегда. Плагины могут решать проблему по-разному.

Можно пойти по более легкому и быстрому пути – сделать переадресацию со всех битых адресов на главную. В этом случае поисковые системы не будут считать неработающие адреса за таковые, потому что будет редирект. Многие сеошники так и поступают, потому как поисковые системы хорошо реагируют на такие решения.

Есть и другой способ. Он заключается в настройке редиректов на конкретные материалы или страницы. То есть если человек переходит по какой-то старой ссылке, желая найти определенный пост, то вебмастер специально учитывает это и перебрасывает его в нужное место.

Некоторые плагины значительно облегчают эту задачу. Их мы и рассмотрим далее.

Broken Link Checker

Достаточно популярное решение, которое, к сожалению, не обновлялось уже больше года. Тем не менее плагин все еще работает, причем отлично. Для его установки вы должны перейти в “Плагины” – “Добавить новый”, после чего ввести в поле поиска название – Broken Link Checker.

Для установки просто кликните на одноименную кнопку, после чего не забудьте активировать модуль.

После успешной активации вы должны перейти в настройки расширения. Они доступны по пути “Настройки” – “Проверка ссылок”. Broken Link Checker поддерживает русский язык, поэтому даже у новичков он не вызовет трудностей при использовании.

Настройка Broken Link Checker не вызовет у вас затруднений. Несколько параметров, в которых разберется даже ребенок.

Link Checker

Новый плагин, который также позволяет искать неработающие адреса. Он часто обновляется, да и интерфейс там достаточно удобный. Все ошибки представлены в виде удобной страницы. При желании их можно легко исправить в один клик, настроив переадресацию на главную или любую другую страницу.

Yoast SEO Premium

В премиум-версии самого популярного плагина для WordPress – Yoast SEO также есть инструменты для проверки ресурса на битые ссылки. Расширение, как вы могли догадаться, платное. Стоимость – около 79 евро.

Помимо простого поиска Yoast позволяет удалить или переадресовать неработающий адрес. Премиум-вариант подойдет далеко не всем, но если вы из тех вебмастеров, которые вкладываются по максимуму, то Yoast SEO Premium – хороший выбор.

Тем более что у плагина есть куча других полезных функций, которые помогут оптимизировать ваш сайт для поисковых систем.

WP Broken Link Status Checker

Завершает нашу подборку WP Broken Link Status Checker. Стоит сказать, что он не обновлялся на протяжении последних двух лет. Однако плагин до сих пор остается актуальным и рабочим. Многие вебмастера пользуются продуктом с большим удовольствием и даже покупают про-версию.

Как и в предыдущих случаях, WP Broken Link Status Checker может найти битые внутренние ссылки, неработающие картинки и прочие ошибки, которые могут быть связаны с этим. Здесь же вы сможете быстро исправить все это. Либо вручную, либо с помощью переадресации. Также можно просто удалять ненужные адреса в один клик, используя интерфейс плагина.

Проверка внутренних битых ссылок

Как же проще всего обнаружить мертвые линки? Ручной поиск — сложный процесс, поэтому лучше воспользоваться доступными инструментами:

«Яндекс.Вебмастер».

Авторизуйтесь в сервисе и перейдите: «Ссылки» — «Внутренние ссылки». Выберите «Запрещенные к индексации или не существуют»: 

Хорошо, если таких ссылок не обнаружено: 

Google Webmasters.

Не менее удобный инструмент предлагает и «Гугл». Авторизуйтесь в сервисе для вебмастеров Google и откройте раздел «Покрытие» — «Исключено». 

Внизу под графиком будет информация о наличие ошибок 404: 

Link Checker.

Плагин для сайтов на «Вордпресс», который применяет для сканирования сторонний сервер. Он отвечает за поиск битых линков (внешних и внутренних) и неработающих картинок внутри ресурса. Основное преимущество — минимальная нагрузка на систему, так как он использует свой сервер.

WP Broken Link Status Checker.

Сканирование на предмет неправильных ссылок с минимальной нагрузкой на сервер. Можно задавать настройки обхода роботом ссылок.

W3C Link Checker.

Находит все мертвые линки с кодом (404, 301, 403 и так далее) и предлагает способы по их устранению.

Online Broken Link Check.

Удобный инструмент для владельцев крупных сайтов. Бесплатно позволяет сканировать до 3 тыс. страниц. Проверяет линки и документы в форматах .doc, .pdf, .xls.

Seoto.me.

Платный online инструмент с богатым функционалом. Хорошо подходит для сканирования крупных проектов. Одна проверка — 500 рублей.

Serpstat.com.

Многофункциональный сервис по анализу сайтов (личных и конкурентов) и сбору семантики. Также им можно сделать аудит битых линков. Доступ к сервису платный.

SEO & Website Analysis.

Бесплатный плагин для Chrome для поиска битых ссылок.

Check My Links.

Еще один удобный и бесплатный плагин для браузера «Хром», позволяющий выгружать отчет по битым ссылкам в формате .csv.

Удаление помеченных объектов, замена ссылок. Обычное и управляемое приложение. Не монопольно, включая рекурсивные ссылки, с отбором по метаданным и произвольным запросом Промо

Обработка удаления помеченных объектов с расширенным функционалом. Работает в обычном и управляемом приложении. Монопольный и разделенный режим работы. Отображение и отбор по структуре метаданных. Отборы данных произвольными запросами. Копирование и сохранение отборов. Удаление циклических ссылок (рекурсия). Представление циклических в виде дерева с отображением ключевых ссылок, не позволяющих удалить текущий объект информационной базы. Удаление записей связанных независимых регистров сведений. Групповая замена ссылок. Индикатор прогресса при поиске и контроле ссылочности.

10 стартмани

31.10.2016   
57974   
713   
m..adm   

225
   

Как проверить ссылочную массу сайта?

Для проверки ссылочной массы есть как специализированные программы, так и онлайн-сервисы, часть из которых бесплатна и отлично подойдет для базовой проверки всех внешних url, ссылающихся на сайт. Программ и веб-сайтов очень много, практически все копируют функции друг друга, отличаясь только визуальной составляющей и стоимостью подписки. В подборке мы выбрали шесть инструментов, которые просты в использовании и подойдут для практически всех задач по работе со ссылочной массой.

1. Вебмастер Яндекс и Search Console Google. Панели вебмастеров призваны помогать оптимизаторам в работе со своим ресурсом. Для анализа ссылок каждый из сервисов имеет отдельный встроенный модуль. В вебмастере Яндекса данные по ссылкам обновляются после «ссылочного» апдейта 1-2 раза в месяц, у Гугла апдейт происходит ежедневно, но менее глобально. В реальном времени посмотреть ссылки там нельзя. Сам виджет показывает только неработающие, битые ссылки, историю изменения и общие данные по ссылочной массе. Аналогичные опции есть и у приложения Google, где также показываются неработающие ссылки и есть возможность выгрузить всю аналитику в файле

2. Онлайн-сервис Ahrefs. С помощью Ahrefs можно получить подробную информацию как о самом сайте, так и о внешнем ссылочном профиле ресурса. Сервис имеет бесплатный режим, в котором можно проанализировать часть ссылок без регистрации. Платная подписка дает очень много полезной информации, включая показ анкоров, ошибки оптимизации и другие опции, но стоимость лицензии крайне высока. Lite версия обойдется в 99 долларов/месяц, стандарт в 180 долларов/месяц.

3. Онлайн-сервис Pr-cy. Простой и удобный сервис, который проанализирует внешнюю и внутреннюю ссылочную базу, пока данные в сводном отчете. Ограниченная проверка доступна без регистрации, более полную информацию сервис предоставляет на платной основе. При этом сервис анализирует отдельный url, для полной информации нужно будет суммировать данные по каждой странице.

4. Онлайн-сервис Checktrust. Ресурс, добавленный в закладки у любого оптимизатора, позволяет посмотреть каждую ссылку на предмет уровня спама и доверия (траста). Работа кропотливая и долгая, но для проверки «жирных» ссылок это то что нужно. Бесплатно можно проверить 500 доменов, требуется активация через телефон. 

5. Утилита Scrimimg Seo Spider. Программа, которая устанавливается на ПК, позволяет выгрузить всю ссылочную массу ресурса. Плюсом являются многочисленные опции, показывающие статус ссылок (Nofollow, noindex), возможность сортировки и группировки данных, проверка не только самих урл, но и стилей/скриптов, вывод метатегов и редиректов. Программа платная, есть триальный режим с лимитом проверок до 500 url.

6. Утилита Netpeak Spider. Аналогом Seo Spider является русскоязычная программа Netpeak Spider. Основным отличием софта была его бесплатность и отсутствие лимита проверок, однако с недавнего времени был введен 14 дневный trial режим. Аналогично Scrimimg Seo Spider, мы можем выгрузить внешние ссылки сайта, посмотреть ошибки, статусы, редиректы, метатеги и многое другое.

Итоги

Ссылочная масса важна, это неотъемлемая часть продвижения и влияние ссылок значительное, чтобы не заявляли поисковые системы. Также для сайта имеет огромное значение отсутствие битых (неработающих) ссылок. Поэтому проверяйте ресурс, работайте со своей ссылочной массой, следите, чтобы не появлялись 404 ошибки, при необходимости ставьте 301 редиректы и не используйте автоматическую покупку внешних ссылок, это верный путь к бану поисковых систем.

Поиск битых ссылок на сайте с помощью плагинов в WordPress и Google Chrome

Чтобы найти битые ссылки, можно применять не только специальные программы, но и плагины. Хорошо справятся с задачей Broken Link Checker для WordPress или Check My Links для Google Chrome.

1. Если ваш сайт на CMS (система управления) WordPress, то советуем плагин под названием Broken Link Checker

   Главные его достоинства заключаются в возможности осуществлять анализ страниц сайта во второй раз, а также останавливать работу в случае сильной загрузки сервера. Помимо этого, можно изменять и избавляться от неработающих веб-линков в одном и том же окне, не пользуясь редактором WordPress отдельно.

   Плагин нужно установить. Способов несколько, выбираем наиболее удобный для вас. После активации плагин готов к сканированию.

   Разработчики Broken Link Checker установили продуманные настройки по умолчанию, и если у вас обычный сайт без специфичного наполнения, то необходимость в дополнительном фильтровании не появится. В случае острой нужды это всё же можно сделать в «Настройках». Выбираем «Проверку ссылок» и пользуемся огромным количеством опций как душе угодно.

   В плагине есть возможность провести заказ повторного анализа, установив любой период, получить на электронку все найденные «мертвые» гиперссылки, выделить их любым стилем, а также поставить на опции отметку, которая подскажет другую версию для неработающего веб-линка.

   Плагин, помимо вкладки «Общие», имеет еще четыре, каждая из которых поддается настройке и редактированию. Перечислим самые востребованные из них:

   • «Искать ссылки в…». Показывает, где планируется осуществлять анализ (веб-страница, документ, запись, комментарий);

   • «Что проверять». Здесь найдете информацию о том, что необходимо промониторить (текстовые гиперссылки, картинки, видео с YouTube);

   • «Протоколы и API». Помогает исследовать ссылки, применяя HTTP (обычно стоит по умолчанию), либо созданные программные коды MediaFire, RapidShare, YouTube;

   • «Дополнительно». Дает наладить работу плагина так, чтобы он искал только в течение определенного времени или же останавливал поиск в случае, когда заданный порог нагрузки на сервер максимально возрастет.

   Во время сканирования можно просматривать уже найденные плагином битые ссылки в разделе администратора WordPress: вкладка «Инструменты» – «Неправильные ссылки».

   Найденные «мертвые» веб-линки можно удалить одним действием. Поставив галочки рядом с наименованием одной из колонок URL, выбираем необходимую опцию из ниспадающего меню Bulk Actions и кликаем на кнопку Apply («Применить»).

   Для удобной работы с каждым линком плагин предоставляет сведения в 4-х столбцах: «URL» («место жительства» неработающего линка), «Состояние» (для «мертвых» линков это должно выглядеть так − «404 Not Found»), «Тип/Текст» (анкор ссылки), «Источник» (наименование страницы, где находится неработающий линк, в который можно провалиться).

   Чтобы быстро избавиться от ненужной ссылки, подводим курсор к URL. Никакой переход по нему и поиск не нужен. Также можно и редактировать URL-адрес (в случае опечатки) без лишних манипуляций.

   Инструмент «Источник» дает возможность поработать над содержанием текста с «мертвой» ссылкой, перейти на нужную вам страницу. Опция «Удалить» поможет избавиться от всей статьи, комментария и т. д., где находится неверный линк.

   Broken Link Checker удобен ещё тем, что его можно отключить или перевести в неактивный режим, когда в его работе нет необходимости. Этот факт избавляет сервер от лишней нагрузки.

2. Имеется также аналог этого плагина – Check My Links для Google Chrome

   Это расширение позволит проверить нужную страницу на битые ссылки. Создан плагин для разработчиков, редакторов контента и веб-дизайнеров.

   После действий Check My Links над проверкой страниц мы видим актуальные линки, однако их нужно удалить или изменить. Работающие ссылки выделяются плагином зеленым цветом, а те, что нет, – красным.

   Один существенный момент: проанализировать плагином можно только постранично! Весь сайт проработать не получится.

   Интернет-маркетологи найдут для себя и другие (не менее интересные) расширения от Google Chrome.

Отчего возникают битые ссылки?

Если пользователи, кликая на ссылку на вашем сайте, попадают в конечном итоге на страницу 404 ошибки, вы теряете свою прибыль. Может быть, вы пока ещё не припоминаете проблем со своими ресурсами? А, может, такие ссылки уже завелись на вашем сайте?

Сохраняйте спокойствие. Нерабочие ссылки могут возникнуть по самым разным причинам, например:

• Последний переезд на новый хостинг был не столь успешным, как вам казалось
• Вы добавили ссылку на сторонний ресурс, а владелец этого ресурса удалил его или изменил его URL-адрес
• Возможно, вы изменили URL-адрес старого поста, но забыли обновить ссылки на страницы и посты
• Новая бизнес-стратегия повлекла за собой смену доменного имени
• Поскольку человеку свойственно ошибаться, вы неправильно написали ссылку, например, вы оставили букву или http:// частью ссылки
• Комментаторы могут оставить пустые ссылки
• Ваш хостинг может иметь необычные настройки брандмауэра, потому что… Короче говоря, некоторые хостинги играют по собственным правилам
• Вы перешли с Blogger на WordPress и ваши постоянные ссылки изменилось? Это происходит довольно часто
• Если вы забыли исправить ссылки после конвертации вашего сайта из HTML в WordPress, вы получите неработающие ссылки
• Посторонний сайт, на который вы ссылаетесь, прекратил своё существование, потому что владелец не оплатил хостинг.

Это далеко не полный список причин, так что, если у вас возник единичный случай, дочитайте нашу статью до конца, и вы узнаете способы решения проблемы. Но сначала давайте поговорим о последствиях, возникающих от неработающих ссылок.

Как найти битые ссылки на сайте

Чтобы проверить битые ссылки, достаточно воспользоваться специальными онлайн сервисами или установить программу анализатор на ПК.

Прежде чем мы начнем, хочу вас предупредить, что в каждом инструменте используются собственные алгоритмы вычисления битых ссылок, поэтому результаты могут отличаться.

Проверка сайта на битые ссылки программой Xenu

Время сканирования напрямую зависит от количества страниц, файлов, документов. Например, на анализ этого сайта, содержащего 170 проиндексированных страниц в Гугл, ушло три минуты.

Результаты анализа можно отфильтровать при помощи вкладки «Status». Для большей наглядности битые ссылки выделены красным цветом. Ниже вкладки «Status» можно наблюдать статус той или иной ошибки. О том, что ссылка наверняка битая, говорит фраза «not found».

Badlinks — проверка битых ссылок онлайн

Это онлайн сервис, позволяющий проверить бесплатно только первые 10 страниц сайта. Бесплатная проверка имеет еще одно малоприятное ограничение — один сайт не может проверяться чаще 1 раза в месяц.

Если вас интересуют цены на тарифы, понажимайте вкладки.

Чтобы осуществить сканирование, скопируйте и вставьте доменное имя ресурса в специальное поле, нажмите кнопку поиска в виде божьей коровки, кликните в открывшемся окне красную кнопку «Проверить сейчас».

Проверка битых ссылок средствами Google Search Console

Чтобы воспользоваться инструментами Google Search Console, необходимо добавить сайт в панель вебмастеров и подтвердить на него права.

Далее алгоритм действий следующий:

• выбираем в панели веб-сайт (если их там несколько);
• переходим во вкладку «Сканирование»;
• кликаем — «Ошибки сканирования».

Что мы видим со скриншота? На этом блоге ошибок сканирования на ПК не обнаружено.

Перейдем во вкладку «Смартфоны». Нас интересует параметр «Не найдено». Как можно заметить, внизу отображаются не найденные адреса, которые отдают код ответа 404. Это и есть наши битые ссылки.

Как проверить сайт на битые ссылки в Яндекс.Вебмастер

Еще одни способ найти «мертвые» ссылки — воспользоваться сервисом Яндекс.Вебмастер. В нем найдутся инструменты для анализа и отслеживания индексирования страниц, проверки технического состояния сайта и его позиций в выдаче.

Прежде чем воспользоваться всеми его преимуществами, нужно создать аккаунт на одном из сервисов Яндекса (почта, деньги и т. д.), добавить сайт в панель вебмастеров и подтвердить на него права.

Далее алгоритм действий следующий:

• выбираем в панели веб-сайт (если их там несколько);
• переходим во вкладку «Ссылки»;
• кликаем — «Внутренние ссылки».

Нас интересуют ошибки на стороне сервера. В отличие от Гугла, дядя Яша нашел целых 86 битых ссылок.

Стоит ли беспокоиться? Думаю, нет! Оказывается, сервис Яндекса зачем-то проиндексировал документы следующего образца и теперь расценивает их, как битые ссылки:

https://stimylrosta.com.ua/component/search/?Itemid=107&catid=15&id=27&format=opensearch

Чтобы исправить ситуацию, нужно добавить в файл robots.txt следующую директиву:

Disallow: /component/search/?Itemid*

В течение месяца Яндекс отреагирует и сократит количество ошибок на стороне сервера.

Как найти и удалить битые ссылки на сайте онлайн

Что такое битая ссылка

Битая ссылка это ссылка внешняя или внутренняя, которая ведет на несуществующий сайт, удаленную статью, на несуществующий документ или изображение. В общем битая ссылка это активная ссылка на объект который не существует.

Какой вред от битых ссылок

Самый большой и опасный вред от битых ссылок это поведенческий фактор. Посетитель, который по сути должен перейти на другую страницу или сайт получит в ответ «404 страница не найдена» вряд ли уже вернется к вам блог.

Так же и поисковым роботам не нравится по битым ссылкам заходить в тупик, что скажется негативно на ранжировании блога в поисковых системах.

Откуда берутся битые ссылки на сайте

Жизнь идет вперед, меняется все, не стоит на месте и интернет. В интернете удаляются блоги, сайты, файлы, делаются реконструкции сайтов, страницы обновляются, оптимизируются. Некоторые сайты попадают под фильтр или блокируются полностью. Причин тому много.

Когда в блоге до 100 статей еще как-то можно обратить случайно внимание на ссылку которая ведет в никуда, а когда контент переваливает за 500 публикаций, тут вряд ли можно вручную найти битую ссылку на несуществующий объект. Самые распространенные сервисы поиска  битых  ссылок от поисковых систем Яндекс и Google

Самые распространенные сервисы поиска  битых  ссылок от поисковых систем Яндекс и Google.

Как найти битые ссылки в Гугл вебмастер ( Search Console )

Заходим в  Google инструменты для вебмастеров, на панели открываем поочередно вкладки «Сканирование» > «Ошибки сканирования» > « Не найдено» и смотрим внизу на url страниц, которые выдают ошибку.

Проверка битых ссылок в Гугл вебмастер

Как найти битые ссылки в Яндекс вебмастер

Открываем в панели инструментов вкладку «Индексирование» > «Статистика обхода». Внизу смотрим список страниц которые не индексируются или удалены.

 
Проверка битых ссылок в Яндекс вебмастер

Конечно, в веб инструментах  от поисковых систем можно найти  битые ссылки на сайте, но сервисы не дают полной информации новичку, порой понять как найти в исходном коде или на сайте ту или иную ссылку трудно.

Поиск и удаление битых ссылок на сайте онлайн

Для поиска битых ссылок существуют специальные программы, плагины и сервисы, где найти битую ссылку не составит большого труда  и которые облегчают работу веб мастерам и администраторам сайта. С одним таким восхитительным сервисом для проверки битых ссылок я хочу вас и ознакомить.

Поиск битых ссылок на сайте онлайн

Вводим адрес своего сайта и нажимаем на вкладку «Найти неработающие ссылки». В открывшемся окошке вводим капчу и нажимаем «Найти неработающие ссылки сейчас»

Сервис для проверки битых ссылок

Немножко нужно подождать пока сервис проверить все ссылки на сайте.

Как удалить битые ссылки

Откроются адреса битых ссылок. Что бы узнать исходный код страницы и понять о чем идет речь нужно нажать вкладку ЦСИ. Нажав на вкладку URL откроется страница где находится битая ссылка.

Рис 1. Исходный код сайта с битой ссылкой

Да согласна, ничем ни отличается от поиска битых ссылок в Яндек и Google

Но теперь обратите внимание на этот скриншот:. Рис 2

Исходный код сайта с битой ссылкой

Рис 2. Исходный код сайта с битой ссылкой

Разница между первым и вторым рисунком очень большая и вряд ли бы я нашла такую ошибку в инструментах вебмастеров. Перед адресом статьи во всей красе любуется символ кавычек. Url рабочий, но делает невалидный код.

Далее стоит вопрос как удалить эти битые ссылки. Если ошибка выдает плохой адрес статьи, то нужно зайти в нее и отредактировать. Ошибка 404 — следуют удалить url в поисковых системах.

1. В Яндекс Bебмастер: вкладка Инструменты > Удалить URL.
2. Гугл вебмастер (Google Search Console): Индекс Google > Удалить URL-адреса.

Кто не может самостоятельно найти и убрать битые ссылки с сайта самый лучший выход обратиться к фрилансерам. В поисковике набирайте Freelanc и вам откроются сайты где вы можете задать задание специалистам в сети. Задание так и формулируйте: «Найти и удалить битые ссылки на сайте«.

Настройка плагина Broken Link Checker

Плагин переводил «добросовестный» работник :-), но мы справимся.

Look for links in (Где искать битые ссылки)

Поставьте галочку у «Custom fields» (произвольные поля) если используете произвольные поля и хотите там проверять ссылки.

Остальное здесь все прозрачно и понятно. Пояснений не требуется.

Which Links To Check (Тип проверяемых ссылок)

На этом блоге я использую текстовые HTML ссылки, HTML ссылки на картинки и видео с YouTube с новым и старым кодом. Эти типы ссылок я и отметил.

Protocols & APIs

Выбор протоколов и APIs, с помощью которых будут проверяться ссылки на битость. Установленный по умолчанию «Basic HTTP» со своей задачей вполне справляется и я здесь ничего не менял.

Дополнительно

Цифровые значения, выставленные по умолчанию, оптимальны и менять их следует для нештатных ситуаций.

Link monitor: Галочка в верхней строке активирует непрерывную работу плагина при открытой панели. Галочка ниже разрешает работать плагину в фоновом режиме.

Нажатием кнопки «Проверить все страницы» плагин очистит свою базу данных по ссылкам и перепроверит сайт заново.

Чем грозит наличие битых ссылок на сайте

Все мы стараемся максимально качественно и полно провести оптимизацию подопечных ресурсов. Это и понятно, ведь чем меньше проблем, тем качественнее сайт будет выглядеть в глазах поисковых систем. Даже небольшое число битых ссылок может сыграть злую шутку с владельцем ресурса. Робот может посчитать, что владелец не следит за ресурсом, не проводится модерация и т.д., что в свою очередь чревато наложением определённых санкций.

Если же говорить о живых посетителях, то они навряд ли будут довольны контентом с битой ссылкой

Особенно, если эта ссылка на скачивание, более развернутое описание материала, изображение с важной информацией и др. Именно по этой причине и поисковые системы так негативно относятся к битым ссылкам

Ведь главная задача для них — предоставить конечному пользователю наиболее качественный ответ на вопрос.

Способы поиска битых ссылок внутри сайта

1. Сканер Netpeak Spider

Существует простой бесплатный сканнер сайта — «Netpeak Spider». Его даже не нужно устанавливать на компьютер, т.к. это одиночный .exe файл (приложение). Просто запускаете его, вбиваете свой URL и нажимаете сканировать. Он пробежится по всем страницам и выдаст следующую информацию:

• коды ответов страниц;
• адрес страницы;
• входящие ссылки на страницу;
• Покажет мета тег Description;
• Покажет мета тег <title>;
• Покажет ключевые слова;

Можно выделить совпадающие заголовки. То есть найти совпадающие дубли.

Можно отсортировать ссылки по количеству ссылок ведущих на каждую страницу. Сразу станет понятно сколько страниц ссылается на какую-то конкретную. Это нужно для тех, кто хочет равномерно распределить вес по сайту.

Из минусов этой программы: отсутствует проверка внешних ссылок.

2. Панель Яндекс Вебмастера/Google WebMaster

В панелях Яндекс и Google вебмастер есть специальные разделы, где показываются битые ссылки. Единственным минусом этого способа является то, что частота обновления низкая. Плюс здесь можно проверять только свои сайты.

Например, в панели Яндекс Вебмастера нужно открыть нужный сайт, далее «исключенные страницы»:

Нажимаем на «HTTP-статус: Ресурс не найден (404)» и попадаем на список битых ссылок:

Видно, что дата последней проверки очень сильно запаздывает от актуальной даты (на полгода и даже год).

В панеле Google Вебмастер всё аналогично: откройте нужный сайт и выберите: «Диагностика» – «Ошибки сканирования».

3. Онлайн сервис Broken Link Check

Broken Link Check проверяет не только внутренние ссылки, но еще и внешние. Проверка отнимает длительное время.

Для владельцев сайтов на WordPress есть возможность скачать плагин Broken Link Checker.

4. Xenu Link Sleuth

Пользоваться программой очень просто. Открываете ее, далее в меню выбираете Check Url:

Вбиваете URL и нажимаете проверка:

Программа Xenu проверить внешние и внутренние ссылки на их доступность. После проверки будет написано количество входящих и исходящих ссылок с каждой страницы.

Кстати, с помощью этой программы можно создавать xml карту сайту.