Как проверить сайт на битые ссылки и удалить их

Содержание

• 1 Почему появляются битые ссылки?
• 2 Продолжение проверки сайта
  • • 2.0.1 SEO-оптимизаторам
    • 2.0.2 Очень большие сайты
• 3 Какие инструменты подойдут для проверки битых ссылок
• 4 Почему они вредны?
• 5 Как битые ссылки вредят SEO?
• 6 Как избавиться от битых ссылок
• 7 Как найти битые ссылки
• 8 Как искать неработающие ссылки
  • 8.1 Яндекс.Вебмастер
  • 8.2 Google Search Console
  • 8.3 Xenu Link Sleuth

Почему появляются битые ссылки?

В основном по таким причинам:

1. Некоторые страницы были удалены. Например, временные страницы, потерявшие свою актуальность. Тогда при переходе на такую страницу появляется ошибка 404, а ссылки на эти веб-документы превращаются в битые;
2. Ошибка вебмастера при создании URL. Достаточно допустить ошибку в одной букве, чтобы адрес стал некорректным;
3. Если изменена структура сайта, то зачастую изменяются и URLы. Здесь важно правильно настроить редирект, перенаправление со старых на новые адреса.

Продолжение проверки сайта

• Бесплатная проверка
• Полная проверка
• Регулярная проверка
• Специальные тарифы

Бесплатная проверка

Поисковый робот обходит первые 10 страниц сайта и проверяет все изображения, файлы и ссылки, найденные на них. Другим ограничением бесплатной проверки является интервал между проверками - один сайт не может проверяться чаще 1 раза в месяц. Во всем остальном бесплатная проверка идентична полной.

Полная проверка

Полная проверка позволяет эффективно и быстро найти все битые ссылки на сайте. Срок проверки колеблется от нескольких минут до нескольких часов - в зависимости от размера сайта.
Если Вы не знаете сколько страниц на Вашем сайте, Вы можете заказать минимальное количество, а затем продолжить проверку, просто доплатив разницу в стоимости с более дорогим тарифом.

В течение суток после окончания проверки Вы можете продолжить ее с большим лимитом страниц. При этом достаточно оплатить только разницу в стоимости.

Размер сайта:

• До 100 страниц - ₽50.
• До 1.000 страниц - ₽190.
• До 50.000 страниц - ₽450.
• До 300.000 страниц - ₽750.
• До 1.000.000 страниц - ₽1500.
• До 12.000.000 страниц - ₽7500.

Регулярная проверка

Наш поисковый робот будет регулярно проверять Ваш сайт, сообщая обо всех найденных битых ссылках - это поможет Вам быть всегда в курсе и оперативно исправлять битые ссылки на действующие.

Частота проверок:

• Раз в месяц
• Раз в неделю
• Каждый день

Размер сайта:

• До 100 страниц - ₽250 в год
• До 1.000 страниц - ₽650 в год
• До 50.000 страниц - ₽2500 в год
• До 300.000 страниц - ₽4000 в год
• До 1.000.000 страниц - ₽8000 в год
• До 12.000.000 страниц - ₽38000 в год

• До 100 страниц - ₽150 в месяц
• До 1.000 страниц - ₽550 в месяц
• До 50.000 страниц - ₽1300 в месяц
• До 300.000 страниц - ₽2200 в месяц
• До 1.000.000 страниц - ₽4500 в месяц

• До 100 страниц - ₽500 в месяц
• До 1.000 страниц - ₽1900 в месяц
• До 50.000 страниц - ₽4500 в месяц
• До 300.000 страниц - ₽7500 в месяц
• До 1.000.000 страниц - ₽15000 в месяц

SEO-оптимизаторам

Мы подготовили специальное решение для тех, кому нужно проверять множество сайтов:

• гибкая тарифная политика, позволяющую оплачивать проверки по количеству фактически проверенных страниц;
• небрендированные отчеты о проведенных проверках, либо отчеты с Вашим логотипом;
• доступ к API, позволяющему выполнять все действия программно;

Очень большие сайты

Чем больше сайт, тем больше внимания нужно уделять его актуальности. И, конечно, стандартные решения для очень больших сайтов не очень хороши.

Для проверки сайтов более 1Млн страниц мы готовы предложить специальные условия, вплоть до размещении отдельной копии нашего программного обеспечения в дата-центре заказчика - это позволит организовать любую интенсивность провеки, так что полный обход даже самого крупного сайта будет занимать не более нескольких часов.

Какие инструменты подойдут для проверки битых ссылок

Если сайт с большим количеством страниц, невозможно вручную проверять каждую и кликать по всем имеющимся ссылкам. Для поиска лучше использовать специальные инструменты. Это можно сделать с помощью официальных вебмастеров:

• Google Search Console. В старом интерфейсе ошибочные ссылки показывались в отчёте «Ошибки сканирования». В новом — в разделе «Покрытие».

• Яндекс.Вебмастер. Данные лежат в разделе «Индексирование» → «Статистика обхода». Ещё можно посмотреть в разделе «Ссылки».

Ещё битые ссылки видны в отчётах по заголовкам страниц вЯндекс.Метрике и  Google Analytics. Если, конечно, у 404-страницы title отличается от других. На скриншоте ниже— статистика по сайту на одном из конструкторов. Переходы по битым ссылкам выдают заголовок страницы по умолчанию.

Если хотите быть на «ты» с инструментами вебмастеров и системами веб-аналитики, приглашаем на онлайн-курс« SEO-специалист с нуля до PRO ». Подходит новичкам в поисковом продвижении, интернет-маркетологам, владельцам бизнеса.

SEO-специалист с нуля до PRO

Один из самых полных и профессиональных курсов по SEO в Рунете, созданный на основе стандартов и компетенций экспертов компании Ingate. Вы освоите профессию SEO-специалиста с нуля. Узнаете, как работают поисковые системы, научитесь собирать семантику, познакомитесь с сервисами «Яндекс.Вебмастер», Google Search Console.

Также можно выбрать для проверки один из стороннихинструментов SEO-аудита. Например:

• Xenu Link Sleuth. Это бесплатная десктопная программа, достаточно функциональная, хоть и немного устаревшая.

• Screaming Frog SEO Spider. Платная десктопная программа. Проверка 500 URL бесплатно.

• SEO & Website Analysis. Бесплатный и удобный плагин для Chrome.

• Check My Links. Ещё один бесплатный плагин для Google Chrome. Можно скопировать список битых ссылок в CSV-формате.

• Badlinks.ru. Платный онлайн-сервис. Стоит от 50 рублей, сумма зависит от количества страниц и регулярности проверки.

Почему они вредны?

Нерабочие ссылки вредны для сайта по нескольким причинам:

1. Потеря трафика. Пользователь, перейдя по некорректной ссылке, испытывает раздражение, а после нескольких таких переходов, желание переходить на рекомендуемые вами страницы явно отпадет. Человек наверняка уйдет с сайта и больше на него не захочет возвращаться. Происходит ухудшение поведенческих факторов, снижается время пребывания пользователей на сайте, снижается количество просмотров страниц;
2. Наличие битых ссылок плохо влияет на сео. Для поисковых машин такая ссылка считается ошибкой, ведь тогда происходит разрыв навигационной цепочки, и чем таких ошибок больше, тем меньше доверия к сайту. Если битых ссылок на сайте слишком много, то можно сделать вывод, что владелец не следит за актуальностью размещенной информации, не обновляет свой контент и вообще может ссылаться непонятно куда. Возможно, сайт и вовсе заброшен? В таком случае поисковая система может понизить ресурс в выдаче;
3. Если же некорректна партнерская ссылка, находящаяся на вашем веб-ресурсе, то здесь уже дело касается реальных денег, которые можно потерять.

Поэтому очень важно как можно чаще проверять сайт на битые ссылки и вовремя убирать их.

Как битые ссылки вредят SEO?

Большое количество неработающих ссылок — бомба замедленного действия для поискового продвижения. И вот почему.Ухудшение поведенческих факторов. Попав на страницу 404, пользователь сразу же покинет ее. Таким образом несуществующие страницы накручивают показатели отказов и снижают среднее время взаимодействия с сайтом.

Подрыв поисковой репутации. Постоянно попадая на несуществующие страницы, поисковые роботы сделают вывод, что имеют дело с запущенным и некачественным сайтом, которому не место в топе выдачи.Пустой расход краулингового бюджета. Поисковые роботы имеют лимит на количество документов, которые способны просканировать за один обход. Тратя бюджет на переходы по битым ссылкам, краулеры могут долго не отправлять в индекс действительно важные страницы.

Неэффективное перераспределение ссылочного веса. Все внутренние ссылки на сайте обмениваются статическим весом. Чем эффективней отлажен данный процесс, тем лучше ранжируется сайт. Битые линки в этом случае становятся брешью, через которую ссылочный вес просто уходит в никуда.

Как избавиться от битых ссылок

Ссылки, ведущие на несуществующие страницы, можно просто удалить. Если в тексте опечатка, то нужно внести правки. Это легко сделать самому через панель управления сайтом или делегировать тому, кто отвечает за наполнение и редактирование контента, — вебмастеру, контент-менеджеру или верстальщику.

Когда битые ссылки возникают в результате массовой смены URL (например, блог переехал с «site.ru/blog» на «blog.site.ru»), нет смысла исправлять вручную — нужно настроить редирект. Это сложная техническая задача, с которой лучше обратиться к опытному разработчику или веб-программисту. Если всё же хочется уметь делать редиректы своими руками, действуйте по гайду TexTerra или Promopult.

Но даже если на сайте не будет битых ссылок, пользователи всё равно будут видеть код ответа 404. Написать URL с ошибкой могут и в соцсетях, и на сторонних ресурсах. И всегда есть вероятность, что пользователь опечатается, когда захочет напрямую зайти на ваш сайт. Чтобы уменьшить процент отказов и негатив в таких случаях, лучше оформить страницу 404 нестандартно. Дайте задание копирайтеру и дизайнеру, а разработчика попросите настроить переадресацию.

Как найти битые ссылки

Это можно сделать с помощью панели Вебмастера Яндекса, плагина для Вордпресс или специальных программ и онлайн-сервисов. Давайте к рабочим способам. С их помощью можно найти битые ссылки, все до единой.

Как искать неработающие ссылки

Находить битые ссылки на сайте можно по-разному. Далее мы подробно расскажем о тех способах, которые не требуют платного софта и гарантируют максимально точную проверку. В обзор включены 100% бесплатные инструменты — без триалов, ограничений по количеству проверок и без урезанного функционала.

Яндекс.Вебмастер

Проверить сайт на битые ссылки можно в Яндекс.Вебмастере. Для этого нужно открыть панель управления и перейти в разделы «Индексирование» — «Статистика обхода».

Далее, переключиться на вкладку «Все страницы», в фильтре «Код ответа» выбрать 404 Not Found и нажать «Применить».

Список проблемных ссылок можно выгрузить в формате XLS или CSV таблиц.

Google Search Console

Аналогичную процедуру можно провести с помощью  Google Search Console . Здесь работает следующий алгоритм действий. Заходим в панель управления, переходим в разделы «Индекс» — «Покрытие», и во вкладке «Ошибки» получаем развернутый отчет о текущих недочетах на сайте.

Xenu Link Sleuth

Проверенный инструмент для эффективного поиска битых ссылок. Xenu Link Sleuth — это полностью бесплатная программа, устанавливаемая на ПК. По функциональным возможностям она является полноценным аналогом таких популярных коммерческих анализаторов как Netpeak Spider или Screaming Frog SEO Spider.

Несмотря на то, что Xenu не обновляется с 2010 года, она по-прежнему ценится многими специалистами как многофункциональный инструмент для всестороннего аудита внутренней структуры сайта. Помимо поиска неработающих ссылок с ее помощью можно решать много других SEO-задач:

• автоматически генерировать Sitemap;
• находить страницы с большой задержкой отдачи;
• фильтровать документы с неуникальными тайтлами;
• искать страницы с большим уровнем вложенности;
• смотреть статистику внутренних и внешних ссылок по конкретной странице;
• искать картинки с непрописанным атрибутом alt, оптимизируя изображения на сайте.

При всех своих возможностях программа предельно проста в освоении. Из относительных недостатков — устанавливается только на Windows.