Проверка ссылок онлайн Как и где проверить сайт на битые ссылки ТОП-10 проверенных ресурсов, с помощью плагина ВордПресс

Оптимизация сайта невозможна без такого инструмента как ссылки. О том как наращивать ссылочную массу и зачем нужны ссылки на сайт мы говорили в предыдущей статье, сегодня поговорим о такое «беде» сео-оптимизаторов как битые, неработающие ссылки, которые уже размещены на вашем сайте (не важно кто их размещал), почему они перестали работать и как осуществить проверку сайта на битые ссылки онлайн и по расписанию.

Что такое неработающая ссылка?

Битая ссылка — это страница на сайте, которую невозможно открыть. Когда потенциальный посетитель пытается получить к доступ к странице и кликает на такую ссылку, в ответ он получает ошибку. Эта ошибка может быть 404 Not Found или 400 Bad Request. Или вообще без кода: тайм-аут, пустая страница, сброс. Это зависит от настроек конкретного сайта, и если оболочка разная, то смысл один и тот же. Сервер сообщает пользователю, что запрашиваемая страница отсутствует.

Такие ссылки также иногда называют «мертвыми», «битыми». Они возникают по нескольким распространенным причинам:

1. В адресе страницы допущена ошибка. Неправильное слово или пропущенный символ.
2. Структура сайта недавно кардинально изменилась, без установки перенаправлений со старых Урлов на новые адреса.
3. Ссылки на сторонний контент на сайте акцепторе были удалены или каким-то образом «сломаны».
4. В коде страницы есть ошибки, или в HTML или в JavaScript. Это может быть и ошибкой в CMS.

Откуда берутся битые ссылки?

При продвижении сайта постоянно приходится вносить изменения: удалять устаревшие статьи, объединять,разъединять разделы, переименовывать URL-адреса. И чем сложнее ресурс, тем легче что-то забыть и совершить ошибку.

Например, страница имела адрес «site.ru/page123», а получила «site.ru/price-list». В то же время, перенаправление с первого URL на второй не было установлено. Таким образом, все ссылки, ведущие на ‘site.ru/page123’, станут нерабочими. При попытке щелкнуть по ним пользователь увидит в браузере ошибку 404.

Неработающие ссылки также появляются в результате банальных опечаток. При написании статьи копирайтер может случайно вставить лишний символ в текст ссылки, что также сделает ссылку недействительной. Сервер не будет интуитивно догадываться, что «site.ru/statya-»-это похоже на «site.ru/statya» только без маленького пробела в конце, и поэтому может открыть его.

В целом, неработающие ссылки — это не уловки хакеров или злых конкурентов, а вполне естественное явление. Я уверен, что хотя я систематически проверяю сайт на предмет битых ссылок, чтобы их исправить даже на моем сайте найдется несколько ссылок, которые ведут в никуда…

Чем опасны битые ссылки?

Существуют две неподтвержденные теории и один достоверный факт, подтверждающий серьезную угрозу от неработающих ссылок.

Первая теория заключается в следующем. Считается, что роботы поисковых систем Google и Yandex не любят неработающие ссылки. Заметив их, поисковые системы считают, что страница давно заброшена или сделана настолько криво, что ее стыдно показывать людям. Поэтому позиции ресурса в Google и Yandex заметно «просядут». Но никто еще не доказал, что это правда.

Вторая теория. Предположительно неработающие ссылки расходуют бюджет индексации — количество страниц, которые поисковые системы индексируют за определенный период времени. Но именно здесь представитель Google вмешался и сказал, что ошибка 404 никак не повлияет на бюджет индексации.

Но что действительно важно, так это соотношение количества посетителей на сайте с неработающими ссылками. Они не задерживаются на нем надолго. Обычно в сообщении 404 Not Found говорится, что нужно перейти на домашнюю страницу и воспользоваться поисковой системой. Но это никого не волнует. Человек просто вернется в Google и будет искать ресурс с оперативной ссылкой. Вот и все. Вы потеряли своего посетителя.

Из-за этого процент отказов увеличится. А это не только потерянная аудитория, но и проблемы с ранжированием. Поисковая система простит вам неработающую ссылку, но она не простит посетителя, который провел на странице всего секунду и неожиданно ушел.

Проверка ссылок онлайн — какие существуют инструменты

Если на сайте много страниц, невозможно вручную проверить каждую страницу и нажать на все доступные ссылки (а это и не нужно делать). Лучше использовать специальные инструменты поиска. Это можно сделать с помощью официальных веб-мастеров:

1. Google Search Console. В старом интерфейсе неправильные ссылки отображались в отчете «Crawl Errors». В новой версии это находится в разделе «Покрытие».
2. Яндекс.Вебмастер. Эти данные можно найти в главе «Индексирование». → «Статистика обхода». Вы также можете заглянуть в раздел «Ссылки».

Еще больше неработающих ссылок можно увидеть в отчетах по заголовкам страниц в Яндекс.Метрике и Google Analytics. Если, конечно, страница 404 имеет заголовок, отличный от остальных. На скриншоте ниже показана статистика для одного из конструкторов страниц. При нажатии на неработающую ссылку отображается заголовок страницы по умолчанию.

ТОП сервисов для проверки битых ссылок

Вы также можете проверить свой сайт на предмет битых ссылок на одном из сторонних инструментов SEO-аудита. Например:

• Xenu’s Link Sleuth. Это бесплатная настольная программа, довольно функциональная, хотя и несколько устаревшая.
• Screaming Frog SEO Spider. Платная программа для настольных компьютеров. Проверьте 500 URL-адресов бесплатно.
• SEO и анализ веб-сайта. Бесплатный и удобный плагин для Chrome.
• Badlinks.ru. Платный онлайн-сервис. Стоит от 50 рублей, сумма зависит от количества страниц и регулярности проверки.

Xenu’s Link Sleuth

Проверенный инструмент для эффективного поиска нефункционирующих ссылок. Xenu’s Link Sleuth — это полностью бесплатная программа, которая устанавливается на компьютер пользователя. По функциональности он является полноценным аналогом популярных коммерческих анализаторов, таких как Netpeak Spider или Screaming Frog SEO Spider.

Хотя Xenu не обновлялся с 2010 года, он по-прежнему ценится многими экспертами как комплексный инструмент для всестороннего аудита внутренней структуры сайта. Помимо поиска битых ссылок, его можно использовать для решения многих других SEO-задач:

1. Автоматическое генерирование файла Sitemap;
2. Находит страницы с высокой задержкой поиска;
3. Находит одинаковые заголовки и описания страниц;
4. Просмотр статистики внутренних и внешних ссылок для страницы;
5. Показывает для каких изображений не прописаны Альты.

При всех своих возможностях программа очень проста в освоении. Из относительных недостатков — устанавливается только на Windows.

Netpeak Spider

Это настольное приложение, которое идеально подходит для регулярной проверки проектов. Функциональность системы очень богата и позволяет провести полный, всесторонний технический аудит сайта. Его дружественный и интуитивно понятный интерфейс позволит вам быстро разобраться в функциях программы и внедрить ее в свой собственный отдел интернет-маркетинга. Бесплатный период составляет 2 недели. Официальный сайт netpeaksoftware.com

Изысканный образ жизни: зачем богатые клиенты выбирают аренду роскошных автомобилей в Дубае.

LinkChecker

Валидатор ссылок со свободной лицензией GPL. Инструмент доступен в виде настольной программы. Вы можете использовать его для проверки ссылок на отдельных страницах или для сканирования всего сайта. В отличие от Xenu’s Link Sleuth эту программу можно использовать не только в Windows, но и в Linux или macOS. Из минусов: вам придется потратить время на то, чтобы разобраться с установкой и понять, как работает программа. Интерфейс на английском языке.

Имеет все функции, которые только можно пожелать от программы проверки ссылок на сайт. Лучше всего то, что он выделяет url исходной страницы, на которой была обнаружена ошибка, поэтому вы всегда сможете быстро и легко исправить неработающие ссылки. Сводный отчет о результатах довольно прост в использовании. Каждая проверенная ссылка будет содержать дополнительную информацию, включая заголовок страницы, тип и код ошибки, ответ сервера и многое другое. Кроме того, LinkChecher поддерживает настройку глубины рекурсии (максимальное количество переходов от первой до последней ссылки).

LinkChecker также можно запустить из командной строки. Имеется большой набор опций консоли, которые позволяют легко использовать программу с пакетными файлами (например, добавить пакетный файл, выполняющий серию проверок по расписанию).

Ключевые характеристики:

1. Рекурсивная и многопоточная проверка сайта.
2. На выходе программы вы можете получить отчет в виде обычного текста, html, csv и xml файла, а также карту сайта в различных форматах.
3. Поддерживаемые ссылки включают HTTP/1.1, HTTPS, FTP, mailto:, nntp:, Telnet и ссылки на локальные файлы.
4. Поддержка ограничений на проверку ссылок на основе фильтров url регулярных выражений.
5. Поддерживает прокси-серверы.
6. Аутентификация для HTTP, FTP и Telnet.
7. Может принимать во внимание исключения из файла robots.txt.
8. Работает с файлами

Screaming Frog SEO Spider

SEO Frog — это инструмент анализа сайта, знакомый любому оптимизатору. Он устанавливается на ваш компьютер, а бесплатная версия ограничена 500 проверяемыми URL-адресами. Он отлично подходит для владельцев сайтов, которые занимаются саморекламой своего проекта. Для больших команд необходимо приобрести лицензию.

Проверка ссылок онлайн с Brokenlinkcheck

Среди онлайн-инструментов для поиска нефункционирующих ссылок лучшим решением, вероятно, является www.brokenlinkcheck.com. Сразу отметим, что это условно бесплатный инструмент, но с очень привлекательными условиями использования. Бесплатная версия обеспечивает бесплатную проверку 3000 страниц сайта без ограничения количества сканируемых ссылок. Этот предел недостаточен для постоянного использования инструмента, но это хороший выбор для тех, кто хочет провести разовый аудит собственного проекта.

Управление максимально простое и не требует регистрации. Все, что вам нужно сделать, это ввести адрес сайта и начать сканирование. Алгоритм подготовит подробный отчет, содержащий не только внутренние, но и внешние URL. Валидатор точно определит неработающие ссылки и покажет, где именно в вашем HTML-коде находятся проблемные элементы.

Проверка битых ссылок — плагин WordPress

Разговор о валидаторах ссылок был бы неполным без разговора о плагинах WordPress. На мой взгляд это лучшее решение для сайта. Он не самый простой в освоении, но потратить время на его понимание — определенно стоит, если у вас есть сайт на WordPress. Основная цель плагина — поиск и отслеживание битых ссылок.

Он сканирует все содержимое вашего сайта, включая комментарии, списки блогов, содержимое пользовательских полей и т.д., уведомляя вас о любых обнаруженных проблемах в панели управления или по электронной почте.

Плагин также обнаруживает недоступные изображения и перенаправляет их. Редактирование неработающих ссылок может осуществляться непосредственно из панели ВП, что значительно ускоряет работу. В консоли ВП заходите на вкладку «Инструменты» и внизу видите все свои неработающие ссылкиэ

Примеры пользовательских страниц 404 на сайтах различных компаний:

ConvertMonster

Как битые ссылки вредят SEO

Большое количество неработающих ссылок — это бомба замедленного действия для поискового продвижения. Вот почему.

1. Ухудшение поведенческих факторов. Когда пользователь попадает на страницу 404, он сразу же покидает ее. Таким образом, несуществующие страницы увеличивают процент отказов и уменьшают среднее время взаимодействия с сайтом.
2. Подрывают репутацию сайта вцелом перед поисковыми роботами. Постоянно попадая на несуществующие страницы, поисковые системы придут к выводу, что они имеют дело с запущенным и некачественным сайтом, которому не место в верхней части результатов.
3. Трата бюджета на сканирование. Поисковые системы имеют ограничения на количество документов, которые они могут просматривать одновременно. Тратя бюджет на клики по неработающим ссылкам, краулеры могут долгое время не отправлять в индекс действительно важные страницы.

Неэффективное перераспределение веса соединения. Все внутренние ссылки на странице обмениваются статическим весом. Чем эффективнее процесс отладки, тем выше рейтинг. Битые ссылки в этом случае становятся лазейкой, через которую ссылочный вес просто уходит в никуда.

Как удалить или исправить битую ссылку

Чтобы удалить мертвые гиперссылки, можно воспользоваться одним из следующих вариантов:

1. Исправьте ссылку на правильную вручную или удалите ее. Через плагин ВП это можно сделать одним кликом.
2. Настройте перенаправление «301». Когда вы меняете структуру URL или движок, вы можете перенастроить постоянную страницу 301 редиректа в файле .htaccess.
3. Большое количество внутренних перенаправлений на неработающие страницы может негативно сказаться на сайте, поэтому рекомендуем первый вариант — исправление неработающей ссылки на работающую вручную.

Битые ссылки не являются основным фактором, вызывающей проблемы с ранжированием в поисковых системах. Но их не следует игнорировать. Десяток мелких недоработок на сайте приводит к большому падению позиций — это аксиома.