Сегодня хочу рассмотреть вопрос, о технической составляющей наших сайтов, и предлагаю каждому заглянуть под "капот" своего сайта или блога. Действительно ли с вашим сайтом все в порядке, как это кажется на первый взгляд? Поговорим о программе Xenu, которая поможет найти битые, исходящие и другие непригодные ссылки на вашем ресурсе.

Программа Xenu - проводим технический аудит на сайте

Приветствую, совсем я пропал и перестал заниматься своим блогом. Все больше ухожу в работу с коммерческими сайтами. Воспользуюсь небольшим перерывом и поделюсь полезной программой Xenu для Веб-мастеров, которая уже ни раз меня выручала. Работаю с ней уже довольно давно и постоянно применяю на практике.

Используя программу Xenu вы можете найти все исходящие и битые ссылки на своем сайте.

Коротко расскажу один интересный случай, который случился несколько месяцев назад. На одном из сайтов, над которым я работаю, в частности интернет-магазин произошел взлом. Моя коллега, большое ей спасибо, заметила в нескольких карточках с товаром, подозрительные ссылки на другие сайты. Данные ссылки никак не могут присутствовать на нашем ресурсе, так как мы его используем для клиентов. Сразу же запустили Xenu, на этом сайте довольно много страниц, поэтому проверка занимает примерно 1-2 часа.

В конце проверки мы обнаружили порядка 20 исходящих ссылок, в том числе, на сайты 18+ и интернет-казино. Так же удалось вычислить злоумышленника, так как он оставил исходящую ссылку и на себя. Да, существует такая биржа в интернете, которая продает ссылки со взломанных сайтов, возможно кое-кто о ней слышал.

В результате мы все почистили, так же нашли пару интересных скриптов и заменили пароли. Последствия были не сильно ощутимы, но потеряли немного трафик в Google, так как отреагировали примерно спустя неделю... Перейдем к практике.

Проверка исходящих и внешних ссылок

Основываясь на истории, которую я вам рассказал, если вы заподозрили, что с вашим ресурсом что-то не так (к примеру потеря позиций или трафика), советую периодически прогонять свой сайт или блог с помощью данной программы. Вы даже можете это сделать сейчас, в целях профилактики, вместе со мной.

Первое, что мы с вами посмотрим, это как обнаружить внешние ссылки. Xenu вы можете скачать по ссылке программа для проверки внешних ссылок .

1. Запускаем программу, вводим адрес нашего сайта и нажимаем ОК.

Ждём пока робот, пробежит по всем нашим страничкам. В зависимости от того, на сколько много у вас страниц, сканирование длится от нескольких минут до нескольких часов.

2. Как только робот обошел все страницы, мы видим список различных ссылок, которые присутствуют на нашем ресурсе. Для того, что бы было проще увидеть и найти исходящие ссылки с вашего сайта, сортируем ссылки по полю "Address". Смотрим на начало списка и конец, и вот наши внешние ссылки.

3. Для того, что бы быстро найти страницы откуда проставлена внешняя ссылка, необходимо при нажатии, правой кнопкой мыши по "плохой" ссылке выбрать "URL properties".

Ищем битые ссылки на сайте с Xenu

Теперь давайте проверим, есть ли на сайте битые ссылки, которые отдают 404 код и как их найти. Основная причина появления таких ссылок, это то, что адрес (URL) страницы, на которую ведет ссылка поменялся или страница удалена, а ссылка осталась. Так же есть и другие причины.

При такой сортировке, вы так же сможете найти и ссылки по которым происходит редирект, что тоже очень полезно.

Я рассказал вам основные два моменты по поиску внешних и битых ссылок на сайте с помощью Xenu. Программа является бесплатной и на сколько я знаю, уже довольно старая и не обновляется, но для нас главное, что работает.

Так же я использую данную программу, при "первом знакомстве" с сайтом, которым начинаю заниматься.

На этом все, если у вас есть другой интересный софт на данную тему, делитесь в комментариях!

Xenu – это сокращенное название программы Xenu’s Link Sleuth, предназначенной для внутреннего аудита сайта и поиска битых ссылок.

При изменении структуры сайта или URL-адресов на других страницах могут оставаться неактуальные ссылки, ведущие на старые несуществующие адреса. Именно поиск таких ссылок и является основной задачей Xenu. Программа является бесплатной, потому она очень популярна во всем мире. Это простой софт, позволяющий в короткие сроки проанализировать сайт на наличие битых ссылок и не только.

Возможности Xenu

Помимо поиска неработающих и битых ссылок, программа умеет:

искать изображения, фреймы, скрипты, плагины, стили и др.;
искать страницы с большим временем отклика;
искать страницы с большим весом;
искать страницы с большим уровнем вложенности;
проводить анализ внутренней перелинковки;
искать одинаковые заголовки Title;
искать изображения без атрибута alt;
составлять карту сайта;
проверять защищенные сайты по протоколу SSL (https://).

Xenu способна анализировать как весь сайт, так и его отдельные страницы. Также есть возможность проанализировать локальные документы на ПК.

В процессе анализа в основном окне будут отображаться результаты. В дальнейшем их можно будет экспортировать, допустим, в Excel.

Как работает программа

Чтобы начать анализ сайта в Xenu, необходимо запустить софт и нажать на вкладку File. Далее выбрать первый пункт Check URL.

Указываем адрес сайта, отдельных страниц или путь к документу на ПК.

После запуска в основном окне программы будут отображаться результаты анализа. Анализироваться будут как URL-адреса страниц, так и ссылки на различные файлы.

С помощью различных табуляторов вы сможете отсортировать ссылки по разным параметрам: Status (битая или нет), Type (формат файла), Size (размер страницы), Title (заголовок) и Level (уровень вложенности).

- бесплатная программа, помогающая вебмастеру находить неработающие ссылки на сайте. Позволяет найти битые ссылки, изображения, фреймы, дополнительные модули (plug-ins), фоновые рисунки (backgrounds), графические карты сайта (local image maps), таблицы стилей (style sheets), скрипты и Java-апплеты.

Программа выводит список проверенных ссылок с сортировкой по различным параметрам. Также она позволяет создавать отчет с результатами проверки. В отчёт будет включены неисправные ссылки и все страницы на которых есть ссылки с нерабочей ссылкой, карта страниц и т.д.

Поддерживает SSL веб-сайтов ("https://"), частичное тестирование Gopher, FTP и почтовых адресов.

Xenu определяет перенаправления (редирект) URL-адресов. И немаловажный момент в работе с программой: с помощью нее можно легко составить карту сайта.

Возможности Xenu Link Sleuth:
- Возможность повторной проверки битых ссылок (пригодится при временной недоступности проверяемого сайта).
- Простой формат отчета.
- Размер исполняемого файла программы меньше 1Мб.
- Функция проверки защищенных сайтов по протоколу SSL ("https://").
- Определение и вывод редиректов (т.е. пересылок на другие страницы).
- Составление карты проверяемого сайта.

Внимание!
Для работы программы требуется библиотека WININET.DLL, входящая в состав Internet Explorer.

Как пользоваться Xenu можно подсмотреть на .

Xenu Link Sleuth для анализа сайта — это одна из самых важных операций для последующего его продвижения в интернете. Качественно сделанный сайт приносит неплохую прибыль своему хозяину. Такие ресурсы посещают много людей, они находятся в топе списка и всегда предлагают гостям интересный контент.

Однако, портал необходимо периодически проверять на предмет битых ссылок или некачественных изображений. Конечно, можно сделать это вручную. Однако в век технологий, когда программы для ПК значительно облегчают нам жизнь, проще и эффективней воспользоваться софтом. Весь вышеперечисленный функционал и предлагает Xenu Link Sleuth — бесплатная программа для проверки сайта. Она ищет битые ссылки и анализирует их. Утилита проверяет все и даже изображения на вашем ресурсе и выдает детальный отчет о продленной работе.

Утилита представлена в виде простой программки. Как только вы ее скачаете, сразу станет ясно, что это эффективный и простой софт для анализа сайта. Ниже, мы приведем для вас основные возможности программы. Стоит отметить, что данный софт является зарубежным, однако он прекрасно русифицирован.

Основные возможности программы Xenu Link Sleuth

★ Нахождение не уникальных тайтлов. Тайтл (title) — это заголовок и у каждой страницы он собственный. Если у страницы не будет тайтла, то она продублируется как не уникальная страница. Данная программа показывает тайтлы страниц, где низкий уровень уникальности. Эти страницы вы можете редактировать.
★ Время отдачи. Утилита показывает время отдачи каждой странице. Если оно слишком велико, то вы можете оптимизировать ее.
Xenu Link оказывает исходящие ссылки от каждой страницы. За этими ссылками нужно следить и также оптимизировать, дабы состоять в топе поисковых систем.
★ Проверка уровня вложенности страниц. Этот уровень не должен быть высоким. В противном случае, посетить может не добраться до нужной информации.
★ Анализ перелинковки. Иными словами, программа позволяет узнать вес каждой страницы на сайте. Это даст вам информацию о том, на какие странницы ссылается ваш ресурс больше или меньше всего.
★ Составления карты сайта. Это очень полезная функция для каждого владельца портала, Xenu Link Sleuth создаёт карту навигации с разрешением. xml .
Атрибут ALT в картинках. Данный атрибут очень важен для изображений, ведь с его помощью ваш ресурс могут найти через картинки или фото.

Достоинства :

✔ Бесплатность;
✔ Очень простой интерфейс;
✔ Быстрая проверка всех битых ссылок;
✔ Удобное разрешение отчета, который можно переслать по e- mail;
✔ Малый размер файла;
✔ Проверка через протокол https://;

Недостатки :
✘ Программа давно не обновляется, есть риск появления сбоев при работе и проверки сайта.

Скриншоты:

Как пользоваться утилитой?

Чтобы скачать Xenu Link Sleuth , нужно перейти по ссылке ниже. Скачивание автоматически начнётся через секунду. Для созданий новой проверки идем по пути: “файл”>”проверить ссылку”. Откроется окно для проверки. Ставим галочку напротив “проверка внешних ссылок”. Если файл для проверки на вашем ПК, то выберите его, нажав на “локальный файл”. После проверки, красным цветом будут помечены битые ссылки. Если вас интересует одна из них, нажмите ПКМ и выберите “свойства ссылки”. В нижней части будет адрес ссылки. Если это ваша ссылка, то вы можете отредактировать ее или удалить.

При проверке сайта важно найти и исправить все ошибки, битые ссылки и неправильные редиректы, так как их отсутствие является положительным факторов в ранжировании сайта.

Хочу посоветовать отличный софт: - старый надежный crawler, который быстро просканирует сайт и найдет буквально все : битые ссылки, редиректы, ошибки, зашированные url, размер документа, дату и многое другое. Последняя версия от 2010 года, но это не мешает Xenu находит больше ошибок за меньшее количество времени, чем многие современные аналоги.

Идем на оффициальный сайт http://home.snafu.de/tilman/xenulink.html и скачиваем софт:

Установка быстрая и ничем не отличается от установки любого другого софта. Для того, чтобы просканировать сайт, необходимо перейти в "File" – "Cheсk Url" и ввести домен:

После проверки, вам предложат составить отчет в формате.htm:

Будет выглядеть он так (как видим, у меня все в порядке):

Но это не все, у программы есть множество дополнительных настроек, например:

Мы можем регулировать скорость анализа и количество потоков
Выводить более детальную статистику о каждой странице сайта. Например, чтобы показывать все редиректы, нужно зайти в "Options" - "Preferences" и поставить галочку "Treat redirections as errors" - тогда все редиректы будут отображаться как ошибка и отдавать ответы 301 или 302: