Netpeak Spider 2.1.0.8: Сканирование по списку URL

Как и обещали, представляем вашему вниманию одну из самых долгожданных фишек в Netpeak Spider → новый режим сканирования «По списку URL». Мы очень тщательно продумывали различные варианты реализации и теперь хотим предложить вам оценить: удалось ли нам достичь максимального удобства в использовании, сделав это в своём стиле? Обязательно ознакомьтесь с нашим обзором, чтобы взвешенно ответить на этот вопрос :)

1. Как пользоваться

Так как это новый режим сканирования, то и выбирать его необходимо среди других режимов, а удобно это сделать можно с помощью панели «Быстрые настройки», которая появилась совсем недавно (надеюсь, вы уже её опробовали?).

Всего добавлять свой список URL можно тремя способами:

• вручную → просто добавляя необходимое количество строк и прописывая нужные URL;
• через буфер обмена → просто нажмите Ctrl+V, находясь в таблице редактирования списка URL, и ощутите всю мощь горячих клавиш;
• из TXT-файла → в файле, как и в буфере обмена, все URL должны начинаться с протокола http / https и находиться на отдельной строке. Кстати, специально для вас мы реализовали возможность выбрать несколько файлов одновременно – Netpeak Spider хорошо знает, как удобно преподнести информацию в этом случае: об этом читайте чуть ниже.

Мы рады сообщить, что если вы работаете с одним и тем же списком URL, то вам вдвойне повезло – последний список URL, что вы составляли, будет запоминаться и вы можете не волноваться, что он пропадёт, когда вы выйдете из программы.

Чтобы ещё лучше понимать, как работают списки, знайте: новый режим позволяет с помощью отдельного интерфейса удобно формировать «список на пробивку» – своеобразную очередь, сканирование которой вы можете запустить только нажав на кнопку «Старт». В этом заключается принципиальное отличие от режима «По всему сайту», в рамках которого Netpeak Spider идёт в глубину сайта и не может с точностью сказать, сколько ему ещё нужно просканировать страниц. А при сканировании пользовательского списка URL программа проверяет только указанные страницы и не идёт вглубь сайта.

В рамках нового режима сканирования мы подготовили для вас несколько особенных сюрпризов, о которых расскажем в следующем пункте.

2. Особенности нового режима сканирования

2.1. Валидация

Как вы уже успели заметить, мы очень любим проверять всё на ошибки. Потому там, где это возможно, всегда внедряем различные валидации.

В данном случае, когда вы работаете со списком URL, то Netpeak Spider автоматически проводит валидацию, включающую:

• проверку списка на:
  • дубликаты → удаляет дублирующиеся строки, оставляя главный URL
  • соответствие стандартному маскированию URL → схема:[//[логин:пароль@]хост[:порт]][/]путь[?параметры][#якорь]
• понижение регистра символов протокола и хоста
• удаление «пустых символов» в строке до и после URL

Это позволяет держать ваш список в чистоте и порядке :)

2.2. Статус-панель и 4 вида оповещений

В какой-то момент мы осознали, что даже в таком простом месте, как редактирование списка URL, не обойтись без статус-панели, которая будет оповещать об основных событиях, среди которых:

• добавленные URL → вы не поверите, но далеко не всегда тот список, что вы добавляете, будет идеальным и безошибочным, потому мы просто обязаны были сделать этот пункт;
• найденные дубликаты → если мы найдём в списке дубликаты, то главный URL мы оставим, а все остальные покажем в отдельной таблице, которую вы сможете открыть, нажав как раз на количество дубликатов в статус-панели;
• данные, не соответствующие формату URL → если мы обнаружим в списке неправильный формат URL, то отчёт по таким строкам вы увидите именно здесь;
• удалённые URL → этот пункт необходим, чтобы оповестить вас, что удаление прошло успешно: кстати, удалять URL можно как с помощью контекстного меню (вызывается правой кнопкой мыши), так и с помощью горячей клавиши Delete (выбрав один или несколько URL сразу).

Очень советуем наблюдать за статус-панелью, чтобы всегда быть в курсе, всё ли проходит гладко.

2.3. Сохранение списка в TXT-файл

Мы уверены, что одного-единственного списка URL вам будет недостаточно, чтобы полноценно и быстро работать с программой. Потому мы реализовали сохранение вашего текущего списка в файл.

Попробуйте сохранить основные списки URL, которые вы сканируете, в разные файлы в одной папке – это позволит при необходимости быстро переключаться между ними, используя функцию «Загрузить из TXT-файла». Когда мы говорим «быстро», то имеем в виду, что:

• это можно делать даже с помощью комбинации Ctrl+O – короче говоря, в новом режиме хватает горячих клавиш :)
• вы можете выделить необходимые файлы и просто перенести их в окно редактирования списка – так называемый Drag’n’Drop.

3. Примеры решаемых задач

Мы подготовили для вас небольшой список примеров, которые достаточно ярко иллюстрируют, в каких случаях может оказаться чрезвычайно полезным новый режим сканирования. Итак, поехали!

✔ Переезд

По типу переезды бывают следующими:

• с одного домена на другой;
• с поддомена www на без www или наоборот;
• с протокола http на https (или, в редких случаях, наоборот);
• внутри сайта (к примеру, при изменении структуры категорий).

Какой бы тип переезда ни был, вы всегда хорошо знаете, какая структура у проекта сейчас и какой она должна стать. Задача заключается лишь в том, чтобы проверить, точно ли всё сделано так, как было описано в ТЗ. Netpeak Spider поможет быть во всеоружии при отстаивании своей позиции :)

✔ Повторное сканирование

Мы достаточно часто получаем просьбы внедрить возможность перепроверки URL, чтобы после исправлений SEO-ошибок можно было быстро понять, всё ли правильно сделано. Признаемся, у нас есть в планах реализация этой фишки, а пока мы её делаем вы можете абсолютно безболезненно скопировать необходимые URL в новый список и проверить только их → таким образом эта задача будет полностью закрыта.

✔ Сравнение с конкурентами

Netpeak Spider на данный момент проверяет 40+ параметров и 50+ ошибок в них. Попробуйте добавить в список продвигаемые страницы вашего сайта и соответствующие страницы «успешных» сайтов конкурентов, чтобы проверить степень их оптимизации → это всегда очень хороший стимул быстрее исправлять у себя основные SEO-ошибки.

Кстати, узнать самые популярные страницы вашего сайта и соответствующие им страницы конкурентов поможет сервис наших хороших друзей – Serpstat:

• Шаг 1: введите адрес своего сайта на главной странице и нажмите «Поиск»;
  
• Шаг 2: зайдите в раздел «SEO-анализ» → «Страницы сайта»: здесь вы увидите самые популярные страницы вашего сайта с наибольшей видимостью;
  
• Шаг 3: нажмите на любую важную страницу вашего сайта: таким образом вы попадёте в раздел «Анализ страниц»;
  
• Шаг 4: перейдите в раздел «Конкуренты»: как раз здесь вы и увидите страницы ваших основных конкурентов (именно страницы, а не домены);
  
• Шаг 5: экспортируйте данную таблицу в любом удобном формате и загружайте необходимые URL в Netpeak Spider.
  

✔ Проверка на наличие обратных ссылок

В будущем мы обязательно реализуем более удобную проверку на наличие обратных ссылок (скорее всего в Netpeak Checker), а пока что вы вполне можете воспользоваться такой последовательностью действий:

• добавьте в список страницу продвигаемого сайта, ссылка на которую должна стоять на страницах доноров;
• добавьте в список все URL, на которых должны стоять ссылки на вас;
• просканируйте весь список с включённым параметром «Входящие ссылки»;
• вызовите контекстное меню при нажатии на URL продвигаемого сайта и выберите «Входящие ссылки» → Netpeak Spider проверяет все ссылочные связи между страницами, указанными в списке: таким образом вы увидите все ссылки на продвигаемый URL в рамках текущего списка;
• исключите найденные выше страницы из общего списка доноров и получите список URL, которые не содержат ссылку на продвигаемый вами сайт.

Стоит признать, что данный пример не является основной целью использования нового режима сканирования – это скорее приятный побочный эффект от него :)

✔ Регулярные проверки на ошибки

Попробуйте составить единый список самых важных URL в вашей работе и время от времени его проверять → в новом режиме нет ограничения по одному сайту, потому этот список может содержать все самые важные ссылки, ошибки на которых крайне критичны и требуют максимально оперативного вмешательства.

Редиректы или 404 ошибки, слишком большое время ответа сервера, изменившийся Title, пропавшие атрибуты ALT у изображений, закрытие от индексации в robots.txt, с помощью Meta Robots, X-Robots-Tag или Canonical – это лишь часть ошибок, которые время от времени возникают даже у крупных и серьёзных игроков рынка. Составьте свой список критических ошибок и проверяйте только на него, сэкономив время и (в будущем) нервы.

Зарегистрируйтесь, если вы ещё не с нами

Чтобы начать пользоваться бесплатным Netpeak Spider, просто зарегистрируйтесь, скачайте и установите программу — и вперёд!

Зарегистрироваться

Коротко о главном

Мы реализовали новый режим сканирования в Netpeak Spider – «По списку URL». Этот режим позволяет выполнять самые разнообразные задачи и открывает новый потенциал программы. Интерфейс сделан таким образом, чтобы всегда держать пользователя в курсе, как идёт процесс работы со списком URL. Попробуйте новый режим и выскажите своё мнение!

Мы уверенно идём к своей цели (её кодовое название «Netpeak Spider 2.1.3») и очень скоро порадуем вас новыми фишками → следите за обновлениями!