SEO-краулер Netpeak Spider: описание программы и главные преимущества

МануалыВидео
11Нравится
2Комментарии
Поделиться

Если вы хотите лучше понимать все возможности нашей программы Netpeak Spider, этот пост для вас. Она поможет вам сэкономить время и:

  1. Провести полный технический SEO-аудит любого сайта и даже конкурента.

  2. Обнаружить критические ошибки оптимизации, которые мешают вам попасть в топ.
  3. Вытянуть любые данные с сайта — цены, лайки, комментарии, и многое другое.
  4. Найти точки роста трафика и инсайты, посмотрев на сайт «с высоты птичьего полёта».
  5. Регулярно составлять отчёты о продвижении + white label — на их основе можно ставить задачи для разработчиков, а специальная White label функция позволит создавать брендированные отчёты для потенциальных или уже существующих клиентов.
  6. Прокачать навыки в SEO, изучив нашу внутреннюю базу знаний прямо в программе и множество материалов на нашем сайте (в Help Center и Блоге).

Я постараюсь дать как можно больше полезной информации в максимально лаконичном формате. А чтобы закрепить знания и заработать несколько баллов для Гриффиндора, приглашаю после прочтения поста или просмотра видео пройти небольшой тест → если чувствуете себя достаточно уверенно, воспользуйтесь быстрым содержанием, чтобы сразу попробовать свои силы в тесте.

  • 1. Старт сканирования
  • 2. Дашборд, таблицы и отчёты
  • 3. Сегментация
  • 4. Параметры и настройки
  • 5. Экспорт отчётов
  • 6. Встроенные инструменты
  • 7. Заключение

1. Старт сканирования

Давайте перейдём в программу и посмотрим, как это всё работает. Чтобы начать анализ сайта, просто введите его URL в адресную строку и нажмите «Старт». Программа сама соберёт данные и сформирует все отчёты, которые вы сразу можете брать в работу.

Начало сканирования сайта в Netpeak Spider

2. Дашборд, таблицы и отчёты

Прошло всего 10 минут, и мы получаем такие отчёты:

  1. Дашборд → здесь выводятся основные диаграммы по сайту: можно быстро понять, на «каком сайт счету». Если необходимо, можете поделиться этим дашбордом, выгрузив его в 1 клик.

    Дашборд с диаграммами после сканирования в Netpeak Spider

  2. Таблицы → это сердце программы, где собраны все данные после сканирования. В Netpeak Spider самая мощная таблица на рынке, которая позволяет удобно работать с огромными массивами данных: ходят слухи, что с таким объёмом данных наша таблица работает даже быстрее Excel. В числе основных фич:
    • группировка,
    • сортировка,
    • быстрый поиск,
    • кастомные фильтры,
    • внутренние базы данных,
    • контекстное меню.
  3. Ошибки → программа определяет больше 80 ошибок поисковой оптимизации и делит их по степени критичности (высокая, средняя и низкая), что можно сразу определить по цвету. Нажав на любую ошибку, вы отфильтруете список страниц, на которых она обнаружена, а в информационной панели внизу найдёте, как определяется эта ошибка, чем она грозит, как её исправить, и даже список ссылок на полезные материалы.
  4. Сводка → по полученным данным программа сама просчитывает некоторые инсайты: например, статус страниц или тип файлов.
  5. Структура сайта → здесь вы сможете посмотреть структуру вашего сайта по сегментам в URL в древовидной форме. Каждый пункт кликабельный. Можно быстро проверить, все ли страницы или файлы находятся в нужной папке на сайте. Также через меню «Экспорт» можно выгрузить полную структуру сайта со всеми параметрами типа title, description и т.д., что крайне полезно для анализа структуры сайта конкурента.
  6. Парсинг → одна из главных функций Netpeak Spider, которая позволяет собирать любые данные со страниц сайта: это могут быть цены, отзывы, SEO-тексты, наличие каких-то уникальных тегов, даты публикации статей и многое другое . В этом отчёте можно фильтровать результаты по каждому парсеру — чуть подробнее о них расскажу позже.

3. Сегментация

Если вы хотите под микроскопом рассмотреть сайт, у нас для этого есть функция сегментации (точно такая же, как в Google Analytics). Эта функция позволяет выделить определённую часть сайта и перестроить все базовые отчёты относительно неё — попробуйте использовать любой фильтр, применить его как сегмент, и вы увидите, какие ошибки обнаружены именно в этой части сайта, или сводную информацию.

Сегментация данных в Netpeak Spider

4. Параметры и настройки

У каждого из нас бывают нестандартные задачи, которые требуют нестандартных решений. Именно в такие моменты пригодится возможность кастомизировать программу под себя, используя параметры и настройки:

  1. Параметры.
    Вы можете управлять параметрами, которые программа будет собирать и обрабатывать. Например, вы можете выключить какие-то параметры, чтобы экономить ресурсы компьютера, повысить скорость сканирования и иметь возможность пробить ещё большее количество страниц. Кстати, нажав на любой из параметров, вы переместитесь к нему в таблице и сможете увидеть его подробное описание в информационной панели.

    Параметры и информационная панель в Netpeak Spider

  2. Настройки.
    • Основные → здесь можно:
      • Настроить скорость сканирования с помощью количества потоков;
      • Включить рендеринг JavaScript, чтобы программа при сканировании выполняла JS-скрипты и находила контент, который с их помощью генерируется;
      • Определить, какие типы файлов мы будем проверять;
      • Включить мультидоменное сканирование. Эта Pro-функция позволяет одновременно сканировать множество сайтов и видеть результаты в едином отчёте.
    • Продвинутые → по умолчанию мы сканируем как можно больше страниц, чтобы найти больше данных и инсайтов. Специально для продвинутых пользователей мы сделали одноимённый раздел настроек, чтобы вы смогли это всё регулировать самостоятельно.
    • Виртуальный robots.txt → здесь вы можете тестировать свои гипотезы для файла robots.txt до того, как зальёте его на сайт.
    • Парсинг → настраивайте здесь свои кастомные парсеры, чтобы извлекать любые данные с сайта. Советую почитать статьи, которые мы добавили на этой вкладке, а если нужна будет помощь — пишите нам в поддержку.
    • User agent → если хотите проверить сайт, используя разные значения этого заголовка, можете использовать один из преднастроенных на этой вкладке или добавить свой собственный.
    • HTTP-заголовки → для выполнения ряда задач нужно использовать собственные значения HTTP-заголовков запроса к серверу, и на этой вкладке вы можете их задать.
    • Ограничения → на этой вкладке пользователи могут оптимизировать определение ошибок под свой конкретный проект. Но хочу акцентировать ваше внимание: по умолчанию мы выставили достаточно чёткие настройки и всегда следим за их актуальностью.
    • Правила → полезная настройка, которая даст вам возможность просканировать только какую-то определённую часть сайта, отфильтровав всё остальное по сегменту в URL: например, можно проверить только страницы блога или карточки товаров.
    • Google Analytics, Search Console и Яндекс.Метрика → Netpeak Spider интегрирован с этими сервисами, что открывает новые возможности для оптимизаторов за счёт обогащения технических показателей сайта данными по аналитике трафика, поведения пользователей и поисковых запросов. Объединяйте эти данные, чтобы найти ещё больше инсайтов и точек роста для вашего проекта.
    • Экспорт → здесь можно задать удобные для вас настройки выгрузки отчётов из программы, включая возможность экспорта сразу в Google Drive.
    • Аутентификация → если сайт на разработке, и доступ к нему закрыт с помощью базовой аутентификации, введите необходимый логин и пароль, чтобы программа использовала его при обращении к серверу.
    • Прокси → полезны в тех случаях, когда нужно просканировать страницы с разных локаций, или когда сайт блокирует обращения с одного IP-адреса.
    • White label → Pro-функция, которая позволяет добавить ваше собственное брендирование (логотип и контактные данные) в SEO-аудит в формате PDF, который программа автоматически генерирует буквально в несколько кликов. Тем самым вы можете повысить персонализированность такого отчёта для ваших клиентов или коллег.

      Настройки white-label отчётов в Netpeak Spider

5. Экспорт отчётов

Чтобы выгрузить PDF-отчёт с SEO-аудитом, после сканирования сайта нажмите на кнопку «SEO Аудит», которая находится на главном окне Netpeak Spider. Посмотрите, какую красоту может выгрузить программа!

Посмотреть отчёт

  1. Отчёт формируется на основе большого массива данных, потому для удобства мы добавили содержание.
  2. Визуализация позволяет быстро увидеть состояние проекта и понять, куда можно прикладывать усилия для эффективной оптимизации.
  3. Ну а в конце отчёта вы напоминаете получателю ваши контактные данные, чтобы он не забыл обсудить его с вами.

Кроме PDF-отчёта программа позволяет выгружать любую таблицу, а также за считанные клики выгрузить какие-то нестандартные отчёты или вообще все отчёты в одну папку.

Меню экспорта отчётов после сканирования сайта в Netpeak Spider

6. Встроенные инструменты

Netpeak Spider — программа с множеством функций и вариантов применения. Мы реализовали специальные встроенные инструменты, чтобы решать ряд задач, как говорится, не отходя от кассы:

Встроенные инструмены в Netpeak Spider: Анализ исходного кода и HTTP-заголовков, расчёт внутреннего PageRank, валидатор и генератор Sitemap

  1. Анализ исходного кода и HTTP-заголовков
    • В левой части экрана отображаются все HTTP-заголовки запроса и ответа сервера, а также GET-параметры, если они есть в URL.
    • В правой — весь исходный код и извлечённый текст.
    • Для удобства используйте поиск, чтобы быстро найти что-то среди всех этих данных.
  2. Расчёт внутреннего PageRank → инструмент, который анализирует ссылки между страницами, помогая улучшать внутреннюю перелинковку на сайте.
  3. Валидатор XML Sitemap → мощная функция, позволяющая проверить вашу карту сайта на 30+ возможных ошибок, которые мы определяем на основе рекомендаций Google, Bing и документации протокола Sitemap: небольшой Netpeak Spider внутри Netpeak Spider, но только нацеленный на XML-карты сайта. Давайте проверим карту сайта toyota.com. Если у вас ещё нет карты сайта, то мы вам всячески сочувствуем и рекомендуем создать её с помощью нашего последнего инструмента.
  4. Генератор Sitemap → он позволяет генерировать не только XML-карты, но ещё и HTML для ещё более крутой индексации.

7. Заключение

Давайте подрезюмируем, что же выделяет Netpeak Spider на фоне множества других программ:

  • Фокус на устранении SEO-ошибок → для них отведён отдельный отчёт с группировкой по критичности и возможностью быстрой выгрузки всех ошибок в несколько кликов для дальнейшей работы с разработчиками и контент-менеджерами.
  • SEO-аудит в PDF + white label → брендирование отчёта и добавление контактных данных для быстрого проведения экспресс-аудитов и заключения новых контрактов по предоставлению услуги SEO.
  • Интеграция с Google Analytics, Search Console и Яндекс.Метрикой → находите новые инсайты с помощью обогащения результатов сканирования аналитическими данными и поисковыми запросами: такое количество полезных данных нужно ещё поискать на рынке!
  • Сегментация данных → уникальная функция, позволяющая абсолютно по-новому взглянуть на сайт. Однажды я просканировал сайт и ещё неделю его крутил-вертел, находя всё новые и новые точки роста.
  • Полная кастомизируемость → используйте параметры и настройки на максимум: всё в ваших руках!
  • Продвинутая таблица результатов → самая мощная на рынке с внушительными функциями: сортировка, группировка, фильтрация, быстрый поиск и подстраивание таблицы под свои нужды.
  • Встроенные инструменты → анализ исходного кода и HTTP-заголовков, расчёт внутреннего PageRank, валидатор и генератор Sitemap: больше не нужно покидать программу, чтобы решать самые разносторонние задачи.
  • И, как вишенка на торте, оптимальное потребление ресурсов компьютера → весь этот функционал использует минимум памяти, а внутренняя база данных позволяет работать с огромным количеством URL.

Хочу узнать больше причин выбрать Netpeak Spider

P.S. У нас также есть второй продукт — Netpeak Checker, по которому мы подготовили аналогичную статью. Приглашаю вас посмотреть видео и почитать о нём, ну а в конце, конечно, пройти тест!

⚙️ Перенесите меня скорей к Netpeak Checker