SEO-краулер Netpeak Spider: описание программы и главные преимущества

МануалыВидео
10Нравится
Комментарии
Поделиться

Если вы хотите лучше понимать все возможности нашей программы Netpeak Spider, этот пост для вас. Она поможет вам сэкономить время и:

  1. Провести полный технический SEO-аудит любого сайта и даже конкурента.
  2. Обнаружить критические ошибки оптимизации, которые мешают вам попасть в топ.
  3. Вытянуть любые данные с сайта — цены, лайки, комментарии, и многое другое.
  4. Найти точки роста трафика и инсайты, посмотрев на сайт «с высоты птичьего полёта».
  5. Регулярно составлять отчёты о продвижении + white label — на их основе можно ставить задачи для разработчиков, а специальная White label функция позволит создавать брендированные отчёты для потенциальных или уже существующих клиентов.
  6. Прокачать навыки в SEO, изучив нашу внутреннюю базу знаний прямо в программе и множество материалов на нашем сайте (в Help Center и Блоге).

Я постараюсь дать как можно больше полезной информации в максимально лаконичном формате. А чтобы закрепить знания и заработать несколько баллов для Гриффиндора, приглашаю после прочтения поста или просмотра видео пройти небольшой тест → если чувствуете себя достаточно уверенно, воспользуйтесь быстрым содержанием, чтобы сразу попробовать свои силы в тесте.

  • 1. Старт сканирования
  • 2. Дашборд, таблицы и отчёты
  • 3. Сегментация
  • 4. Параметры и настройки
  • 5. Экспорт отчётов
  • 6. Встроенные инструменты
  • 7. Заключение
  • 8. Тест

1. Старт сканирования

Давайте перейдём в программу и посмотрим, как это всё работает. Чтобы начать анализ сайта, просто введите его URL в адресную строку и нажмите «Старт». Программа сама соберёт данные и сформирует все отчёты, которые вы сразу можете брать в работу.

Начало сканирования сайта в Netpeak Spider

2. Дашборд, таблицы и отчёты

Прошло всего 10 минут, и мы получаем такие отчёты:

  1. Дашборд → здесь выводятся основные диаграммы по сайту: можно быстро понять, на «каком сайт счету». Если необходимо, можете поделиться этим дашбордом, выгрузив его в 1 клик.

    Дашборд с диаграммами после сканирования в Netpeak Spider

  2. Таблицы → это сердце программы, где собраны все данные после сканирования. В Netpeak Spider самая мощная таблица на рынке, которая позволяет удобно работать с огромными массивами данных: ходят слухи, что с таким объёмом данных наша таблица работает даже быстрее Excel. В числе основных фич:
    • группировка,
    • сортировка,
    • быстрый поиск,
    • кастомные фильтры,
    • внутренние базы данных,
    • контекстное меню.
  3. Ошибки → программа определяет больше 80 ошибок поисковой оптимизации и делит их по степени критичности (высокая, средняя и низкая), что можно сразу определить по цвету. Нажав на любую ошибку, вы отфильтруете список страниц, на которых она обнаружена, а в информационной панели внизу найдёте, как определяется эта ошибка, чем она грозит, как её исправить, и даже список ссылок на полезные материалы.
  4. Сводка → по полученным данным программа сама просчитывает некоторые инсайты: например, статус страниц или тип файлов.
  5. Структура сайта → здесь вы сможете посмотреть структуру вашего сайта по сегментам в URL в древовидной форме. Каждый пункт кликабельный. Можно быстро проверить, все ли страницы или файлы находятся в нужной папке на сайте. Также через меню «Экспорт» можно выгрузить полную структуру сайта со всеми параметрами типа title, description и т.д., что крайне полезно для анализа структуры сайта конкурента.
  6. Парсинг → одна из главных функций Netpeak Spider, которая позволяет собирать любые данные со страниц сайта: это могут быть цены, отзывы, SEO-тексты, наличие каких-то уникальных тегов, даты публикации статей и многое другое . В этом отчёте можно фильтровать результаты по каждому парсеру — чуть подробнее о них расскажу позже.

3. Сегментация

Если вы хотите под микроскопом рассмотреть сайт, у нас для этого есть функция сегментации (точно такая же, как в Google Analytics). Эта функция позволяет выделить определённую часть сайта и перестроить все базовые отчёты относительно неё — попробуйте использовать любой фильтр, применить его как сегмент, и вы увидите, какие ошибки обнаружены именно в этой части сайта, или сводную информацию.

Сегментация данных в Netpeak Spider

4. Параметры и настройки

У каждого из нас бывают нестандартные задачи, которые требуют нестандартных решений. Именно в такие моменты пригодится возможность кастомизировать программу под себя, используя параметры и настройки:

  1. Параметры.
    Вы можете управлять параметрами, которые программа будет собирать и обрабатывать. Например, вы можете выключить какие-то параметры, чтобы экономить ресурсы компьютера, повысить скорость сканирования и иметь возможность пробить ещё большее количество страниц. Кстати, нажав на любой из параметров, вы переместитесь к нему в таблице и сможете увидеть его подробное описание в информационной панели.

    Параметры и информационная панель в Netpeak Spider

  2. Настройки.
    • Основные → здесь можно:
      • Настроить скорость сканирования с помощью количества потоков;
      • Включить рендеринг JavaScript, чтобы программа при сканировании выполняла JS-скрипты и находила контент, который с их помощью генерируется;
      • Определить, какие типы файлов мы будем проверять;
      • Включить мультидоменное сканирование. Эта Pro-функция позволяет одновременно сканировать множество сайтов и видеть результаты в едином отчёте.
    • Продвинутые → по умолчанию мы сканируем как можно больше страниц, чтобы найти больше данных и инсайтов. Специально для продвинутых пользователей мы сделали одноимённый раздел настроек, чтобы вы смогли это всё регулировать самостоятельно.
    • Виртуальный robots.txt → здесь вы можете тестировать свои гипотезы для файла robots.txt до того, как зальёте его на сайт.
    • Парсинг → настраивайте здесь свои кастомные парсеры, чтобы извлекать любые данные с сайта. Советую почитать статьи, которые мы добавили на этой вкладке, а если нужна будет помощь — пишите нам в поддержку.
    • User agent → если хотите проверить сайт, используя разные значения этого заголовка, можете использовать один из преднастроенных на этой вкладке или добавить свой собственный.
    • HTTP-заголовки → для выполнения ряда задач нужно использовать собственные значения HTTP-заголовков запроса к серверу, и на этой вкладке вы можете их задать.
    • Ограничения → на этой вкладке пользователи могут оптимизировать определение ошибок под свой конкретный проект. Но хочу акцентировать ваше внимание: по умолчанию мы выставили достаточно чёткие настройки и всегда следим за их актуальностью.
    • Правила → полезная настройка, которая даст вам возможность просканировать только какую-то определённую часть сайта, отфильтровав всё остальное по сегменту в URL: например, можно проверить только страницы блога или карточки товаров.
    • Google Analytics, Search Console и Яндекс.Метрика → Netpeak Spider интегрирован с этими сервисами, что открывает новые возможности для оптимизаторов за счёт обогащения технических показателей сайта данными по аналитике трафика, поведения пользователей и поисковых запросов. Объединяйте эти данные, чтобы найти ещё больше инсайтов и точек роста для вашего проекта.
    • Экспорт → здесь можно задать удобные для вас настройки выгрузки отчётов из программы, включая возможность экспорта сразу в Google Drive.
    • Аутентификация → если сайт на разработке, и доступ к нему закрыт с помощью базовой аутентификации, введите необходимый логин и пароль, чтобы программа использовала его при обращении к серверу.
    • Прокси → полезны в тех случаях, когда нужно просканировать страницы с разных локаций, или когда сайт блокирует обращения с одного IP-адреса.
    • White label → Pro-функция, которая позволяет добавить ваше собственное брендирование (логотип и контактные данные) в SEO-аудит в формате PDF, который программа автоматически генерирует буквально в несколько кликов. Тем самым вы можете повысить персонализированность такого отчёта для ваших клиентов или коллег.

      Настройки white-label отчётов в Netpeak Spider

5. Экспорт отчётов

Чтобы выгрузить PDF-отчёт с аудитом, после сканирования сайта откройте меню «Экспорт» и выберите опцию «Аудит качества оптимизации (PDF)» . Посмотрите, какую красоту может выгрузить программа!

Посмотреть отчёт

  1. Отчёт формируется на основе большого массива данных, потому для удобства мы добавили содержание.
  2. Визуализация позволяет быстро увидеть состояние проекта и понять, куда можно прикладывать усилия для эффективной оптимизации.
  3. Ну а в конце отчёта вы напоминаете получателю ваши контактные данные, чтобы он не забыл обсудить его с вами.

Кроме PDF-отчёта программа позволяет выгружать любую таблицу, а также за считанные клики выгрузить какие-то нестандартные отчёты или вообще все отчёты в одну папку.

Меню экспорта отчётов после сканирования сайта в Netpeak Spider

6. Встроенные инструменты

Netpeak Spider — программа с множеством функций и вариантов применения. Мы реализовали специальные встроенные инструменты, чтобы решать ряд задач, как говорится, не отходя от кассы:

Встроенные инструмены в Netpeak Spider: Анализ исходного кода и HTTP-заголовков, расчёт внутреннего PageRank, валидатор и генератор Sitemap

  1. Анализ исходного кода и HTTP-заголовков
    • В левой части экрана отображаются все HTTP-заголовки запроса и ответа сервера, а также GET-параметры, если они есть в URL.
    • В правой — весь исходный код и извлечённый текст.
    • Для удобства используйте поиск, чтобы быстро найти что-то среди всех этих данных.
  2. Расчёт внутреннего PageRank → инструмент, который анализирует ссылки между страницами, помогая улучшать внутреннюю перелинковку на сайте.
  3. Валидатор XML Sitemap → мощная функция, позволяющая проверить вашу карту сайта на 30+ возможных ошибок, которые мы определяем на основе рекомендаций Google, Bing и документации протокола Sitemap: небольшой Netpeak Spider внутри Netpeak Spider, но только нацеленный на XML-карты сайта. Давайте проверим карту сайта toyota.com. Если у вас ещё нет карты сайта, то мы вам всячески сочувствуем и рекомендуем создать её с помощью нашего последнего инструмента.
  4. Генератор Sitemap → он позволяет генерировать не только XML-карты, но ещё и HTML для ещё более крутой индексации.

7. Заключение

Давайте подрезюмируем, что же выделяет Netpeak Spider на фоне множества других программ:

  • Фокус на устранении SEO-ошибок → для них отведён отдельный отчёт с группировкой по критичности и возможностью быстрой выгрузки всех ошибок в несколько кликов для дальнейшей работы с разработчиками и контент-менеджерами.
  • SEO-аудит в PDF + white label → брендирование отчёта и добавление контактных данных для быстрого проведения экспресс-аудитов и заключения новых контрактов по предоставлению услуги SEO.
  • Интеграция с Google Analytics, Search Console и Яндекс.Метрикой → находите новые инсайты с помощью обогащения результатов сканирования аналитическими данными и поисковыми запросами: такое количество полезных данных нужно ещё поискать на рынке!
  • Сегментация данных → уникальная функция, позволяющая абсолютно по-новому взглянуть на сайт. Однажды я просканировал сайт и ещё неделю его крутил-вертел, находя всё новые и новые точки роста.
  • Полная кастомизируемость → используйте параметры и настройки на максимум: всё в ваших руках!
  • Продвинутая таблица результатов → самая мощная на рынке с внушительными функциями: сортировка, группировка, фильтрация, быстрый поиск и подстраивание таблицы под свои нужды.
  • Встроенные инструменты → анализ исходного кода и HTTP-заголовков, расчёт внутреннего PageRank, валидатор и генератор Sitemap: больше не нужно покидать программу, чтобы решать самые разносторонние задачи.
  • И, как вишенка на торте, оптимальное потребление ресурсов компьютера → весь этот функционал использует минимум памяти, а внутренняя база данных позволяет работать с огромным количеством URL.

Хочу узнать больше причин выбрать Netpeak Spider

8. Тест

P.S. У нас также есть второй продукт — Netpeak Checker, по которому мы подготовили аналогичную статью. Приглашаю вас посмотреть видео и почитать о нём, ну а в конце, конечно, пройти тест!

Перенесите меня скорей к Netpeak Checker