Дбайливий дайджест служби підтримки Netpeak Software #3

Один раз – випадковість, двічі – повторення випадковості, три рази – закономірність. Я підготував третій закономірний дайджест служби підтримки Netpeak Software. Сподіваюся, ви не нудьгували без нас? Періодичність виходу нашого дайджесту дещо збільшилася через зростання навантаження, але на його якості це точно не позначиться, обіцяю :)

Перейдемо до офіційної частини дайджесту.

• Апетит росте — ви звернулися до нас 1700 разів за травень та червень.
• За аналогічний період ви написали 5292 повідомлення.
• Ви оцінили діалоги з нами 153 рази, і у 100% випадків це були позитивні відгуки.
• Цікава цифра, яка хвилює більшість наших користувачів – у середньому ми дали першу відповідь на ваше звернення протягом 1 хвилини 13 секунд. Це наш рекорд!
• Найдорослішому користувачеві Netpeak Spider 72 роки: він самостійно просуває сайт музею. А ви кажете, що працювати в музеї нудно!
• Найчастіше до нас зверталися люди, на ім'я Андрій ;)

1. Проблема з парсингом пошукових систем на прикладі «Помилка сервісу Google»

До нас часто звертаються з питанням про те, чому Google не дає результату видачі в «Парсер ПС» в Netpeak Checker. Річ у тому, що Google хитрує і в цілому не любить автоматичне сканування. Тому в якийсь момент усі запити до нього блокуються, і ви починаєте одержувати помилку Service Error в інтерфейсі програми.

У таких ситуаціях ми рекомендуємо використовувати один із сервісів для автоматичного розгадування капчі. Ви також можете додатково використовувати список приватних проксі.

Внести ключі доступу до одного з сервісів автоматичного розгадування капчі можна через «Налаштування» → «Капча».

Ну а якщо ви з дитинства мріяли стати ніндзею (я особисто мріяв, хоч більше був схожим на Кунг-фу Панду), то можете підключити ще й проксі в «Налаштування» → «Список проксі», щоб приховати своє справжнє місцеперебування та додатково убезпечити себе від блокування із боку ПС. Не забудьте перед використанням перевірити їх на доступ до ПС, з якою ви хочете їх використати.

Користуючись цими рекомендаціями, ви можете обхитрити Google й отримати максимальну кількість результатів. Але навіть у такому разі ми рекомендуємо вам стежити за ставкою та балансом у сервісі з автоматичного розгадування капчі та валідністю проксі адрес.

2. Що робити, якщо не встановлюється Chromium?

В останній версії Netpeak Spider ми реалізували можливість рендерингу JavaScript за допомогою вбудованого браузера Chromium. Це дозволяє краулеру сканувати SPA-сайти, сайти, на яких завантаження елементів відбувається за допомогою JavaScript, і рендерити улюблений, красивий PDF-звіт. Але іноді трапляється так, що щось йде не за планом і Chromium не завантажується. Можливі кілька причин, і зараз я напишу, що робити в такій ситуації.

• Переконайтеся, що на жорсткому диску є 200 Мб вільної пам'яті для встановлення Chromium на ваш пристрій.
• Через те, що програма використовує з'єднання з інтернетом, пристрій може почати переживати, що ви намагаєтеся завантажити щось погане і заблокувати завантаження оновлень. Додайте наші програми в білі списки в антивірусах, брандмауерах, фаєрволах і т.д. Також рекомендуємо переконатися, що ви маєте права адміністратора і перезапустити програму від його імені.
• Якщо після цього з якихось причин Chromium не встановився, то вдаємось до екстрених заходів - переходимо в Netpeak Launcher і в пункті «Опції» до Netpeak Spider обираємо «Перевстановити».

3. Як подивитися, які сторінки містять биті посилання?

Переглянути звіт за битими посиланнями можна такими способами:

• Вибрати відповідну помилку на бічній панелі та натиснути на кнопку «Звіт про помилку».

  

• Якщо ви хочете переглянути список сторінок, які посилаються на певне бите посилання, натисніть на неї правою кнопкою миші та виберіть пункт "Вхідні посилання".



• Щоб переглянути список сторінок, які посилаються на будь-яку відфільтровану вами групу битих посилань, натисніть на будь-якому місці даної таблиці правою кнопкою миші та виберіть «Поточна таблиця» → «Вхідні посилання».

Будь-яку згадану таблицю можна зберегти, натиснувши на кнопку «Експорт...», а повний звіт за битими посиланнями можна отримати, використовуючи пункт головного меню «Експорт» → «Спеціальні звіти» → «Биті посилання».

Довгі прощання – зайві сльози. Хочеться вірити, що після прочитання дайджесту це будуть сльози радості.

До зустрічі в онлайн-чаті, і не забувайте про наш Help Center ;)