Анализатор сайтов

Бесплатные инструменты мобильного SEO

Мобильное SEO невероятно важно. Именно поэтому очень важно иметь возможность проверить, как выглядит страница результатов поисковой системы (SERP) практически в любом городе мира

Также полезно иметь возможность проверить, как выглядит ваша веб-страница на самых популярных мобильных телефонах. Страницы, которые выглядят отлично, обычно лучше конвертируются.

MobileMoxie

MobileMoxie предоставляет полнофункциональные инструменты мобильного SEO. MobileMoxie SERP checker показывает, как выглядит рейтинг на огромном количестве экранов мобильных телефонов. Особенно полезным этот инструмент делает то, что он может локализоваться на любой город мира. Таким образом, вы можете проверить, каковы мобильные рейтинги для человека, находящегося в любом городе мира. Это отлично подходит для локального SEO или для работы с клиентами, когда вы не находитесь в регионе клиента. Также есть MobileMoxie Web Page Checker, который может показать вам, как выглядит ваша веб-страница практически на любом мобильном телефоне. Это поможет вам оптимизировать веб-страницу таким образом, чтобы она лучше всего конвертировалась на широком спектре мобильных телефонов. Инструмент является полностью функциональным и может быть использован бесплатно три раза. Ниже представлен тестер SERP от MobileMoxie, показывающий боковое сравнение того, как выглядят ваши SERP практически на любом мобильном телефоне. Вы также можете просмотреть местные SERP для любого города мира практически на любом языке по вашему выбору.

Как установить Netpeak Spider.

Для начала, скачайте лаунчер. Затем, лаунчер установит вам программу. Понятно, что при этом понадобится регистрация, но тут ничего сложного нет. Мне даже не потребовалось подтверждать свою почту. Далее начнется процесс установки. То есть, должен начаться.

У меня, при установке, вышел небольшой нюанс, у меня выскочило вот такое окно.

Окно с ошибкой отсутствия Net фрейворк

На самом деле, здесь ничего страшного. Просто у меня не был установлен Net Framework. Проблема решилась установкой этого фреймворка, что абсолютно не сложно. Кстати, отсюда же я сделал и другой вывод: системные требования Netpeak Spider: Windows 7 Service Pak 1, оперативной памяти, не менее 512 мбайт.

К слову, установил я нетпик спайдер на свой старинный, одноядерный нетбук, с одним гигом оперативы на борту. И все прекрасно работает, во всяком случае, при сканировании относительно небольших сайтов.

Бесплатные инструменты аудита безопасности веб-сайта

Многие SEO-специалисты не рассматривают безопасность как часть SEO-аудита. Безопасность становится проблемой только после того, как сайт был взломан и его рейтинг упал.По моему мнению, безопасность сайта должна быть одним из компонентов SEO-аудита. Безопасность сайта — это главная составляющая того, насколько хорошо он ранжируется и стимулирует продажи. Именно поэтому я включаю тщательный аудит безопасности в каждый проводимый мной аудит сайта.

Бесплатный сканер уязвимостей WordPress: WPScans

Этот бесплатный сканер уязвимостей предлагает быстрое, но всестороннее сканирование потенциальных проблем. Создайте отчет, а затем изучите, есть ли на вашем сайте проблемы, требующие устранения. WPScans.com — полезный инструмент для начала аудита безопасности.

Бесплатный инструмент проверки HTTPS: SSL Labs Security Checker

Инструмент SSL Labs Security обнаружит неправильную конфигурацию и дыры в безопасности в вашей реализации сертификата HTTPS. Добавление сертификата безопасности сервера рекламируется как простое, но это не всегда так. Этот полезный инструмент поможет вам диагностировать скрытые проблемы.

Как пользоваться Netpeak Spider и зачем он вообще нужен?

Для тех кто не вдруг не в курсе, с помощью Нетпик Спайдера можно по сути провести экспресс-аудит сайта и выявить основные косяки и недочёты. В новой версии программы определяется более 60 различных видов ошибок, а сам краулер проверяет и выдаёт более 50 параметров. Согласитесь, довольно не плохо, особенно учитывая, что такой аудит проводится буквально за считанные минуты.  Т.е. за пару минут вы получите полный отчёт о ссылках внутри сайта, мета-тегах и их длине, дублях, ошибках, редиректах и так далее и так далее.

Для чего нужен Netpeak Spider разобрались, теперь перейдём к тому, как им пользоваться. А использовать программу до безобразия просто, нужно всего лишь вбить домен в соответствующее поле и всё остальное за вас сделает прога.

Порадовала возможность быстро отфлитровывать из результатов проверки нужные для анализа ошибки, буквально по одному нажатию.

Кроме того, на скриншоте видно, что также есть и отдельный блок – Необнаруженные ошибки. Туда попадают наиболее распространённые ошибки, по которым идёт проверка Нетпиком, но которые не были найдены на проверяемом сайте.

Стоит отметить, что любой отчёт с ошибками можно выгрузить в CSV или XLSX формат

Дополнительные инструменты

Кроме всего вышеперечисленного с помощью Нетпика можно также провести:

1. Анализ исходного кода.
2. Расчёт внутреннего PR страниц – как по мне, так очень годная функция (на скриншоте ниже). Крайне необходима для правильной перелинковки. Раньше, кстати, я пользовался отдельной программой Page Weight, теперь потребности в ней нет.
3. Сгенерировать Sitemap. Т.к. я использую для всех своих проектов WordPress потребности в данном инструменте нет, но возможно кому-то будет полезна и эта функция.

Т.о. кроме стандартной задачи программы-краулера, Netpeak также имеет ещё и несколько других полезных инструментов.

 Загрузка …

Как я использую Нетпик Спайдер?

Лично я в повседневных целях использую этот SEO-инструмент так:

Для обнаружения незаполненных мета-тегов, таких как Title, Description и Alt’ов у картинок (про важность мета-тегов в статьях и картинках я писал здесь и здесь).
Для выявления дубликатов мета-тегов.
Для выявления битых ссылок.
Кроме того, использую инструмент – расчёт PageRank при перелинковке на сайте.

Со всеми четырьмя задачами Netpeak Spider справляется на 5 и что немало важно делает это очень быстро

Netpeak Spider – аналоги программы

Лично я знаю и использовал в той или иной степени два аналога:

• Comparser;
• Xenu.

О каждом из них вкратце расскажу ниже.

Comparser

В самом начале поста я упомянул аналог Netpeak Spider под названием Comparser. По сути это такой же краулер, робот которого обходит сайт и ищет ошибки на сайте, но у Спайдера есть одно положительное отличие – это фильтры.

С помощью фильтров легко убирать не нужные результаты и оставлять только те, ради которых и проводился анализ сайта. Это реально облегчает жизнь.

Однако, от Компарсера я всё равно не откажусь до конца, т.к. у него есть супер-мега-квадро-гипер-синхрофазотронически-крутая функция – вход в вебмастера Яндекса и Google и удаление мусора из выдачи в один клик из интерфейса программы! Вот этой фишке сильно не хватает Спайдеру.

Xenu

Старая как фекалии неандертальца программа, которая выполняет всё ту же функцию – обход сайта и выявление косяков.

В этом плане разработчики программы Netpeak Spider ничего нового не придумали, их заслуга только в превращении старой идеи в удобный инструмент благодаря интуитивно понятному и визуально приятному интерфейсу.

Плюсом Ксену, конечно же, является её бесплатность, хотя при этом программка сильно уступает в удобстве, но я сам бываю жопошником, так что пойму и прощу всех тех, кто решит не платить и будет пользоваться Xenu ?

Обзор Netpeak Spider

Судя по тому, на что способен инструмент Netpeak Spider, то анализ дублированного контента, неработающих ссылок и переадресации — это лишь верхушка айсберга. С учетом инструкций по индексации, вы можете установить правила для сканирования веб-сайта, списка URL-адресов или файла XML Sitemap, получить полную структуру сайта, настроить заголовки HTTP-запросов, очистить все данные с сайта с использованием расширенных параметров, расширять технические параметры SEO, используя данные из лучшего программного обеспечения SEO, такого как Google Analytics и Search Console.

Как видите, программа невероятно многозадачная, поэтому давайте сосредоточимся на основных функциях в этом обзоре Netpeak Spider.

Быстрое Сканирование и Подробный Анализ Сайта

Анализ данных займет пару минут. Поиск обнаруживает более 100 видов ошибок внутренней оптимизации – делает всё, что может сделать продвижение менее эффективным.

В конце вычисляется относительный PageRank страниц, список найденных ошибок и интерактивные диаграммы результатов отображаются на панели инструментов. Ошибки расположены в порядке убывания критичности

Наиболее значимые отмечены красным цветом, средней важности — желтым

В таблице для каждой страницы отображается подробная информация о коде сервера и времени отклика, количестве обнаруженных ошибок, наличии метатегов и т.д. Нажав на URL-адрес, вы можете увидеть дополнительную информацию (сводные данные) на странице.

Таблица Результатов с Расширенными Функциями

Таблицы являются информационным центром программы, где после сканирования собираются все данные. Netpeak Spider предлагает отаблицу, которая позволяет удобно работать с огромными объемами данных благодаря расширенным функциям: сортировке, группировке, фильтрации, быстрому поиску и возможности настройки таблицы в соответствии с вашими предпочтениями.

Расширенный поиск по всей таблице позволит вам быстро найти нужное значение в поле поиска, независимо от того, в каком столбце оно находится. Сегментация — отличная функция, позволяющая вырезать определенный сегмент данных (например, только блог сайта) для работы со всеми результатами после применения необходимого фильтра.

Интегрированные Инструменты для Страниц

Netpeak Spider использует специальные встроенные инструменты для автоматического решения ряда дополнительных задач. Например, подсчет Internal PageRank анализирует ссылки между страницами сайта и автоматически отображает взаимоблокировки, перенаправления и другие проблемы. В результате он вычисляет информацию об относительном ссылочном весе страницы, помогая улучшить внутренние ссылки и улучшить структуру сайта.

Встроенный инструмент для анализа исходного кода и HTTP-заголовков позволяет видеть HTML-код и извлекать код/ текст страницы, не выходя из интерфейса программного обеспечения. Слева отображаются все HTTP-заголовки запроса и ответа сервера, а также параметры GET, если они есть в URL-адресе, с возможностью поиска среди этих данных.

Валидатор XML Sitemap анализирует существующую карту сайта XML по указанному URL-адресу на предмет более 30 возможных ошибок на основе рекомендаций Google, Bing, а также документации протокола Sitemap. Результаты показывают ошибки разного уровня критичности: скорость ответа от сервера, указание карты сайта в robots.txt и другие.

Извлечение Цен, Номеров Телефонов, Текста или Кода с Веб-сайта

Одна из основных функций, которую следует упомянуть в этом обзоре, — это парсинг. Он позволяет собирать любые данные со страниц сайта: цены, отзывы, электронные письма, SEO-тексты, наличие некоторых уникальных тегов, даты публикации статей и многое другое.

Инструмент использует четыре типа синтаксического анализа веб-страниц: XPath, CSS-селектор, RegEx и контент. Если у вас есть базовые знания о селекторах CSS и синтаксисе XPath, вы можете извлечь практически что угодно из любого места.

Установка программы

Скачать программу нужно на сайте автора: https://netpeaksoftware.com/ru/spider.

Установка простая и быстрая. Язык выбираем русский. После открытия программы нужно пройти регистрацию. Это тоже бесплатно. После регистрации вы получите на указанный почтовый ящик ключ авторизации. Вводим ключ и работаем.

• Вписываем URL исследуемого сайта. Жмем старт;
• После анализа манипулируем кнопками и смотрим анализ по нужному параметру;
• Фильтры результатов анализа достаточно разнообразны и понятны. Жмете на кнопки, списки перестраиваются;
• Что приятно, есть визуальная раскраска результатов. Удобно;
• Показ дублей страниц заказываем справа внизу. Дубли показываются по повторяющемуся тексту и показывают URL, где дубли присутствуют;
• Результаты анализа можно сохранить файлом Excel. В отличае от программы XENU повторно открыть файл в программе нельзя.

Ringostat

Ringostat — сервис аналитики звонков и оптимизации бизнес-процессов. Незаменим, если хотя бы 30% ваших клиентов звонят, а не делают заказ или покупают онлайн. Дело в том, что Google Analytics не учитывает офлайн-конверсии, которые и есть звонки.

Для этого необходим коллтрекинг — только он покажет, какой рекламный канал или ключевое слово привели звонки и сколько. По большому счету, это аналог Google Analytics, только для звонков.

С помощью Ringostat вы сможете:

• отслеживать источники звонков, вплоть до ключевого слова;
• видеть мультиканальные последовательности;
• анализировать звонки в разбивке на целевые, нецелевые, принятые, пропущенные и т.д.;
• видеть распределение звонков по дням недели и времени суток;
• прослушивать записи звонков и полноценно использовать функционал виртуальной АТС.

У сервиса есть бесплатный тестовый период 14 дней.

Что умеет Netpeak Spider

Netpeak Spider — это десктопная программа для сканирования сайтов и анализа основных параметров внутренней оптимизации на предмет ошибок. Инструмент отлично подходит для проведения комплексного seo-аудита, контроля внедрения изменений сайта с точки зрения seo, а также для анализа сайтов-конкурентов. С его помощью Вы легко найдете битые ссылки, некорректно заполненные метаданные, дубли страниц и массу других интересностей, влияющих на видимость Вашего сайта в выдаче поисковых систем.

дашборд

Итак, приложение встречает нас довольно привлекательным интерфейсом: в левой части страницы открывается дашборд, помогающий обратить внимание на ключевые данные, а в правой части интерфейса — отчеты с обнаруженными ошибками. На сканирование сайта Q-SEO ушло меньше минуты:

Какие данные мы видим на дашборде?

— внутренние URL: в настройках по умолчанию внешние URL не сканируются, поэтому количество внутренних URL должно совпадать с количеством просканированных URL.- URL с важными ошибками: отфильтрованные результаты сканирования с теми адресами страниц, где краулер обнаружил ошибки.- индексируемые URL: адреса страниц, доступные для индексирования той поисковой системой, робота которой Вы используете для сканирования. То есть, если Вы сейчас используете бота Google для обхода сайта и результаты отчета «Индексируемые URL» Вас полностью устраивают, то это не значит, что эти же адреса страниц будут доступны, например, для Baidu или Bing. Изменить поискового бота можно в настройках User Agent.

Непосредственно во время сканирования сайта Вы можете отобразить анализируемые параметры, нажав на соответствующую ссылку:

По окончанию сканирования с помощью диаграмм будут визуализированы данные по соотношению индексируемых и неиндексируемых URL, по полученным кодам ответа сервера, по времени ответа сервера, типу контента и т. д. Все элементы диаграмм кликабельны и позволят Вам быстро перейти к необходимым данным.

сегменты

Принцип работы с сегментами схож на настройку сегментов в Google Analytics, хорошо знакомым многим seo-специалистам: по заданным параметрам выделяется определенная часть данных для дальнейшего изучения.

Вы можете создавать сегменты исходя из своих задач: например, для интернет магазина будет полезны сегменты по конкретным категориям или сегмент, где будут представлены только страницы товаров.

Отчеты

Отчеты сгруппированы в правой части интерфейса, по умолчанию открыта вкладка «Ошибки», как наиболее важная для анализа

Данные отсортированы по степени важности — наиболее критичные ошибки расположены выше менее критичных, что удобно для восприятия. Клик по любому из пунктов отчета позволит увидеть отфильтрованные данные из URL, на которых и была обнаружена соответствующая ошибка

Вкладка «Сводка» позволит Вам быстро обратиться к данным, касающимся определенного типа или статуса страницы. Частично эти же данные отображаются на странице «Дашборд»

Все отчеты легко экпортируются в .xls или .csv файлы, а также копируются в буфер обмена с помощью кнопки «Расширенное копирование».

Вы также можете сохранить полностью весь проект, если планируете продолжить анализ данных без повторного сканирования.

Netpeak Spider: Сильные и Слабые Стороны

Удобная интеграция с Google Диском и Таблицами. Благодаря интеграции вы можете быстро экспортировать отчеты прямо в Google Таблицы и делиться ими с коллегами в несколько кликов. Точно так же и с отчетами в формате PDF: они сразу же экспортируются на Google Диск, а это означает, что единственное, что вам нужно сделать, это получить ссылку, которой можно поделиться, и отправить ее клиенту или менеджеру.

Возможность создавать White Label SEO отчеты. Эта функция предоставляет возможность удалить элементы бренда Netpeak Software из отчета в формате PDF с техническим SEO-аудитом, а также добавить свой логотип и другие необходимые данные всего за несколько кликов. Отчеты White Label сделает ваш бренд более узнаваемым среди клиентской базы.

Легкая кастомизация. Netpeak Spider разрешает настраивать правила сканирования. Таким образом, вы можете сфокусироваться на определенных разделах или категориях, а не выполнять поиск по всему сайту. Это экономит время и позволяет сосредоточиться на самых важных областях.

Мультидоменное сканирование. Эта функция позволяет вам установить список URL-адресов, после чего программа будет сканировать эти веб-сайты одновременно и отображать данные в одной таблице.

Эта функция позволяет вам сканировать разные сайты на разных доменах одновременно. Обнаруживайте неработающие ссылки во время сканирования списка URL-адресов и очищайте контактные данные сайта.

Полезный экспорт поисковых запросов из Google Search Console. Вы сможете увидеть данные о количестве кликов, показов и средней позиции для всех URL-адресов на вашем веб-сайте. Вы можете указать диапазон дат, страну, тип устройства и даже фильтровать страницы по поисковым запросам.

Интеграция с Яндекс.Метрикой. Яндекс.Метрика позволяет получать данные о посещаемости, конверсиях и параметрах электронной торговли для страниц своего сайта.

Инструмент позволяет выбрать диапазон дат, настроить сегмент, в том числе пользовательский, с учетом типа устройства. У вас есть возможность быстро работать с несколькими аккаунтами.

Нет версии для MacOS или Linux. Да, у большинства компаний есть и компьютеры iMac и Windows, но было бы неплохо, если бы Netpeak Spider работал на всех платформах, без необходимости переключаться между компьютерами.

Нет пожизненной лицензии. Существует только вариант оплаты на основе подписки и нет возможности купить пожизненную лицензию.

Как начать пользоваться продуктами

Помимо упомянутых выше Netpeak Spider и Netpeak Checker, мы разработали Netpeak Launcher — новое десктопное приложение, которое позволяет унифицировать доступ ко всем программам Netpeak Software и обеспечивает их обновление. Вы сможете скачать Netpeak Launcher из личного кабинета (User Control Panel) сразу после создания своего аккаунта.

Чтобы почувствовать все преимущества обновлённых продуктов, воспользуйтесь бесплатным триалом. Он даёт полный доступ ко всем возможностям продуктов Netpeak Software на 14 дней, если вы раньше не пользовались программами Netpeak Spider и Netpeak Checker, и на 60 дней, если у вас уже есть такой опыт

Обратите внимание, что 60-дневный триал начинается с даты релиза, то есть с 21 июня 2016 года, поэтому не теряйте время: проверьте свою электронную почту — мы отправили письмо со всей необходимой информацией

После истечения этого тестового периода, то есть с 19 августа 2016 года, мы планируем остановить поддержку предыдущих версий программ, так как теперь мы уделяем всё наше внимание новым продуктам. Однако, если вы уже успели зарегистроваться в старых версиях программ (1.x), то сможете ими пользоваться без каких-либо ограничений

А когда вы будете готовы принять решение по дальнейшему использованию программ, просмотрите предлагаемые планы подписки. Их период варьируется от 1 до 12 месяцев, позволяя получить скидку до 30% и дополнительно 10% при покупке обоих продуктов сразу.

Netpeak Software

Netpeak Software включает три основных инструмента для решения seo-задач:

• Netpeak Spider для комплексного аудита сайта,
• Netpeak Checker для анализа и сравнения сайтов,
• десктопное приложение Netpeak Launcher для взаимодействия с этими двумя программами.

В  доступны все функции продукта, кроме:

• экспорта отчётов,
• копирования данных,
• фильтрации результатов,
• сохранения проектов,
• Pro-фич (детальный список здесь).

Чтобы использовать эти возможности, понадобится к инструменту.

Netpeak Spider

Позволяет проводить быстрый seo-аудит сайта, находить ошибки технической и внутренней оптимизации, битые ссылки, дубли страниц, осуществлять парсинг сайтов, анализ нескольких десятков seo-параметров, а также исходного кода и HTTP-заголовков. Помогает рассчитать внутренний PageRank и провести более детальный анализ данных, благодаря возможности их сегментации, создать при помощи встроенного генератора карту сайта (форматы html, txt, xml) и проверить, есть ли в ней ошибки.

Особенности:

• интеграция с Google Analytics, Search Console и Яндекс.Метрики,
• парсер сайтов позволяет использовать 4 вида поиска (содержит Regexp, XPath, CSS) и до 100 условий,
• результаты аудита можно генерировать в PDF,
• возможность мультидоменного сканирования,
• есть центр поддержки,
• доступна бесплатная 14-дневная пробная версия,
• есть скидки от 5 до 40% при покупке лицензии на длительный срок (1–3 года) или нескольких лицензий,
• есть партнерская программа и возможность бесплатного использования при условии публикации обзора на продукты Netpeak Software.

Netpeak Checker

Подходит для массового анализа и сравнения сайтов. Встроенный парсер собирает данные из поисковой выдачи Google, Яндекс, Bing и Yahoo. Программа дает возможность проверять проиндексированность страниц, оценивать видимость сайтов и сравнивать их по большому количеству показателей различных seo-сервисов, проводить анализ ссылочного профиля с использованием ресурсов Serpstat, SimilarWeb, Moz, Ahrefs, Majestic, Alexa, социальных сетей и др. Функционал Netpeak Checker позволяет определять возраст сайтов, доступность доменов для покупки, осуществлять постраничный технический аудит сайта, а также проверять его скорость и адаптацию для мобильных устройств.

Особенности:

• в парсинге есть настройки по геолокации, стране, языку, типу сниппета и др.,
• поддерживает списки прокси и сервисов по решению капчи,
• доступен экспорт данных в форматы csv или xlsx, есть возможность настройки выгрузки отчетов и отображения данных,
• есть центр поддержки,
• доступна бесплатная 14-дневная пробная версия,
• при оформлении подписки на год действует скидка 20%,
• есть партнерская программа и возможность бесплатного использования при условии публикации обзора на продукты Netpeak Software.

10 крутых онлайн-курсов с сертификатами по digital-маркетингу
По теме
10 крутых онлайн-курсов с сертификатами по digital-маркетингу

10 полезных программ для SEO-специалистов
По теме
10 полезных программ для SEO-специалистов

Отсрочить смерть.

Screaming Frog: Сильные и Слабые Стороны

Быстрое определение страниц с проблемными показателями. Естественно, чем дольше будет грузить ваш сайт, тем выше вероятность того что его покинут, закрыв страницу.

Именно поэтому очень важно находить страницы с проблемными показателями скорости загрузки и заранее устранять эти проблемы. Это положительно скажется на ранжировании сайта в целом поможет вам обойти конкурентов в выдаче. Быстрое определение неработающих ссылок

Программа помогает мгновенно просматривать веб-сайт и находить неработающие ссылки (404) и ошибки сервера. Она также позволяет массово экспортировать ошибки и исходные URL-адреса для исправления или отправки разработчику

Быстрое определение неработающих ссылок. Программа помогает мгновенно просматривать веб-сайт и находить неработающие ссылки (404) и ошибки сервера. Она также позволяет массово экспортировать ошибки и исходные URL-адреса для исправления или отправки разработчику.

Возможность легко анализировать заголовки страниц и метаданные. У вас есть возможность проанализировать заголовки страниц и метаописания во время сканирования и определить те, которые слишком длинные, короткие, отсутствуют или дублируются на вашем сайте.

Мощная визуализация данных. Этот инструмент позволяет визуализировать архитектуру сайта. Оценивайте внутренние ссылки и структуру URL-адресов с помощью интерактивного сканирования и диаграмм в виде древовидного графа.

Фильтрация тяжелых изображений. Тяжелые изображения с высоким разрешением замедляют просмотр веб-страницы и ухудшают взаимодействие пользователя с программой. В Screaming Frog вы можете идентифицировать серьезных виновников, щелкнув вкладку «Изображения» и отфильтровав «Более 100 КБ».

Нет возможности платить помесячно. Если вы хотите протестировать программу, то у неё есть весьма неплохая бесплатная версия, но, если вы, хотите воспользоваться платными функциями программы, то есть проблема.

Вы не можете платить за несколько месяцев, когда будете использовать программу, вам нужно платить сразу за год и не важно сколько времени вы действительно будете пользоваться программой. Проблемное сканирование больших сайтов

Это занимает много памяти и много времени (иногда дней). Им нужно задуматься о создании SaaS для этих случаев

Проблемное сканирование больших сайтов. Это занимает много памяти и много времени (иногда дней). Им нужно задуматься о создании SaaS для этих случаев.

Непонятный интерфейс. Основным недостатком программы является плохой интерфейс, в котором новичкам будет сложно разобраться.

Отсутствие русской версии. Вам будет удобно использовать программу только если вы свободно владеете английским языком, так как у Screaming Frog отсутствует русская локализация.

Serpstat

Serpstat — это международная многофункциональная SEO-платформа. Самое ценное в сервисе — это то, что большинство инструментов SEO-специалистов в одном месте. Среди инструментов Serpstat самые популярные:

• анализ ключевых слов сайтов конкурентов и собственного сайта;
• сбор семантического ядра;
• анализ обратных ссылок;
• мониторинг позиций;
• аудит сайта;
• кластеризация и текстовая аналитика;
• анализ объявлений конкурентов в Яндекс.Директ и Google AdWords;
• страницы-лидеры сайта (по аналогии с Buzzsumo);
• дерево сайта (показывает структуру сайта конкурента и ключевые фразы на каждую посадочную страницу);
• упущенные фразы (показывает, каких ключевых фраз нет у вас на сайте, но их используют конкуренты).

Еще одно преимущество платформы: работает как для западных стран и Европы, так и для СНГ.

Недавно базы Европы пополнила еще одна — Google Франция. В следующих обновлениях выйдут базы Google Италия и Испания, а также Яндекс Екатеринбург.

Есть бесплатная версия с неограниченным периодом и платные подписки, цена от $19 в месяц.

Скорость сканирования

2.1. Количество потоков 

Каждый поток создаёт отдельное соединение с сайтом, поэтому будьте осторожны: чувствительные к нагрузке сайты могут испытывать проблемы с отображением информации. Вы можете регулировать количество потоков прямо во время сканирования, подбирая оптимальное значение для анализируемого сайта. По умолчанию в Netpeak Spider установлено сканирование в 10 потоков.

2.2. Задержка между запросами 

Это промежуток времени, между каждым запросом к серверу. Для чувствительных к высокой нагрузке или защищённых сайтов рекомендуется настраивать этот параметр и устанавливать задержку между запросами, чтобы не нагружать сервер или обойти ограничения сайта. 

Задержка работает для каждого потока отдельно, поэтому для имитации поведения пользователя рекомендуем использовать один поток и задержку между запросами в 1500-3000 мс. 

2.3. Максимальное время ожидания 

Это время ожидания ответа от сервера в миллисекундах до того, как краулер посчитает такую страницу битой ссылкой с кодом ответа «Timeout» и перейдёт к сканированию следующего URL. Также эта настройка влияет на определение «Ошибки подключения».

• Минимально возможное значение — 50 мс.
• Максимально возможное значение — 90 000 мс. 

2.4. Включение/отключение рендеринга JavaScript

Отметьте, чтобы включить функцию, которая позволяет сканировать URL с рендерингом (выполнением) JavaScript. Это может быть полезно, когда часть контента генерируется или весь сайт разработан с использованием JS-фреймворков.

В Netpeak Spider рендеринг JavaScript реализован с помощью встроенного браузера Chromium: он выполняется только для доступных (с кодом ответа сервера 200 OK) HTML-страниц, при этом блокируются скрипты систем аналитики, не загружаются изображения и iframe.

Основной настройкой является «AJAX timeout» — она устанавливает время ожидания выполнения JavaScript после загрузки страницы и файлов ресурсов (JS/CSS)

Обратите внимание: чем больше AJAX timeout, тем дольше будет происходить сканирование. В большинстве случаев значения по умолчанию (2 секунды) будет достаточно для выполнения JavaScript, однако вы можете настраивать его самостоятельно, если на анализируемом сайте есть AJAX-запросы, которые выполняются дольше

Также не рекомендуется занижать это значение, так как код может не успеть полностью обработаться. 

SEO программы для анализа

1. Netpeak Spider — бесплатная программа для постраничного анализа сайта. Выдает очень много полезной информации по каждой странице сайта: коды ответов, наличие атрибута rel=»canonical», дубли метатегов, количество H1 заголовков, количество внутренних страниц и другая информация. Вот пример работы программы:
2. Site-Auditor — бесплатная программа для экспресс анализа сайта. Надо отметить, что данным софтом я давно перестал пользоваться ввиду того, что для быстрого анализа можно использовать онлайн-сервисы — мне так гораздо удобнее, а для полного анализа программа не дает достаточно данных. Однако, многие оптимизаторы предпочитают использовать десктопные программы. Что же, смотрите сами, что вам больше по душе.
3. Xenu’s Link Sleuth — бесплатная программа для поиска битых и исходящих ссылок. Данный софт настолько полезен и уникален, что аналогов просто нет, насколько мне известно. Xenu’s Link Sleuth на английском языке, но вы можете скачать версию с русификатором, которую использую я. Под спойлером ниже — скриншот программы во время работы 
4. Screaming Frog SEO Spider — еще одна программа (платная ) для постраничного анализа сайта. Отличий от Netpeak Spider достаточно много, функционал программы огромный. Например, из того, что использую лично я и чего нет в Netpeak: количество H2 заголовков и их длина, количество слов на странице, использование web-технологий (Flash, JS, HTML) и много других функций. Сразу скажу, что программа окажется бесполезной для абсолютного новичка в SEO, однако для специалиста, который занимается анализами сайтов она — инструмент первой необходимости.
5. Linkoscop — платная программа для анализа внутренней перелинковки. Я использую программу для проверки корректности распределения внутреннего веса, при проведении аудитов или внутренней оптимизации сайтов. Всего в Линкоскопе более 110 инструментов, подробнее про них вы можете почитать на официальном сайте. 
6. Website Auditor от SEO PowerSuite — замечательная программа (платная) для SEO анализа сайтов. Заточена программа под Google, поэтому результаты выдает соответствующие. Однако, программа прекрасно подойдет даже для неопытного оптимизатора, так как в ней указываются явные ошибки и подробные рекомендации по их исправлению. Подробнее про Website Auditor можно прочитать в данной статье. 
7. Majento «PositionMeter» — бесплатная программа для мониторинга позиций сайта. Позволяет проверять позиции, их частотность, релевантные страницы и другую информацию. Можно использовать сервисы антикапчи и XML-лимиты Яндекса.Программа, как для бесплатного софта, очень неплохая, но все же, часто дает сбои, так что рекомендую важные ключи дублировать в онлайн-сервис или платный софт, как SERP Parser, например.

Установка Netpeak Spider

Что сразу бросилось в глаза и выглядит несколько дико для меня, так это то, что эту штуку необходимо установить на ПК и использовать ее онлайн не получиться, хотя есть возможность использования программы на разных устройствах (но не одновременно). Это, я вам скажу, крайне неудобно для большинства вебмастеров, так как иногда необходимо оперативно что-то посмотреть или дать ответ клиенту, а к компьютеру доступа нет, но есть мобильный телефон и можно было бы что-то сделать, но увы не с «Пауком».

Есть у разработчиков данного сервиса один конкурент, которым я также пользуюсь – это Serpstat, который дает возможность использовать все свои инструменты онлайн с любого устройства, но стоит ощутимо дороже и имеет ограничения на количество запросов. Для справки Netpeak Spider использует небольшой кусок их сервиса и у себя в том числе (правда в другом продукте Netpeak Checker, которому мы выделим отдельный обзор и обязательно все про него расскажем). Я, конечно, надеюсь на то, что будет сделать мобильное приложение или все-таки вся система переедет на вэб, но пока имеем то, что имеем. В любом случае, если функционал уникален, то это не будет проблемой.

Рассказывать долго про установку exe файлов я не буду, в ней разберется абсолютно любой, и сразу перейду к делу, а именно ее функционал.