Программа для изучения индексации сайта

Привет, друзья! Меня зовут Александр Алаев или просто АлаичЪ. Я автор блога alaev.info и директор веб-студии «АлаичЪ и Ко». Занимаюсь созданием и продвижением сайтов с 2005 г.

Я хочу представить вам мою новую разработку – программу, которая ежедневно помогает мне при работе с клиентскими и моими собственными сайтами.

ComparseR – специализированная программа, предназначенная для глубокого изучения индексации сайта, не имеющая аналогов на данный момент!

Название программы произошло из сложения двух слов: Comparison (англ.) – сравнение, сопоставление и Parser (англ.) – парсер. Это основные функции программы – парсить сайт и проиндексированные страницы этого сайта в поисковых системах (Яндекс и Google), а потом сравнивать и анализировать полученные данные.

Продвинутый краулер с множеством настроек целиком просканирует ваш сайт, соберет проиндексированные страницы из поисковой выдачи и позволит сравнить полученные данные. В результате вы узнаете, полностью ли индексируется ваш сайт, правильно ли он индексируется, и нет ли в выдаче того, о чем вы даже не подозреваете…

Особенности ComparseR

  • Мощный краулер – программа полностью просканирует ваш сайт и соберет самые важные атрибуты для каждой страницы.
  • Парсер Яндекс – программа соберет адреса страниц сайта, проиндексированные Яндексом, а так же другие важные параметры (дата сохраненной копии, дата первой индексации страницы).
  • Парсер Google – программа соберет проиндексированные страницы сайта в поиске Google.

Преимущества ComparseR

  1. В результате сканирования, программа обозначит найденные технические ошибки на сайте (внутренние редиректы, 404 ошибки, дубликаты title, запрещенные к индексации страницы и многое другое).
  2. Множество настроек краулера позволит программе представиться для сайта поисковым роботом и собрать данные, доступные для поисковиков (в программе присутствует пакет предустановленных настроек User-Agent).
  3. Использование регулярных выражений для краулера и парсеров выдачи позволит специалистам максимально гибко настроить сканирование и изучение полученных данных.
  4. Для парсинга Яндекса предусмотрено 3 источника данных: обычная выдача, XML-данные и Яндекс.Вебмастера, каждый из которых имеет свои особенности и преимущества. А при желании вы можете совместить данные из этих источников в одной таблице.
  5. Использование сразу нескольких сервисов разгадывания капчи при парсинге поисковых систем позволит вам не беспокоиться, что парсинг прервется или остановится без вашего участия. Запустите программу, и идите отдыхать!
  6. Уникальный инструмент пакетного удаления URL из индекса Яндекса к вашим услугам: быстро, без капчи, в один клик!

Видео обзор программы

В данном видео я провожу подробный разбор основных функций программы. Настройка программы, парсинг сайтов и парсинг выдачи Яндекса и Google:

  1. Как правильно настроить программу.
  2. Как запустить парсинг сайта, какие настройки использовать.
  3. Как интерпретировать результаты сканирования сайта.
  4. Обзор сводки с ошибками и предупреждениями.
  5. Парсинг выдачи Яндекса.
  6. Парсинг индекса сайта из панели Вебмастера Яндекса.
  7. Парсинг выдачи Google.
  8. Поиск кода и работа с регулярными выражениями RegExp.

Основная ценность или в чем отличие от аналогов?

Чем ComparseR отличается от аналогичных бесплатных программ, типа Xenu Sleuth, Netpeak Spider и др., ведь они тоже могу парсить сайт и показывать ошибки?

Смысл моей программы заключается не в парсинге сайта, поиске дублей Title и битых ссылок, хотя даже это она может делать лучше аналогов, позволяя парсить сайты объемом в несколько миллионов страниц. Основная ценность заключается в парсинге страниц сайта из выдачи поисковиков и сравнения с полученными данными при парсинге самого сайта.

Это позволит вам понять, какие страницы сайта не индексируются, или наоборот, найти такие страницы, которые находятся в индексе, а вы об этом даже не подозреваете.

 

Об ограничениях демо-версии программы читайте на специальной странице.