Majento SiteAnalyzer - бесплатная программа для аудита и анализа сайта

[Chaser]

Программа Majento SiteAnalyzer предназначена для анализа и аудита сайта (коды ответа сервера, наличие "битых" ссылок, ссылки на внешние ресурсы, проверка наличия title, мета-тегов, заголовков h1-h6, проверка наличия дублей страниц и т.п.). Это бесплатный аналог таких программ, как Screaming Frog SEO Spider и Netpeak Spider.

Анализ производится путем сканирования всех страниц сайта (переобход сайта по ссылкам), после чего, на основе полученных данных, можно проводить аудит интересующих параметров.



Основные возможности

• Сканирование всех страниц сайта, а также изображений, скриптов и документов
• Получение кодов ответа сервера для каждой страницы сайта (200, 301, 302, 404, 500, 503 и т.д.)
• Определение наличия и содержимого Title, Keywords, Description, H1-H2
• Поиск и отображение "дубликатов" страниц, мета-тегов и заголовков
• Определение наличия атрибута rel="canonical" для каждой страницы сайта
• Следование директивам файла "robots.txt" либо мета-тега "robots", учет "noindex" и "nofollow" при обходе страниц сайта
• Ссылочный анализ - определение внутренних и внешних ссылок для страницы (в пределах сайта)
• Определение количества перенаправлений со страницы (редиректов)
• Определение уровня вложенности страниц относительно главной
• Генерация карты сайта "sitemap.xml" (с возможностью разбиения на несколько файлов)
• Фильтрация (выборка) данных по любому параметру
• Экспорт отчетов в CSV и Excel (полноценный отчет в Excel-формате)

Отличия от аналогов

• Низкие требования к ресурсам компьютера, малый расход оперативной памяти
• Для хранения данных используется локальная база данных, отличающаяся производительностью и надежностью
• Сканирование сайтов практически любых объемов за счет низких требований к ресурсам компьютера
• Портативный формат (работает без установки на ПК или прямо со сменного носителя)
• Бесплатное распространение

Страница программы: http://www.majento.ru/index.php?page...-site-analyzer
Скачать: majento-siteanalyzer.zip (2,5 Мб)

Пожелания и замечания по работе программы приветствуются.

[Chaser]

Новая версия SiteAnalyzer 1.4.0.79





Что нового:

• добавлена информационная панель с подробными данными об интересующем URL (внутренние ссылки, внешние, изображения, сниппет)
• добавлена вкладка с отображением содержимого мета-тега "robots" (index, nofollow)
• добавлена возможность ограничения по времени сканирования проекта (указывается в часах)
• исправлено некорректное указание уровня вложенности страниц (теперь она считается с 0, а не с 1, как было ранее)
• исправлены незначительные ошибки в логике сканера, оптимизирован интерфейс программы

Ссылка на программу: SiteAnalyser (2,5 Мб)

[Chaser]

Новая версия SiteAnalyzer 1.4.1.83



Что нового:

• добавлен парсинг и отображение заголовков h1-h6, а также их дублей
• добавлена поддержка мультиязычности (программа стала доступна на русском, английском, украинском и еще 14 языках)
• в интерфейс программы добавлено запоминание размеров левой и правой панели, а также возможность их полного скрытия
• в настройках программы объединены в один два пункта по Meta Robots (учет NoIndex и NoFollow)
• исправлено некорректное определение кодировки текста у некоторых сайтов

Ссылка на программу: SiteAnalyzer (2,5 Мб)

[Chaser]

Новая версия SiteAnalyzer 1.4.3.89





Что нового:

• появилась возможность пакетного добавления сайтов в список проектов
• добавлено отображение скорости загрузки данных при парсинге сайтов (URI/сек)
• добавлено отображение favicon сайтов в списке проектов
• восстановлено отображение данных во вкладке "Инфо"

Ссылка на программу: SiteAnalyzer (2,5 Мб)

использую парсинг h1 на автомате, всем доволен, спасибо

[Chaser]

Сообщение от vadimtts

использую парсинг h1 на автомате, всем доволен, спасибо

Вышла новая версия SiteAnalyzer 1.4.4.91







Что нового:

• добавлена функция генерации структуры сайта исходя из спарсенных страниц, с возможностью выгрузки данных в Excel
• добавлена возможность сравнения средней скорости скачивания страниц для каждого сайта на графике

Ссылка на программу: SiteAnalyzer (2,9 Мб)

[Chaser]

Новая версия SiteAnalyzer 1.4.5.96



Что нового:

• увеличена скорость парсинга сайтов (по сравнению с прошлой версией, прирост скорости составил до 10 раз)
• устранены ошибки, периодически возникающие при записи данных в базу
• добавлена возможность выбора типов анализируемых объектов (страницы, изображения, стили, скрипты)
• добавлена возможность выделения нескольких URL и их запуск на пересканирование, либо их групповое удаление
• при экспорте данных добавлено автоматическое указание имени секции, которая выгружается (export_site.ru_h1.csv)
• при экспорте данных добавлен запрос на перезапись для уже существующих файлов

Ссылка на программу: SiteAnalyzer (2,9 Мб)

[Chaser]

Новая версия SiteAnalyzer 1.5.0.101







Что нового:

• увеличена скорость парсинга сайтов, повышена стабильность работы программы
• добавлена возможность скачивания отчетов в формате Excel (все результаты в одном файле, вкладками)
• добавлен парсинг видео (avi, mpeg, mov, ссылки на Youtube и т.п. форматы). Новая колонка "Видео" в общем отчете + вкладка
• добавлен парсинг документов (doc, xlsx, pdf, zip, mp3 и т.п. форматы). Новая колонка "Документы" в общем отчете + вкладка
• добавлена подсветка строк относительно типов контента (URL, стили, скрипты, изображения, видео, документы, прочее)
• добавлено визуальное отображение прогресса загрузки данных для "больших" проектов
• добавлена возможность копирования выбранных URL в списке доменов
• восстановлен парсинг и отображение файлов формата *.css
• исправлен некорректный учет правил файла "robots.txt" при парсинге сайтов
• оптимизирована структура базы данных, удаление проектов стало происходить в разы быстрее

Ссылка на программу: SiteAnalyzer (3 Мб)

[Chaser]

Новая версия SiteAnalyzer 1.5.1.104





Что нового:

• увеличена скорость экспорта данных в Excel + устранены баги, возникающие при экспорте крупных проектов
• увеличена скорость генерации карты сайта "Sitemap.xml"
• настройки программы для вкладок "Сканирование" и "Исключения" стали индивидуальными для каждого проекта
• исправлен баг, при котором объекты с типом "text/javascript" распознавались как документы, а не файлы типа "Javascript"
• исправлен некорректный парсинг мета-тега TITLE при размещенном на странице изображении SVG-формата (в котором этот тег также присутствует)
• справлена некорректная сортировка в таблице основных данных сайта, имеющих тип "boolean" (например, сортировка в колонке HTTPS)
• добавлена круговая диаграмма, отображающая процентное соотношение объектов на сайте (страницы, изображения, стили, скрипты и т.п.)

Ссылка на программу: SiteAnalyzer (3 Мб)

ПС. Настоятельно рекомендую обновить программу целиком в связи с обновлением структуры базы данных.

[Chaser]

Новая версия SiteAnalyzer 1.6











Что нового:

• добавлена возможность фильтрации данных по любым полям при помощи "быстрого" фильтра
• для более детальной фильтрации добавлена возможность использования настраиваемого фильтра с расширенными настройками выборки данных
• в панели с дополнительными данными добавлена вкладка технической статистики сайта (ссылки, мета-теги, коды ответа страниц, директивы "robots" и т.п.), а также вкладка SEO статистики (дубликаты мета-тегов, пустые заголовки страниц, наличие описаний в тегах "alt") с возможностью автоматической фильтрации по каждому параметру
• для блока HEAD добавлен учет краулером атрибутов "Next/Prev" и "Refresh" с возможностью отображения содержимого данных полей в статистике сканирования
• дата документа колонки "Последнее изменение" теперь отображается в формате текущей страны
• во вкладке "Сниппет выдачи Google" добавлено предупреждение "Snippets are only displayed for HTML format documents" для URI не text/html формата
• добавлено отображение иконок для кириллических доменов
• максимальное число потоков сканирования увеличено до 100
• исправлена выгрузка Sitemap.xml: теперь он проходит валидацию (амперсанд & заменен на его HTML-сущность "&")
• исправлена проблема с зависанием при сортировке данных по щелчку на заголовке колонки

Ссылка на программу: SiteAnalyzer (3 Мб)

[Chaser]

Новая версия SiteAnalyzer 1.6.1









Что нового:

• добавлен SEO-аудит сайта по длине title, description, h1-h6, числу внешних и внутренних ссылок, объему контента (Настройки -> SEO)
• добавлен учет ограничений на максимальное количество редиректов при парсинге сайта (Настройки -> Основные)
• добавлено отображение цепочек редиректов до конечной страницы (вкладка Инфо -> Редиректы)
• исправлено дублирование страниц при отображении дубликатов в режиме "Все" (через контекстное меню)
• исправлена некорректная кодировка при парсинге мета-тегов некоторых типов сайтов
• исправлены утечки памяти при загрузке иконок сайтов

Ссылка на программу: SiteAnalyzer (3 Мб)

[Chaser]

Новая версия SiteAnalyzer 1.7









Что нового:

• добавлена возможность бесплатной проверки индексации страниц в Яндекс XML-лимитами с помощью сервисов Яндекс XML и Majento.ru
• добавлена возможность постановки проектов на паузу во время сканирования и продолжения сканирования после перезапуска программы
• добавлен парсинг тега rel="alternate" и отображение содержимого тегов "hreflang" и "media"
• добавлена возможность парсинга сайтов, отдающих данные в формате Gzip
• исправлен не всегда корректный подсчет страниц в фильтрах статистики сканирования сайта

Ссылка на программу и описание версии: SiteAnalyzer (3 Мб)

[Chaser]

Новая версия SiteAnalyzer 1.8






Что нового:

• полностью переработан раздел "Статистика SEO", предназначенный для проведения аудита сайта
• теперь SEO-аудит проверяет 50+ основных SEO-параметров и определяет 60+ ключевых ошибок внутренней оптимизации
• добавлена функция расчета внутреннего PageRank для любой страницы сайта
• добавлен учет инструкций X-Robots-Tag в заголовках страниц
• восстановлена работа программы с кириллическими доменами (проблема возникала из-за некорректной обработки CANONICAL)
• восстановлено отображение входящих ссылок на страницы с кодом ответа 404 (вкладка Инфо)
• восстановлено отображение всех редиректов сайта (в предыдущей версии часть из них не отображалась)
• исправлен баг с экспортом заголовков H1-H6
• исправлены незначительные пробелы в локализации программы

Ссылка на программу: SiteAnalyzer (3 Мб)

[Chaser]

Новая версия SiteAnalyzer 1.8.1





Что нового:

• в списке проектов добавлена автоматическая группировка поддоменов относительно основного домена
• добавлено отображение исходного кода страниц типов: html, css, text, js (вкладка Инфо -> View Source)
• легенда графика с данными стала интерактивной и теперь также фильтрует данные исходя из значений легенды
• добавлена возможность экспорта отчетов по установленным фильтрам в таблице основных данных сайта
• добавлена возможность экспорта отчетов на вкладке Инфо для выбранного URL (входящие, исходящие, редиректы, изображения и т.п.)
• добавлена колонка X-Robots-Tag на вкладке <Все ссылки>
• исправлена некорректная обработка robots.txt
• исправлено ложное отображение HTTP/S протокола для страниц, которые на самом деле их не имеют
• исправлена проверка индексации страниц в Яндексе (любая страница показывалась в индексе, даже если это не так)
• исправлено не всегда корректное отображение ссылок формата HREFLANG
• исправлено некорректное отображение кодов ответов для Youtube-видео
• исправлено некорректное отображение внешних Nofollow ссылок

Ссылка на программу: SiteAnalyzer (6 Мб)

[Chaser]

Новая версия SiteAnalyzer 1.8.2





Что нового:

• добавлена возможность копирования в буфер обмена значений ячеек при множественном выделении элементов (основной блок + вкладка Инфо)
• добавлена визуализация загрузки проектов при старте программы
• добавлена визуализация экспорта проектов в Excel/CSV
• добавлена автоматическая очистка базы при удалении проектов
• в разделе "Структура сайта" добавлено отображение числа страниц в папках
• исправлен не всегда корректный экспорт данных в Excel/CSV
• исправлены подвисания и аварийные закрытия программы при навигации по вкладке Инфо

Подробнее тут: нововведения версии 1.8.2

[Chaser]

Новая версия SiteAnalyzer 1.8.3





Что нового:

• добавлена вкладка Дашборд, отображающая подробный отчет о текущем качестве оптимизации сайта (отчет генерируется на основе данных вкладки Статистика SEO)
• добавлена возможность экспорта технической и SEO-статистики сайта, отображаемой на вкладке Дашборд, в удобный отчет в формате PDF
• в основных настройках программы добавлена возможность отключения учета тега <base>
• для более удобного копирования ячеек добавлены события по Shift и Ctrl
• при настройках парсинга только HTML-страниц исправлено подмешивание страниц других типов
• исправлена не всегда корректная обработка robots.txt
• восстановлено отображение внешних ссылок (исходящие ссылки)

Подробное описание версии: SiteAnalyzer 1.8.3

[Chaser]

Новая версия SiteAnalyzer 1.9







Что нового:

• добавлена возможность сканирования списка произвольных URL (используя буфер обмена или загрузку URL из файла на диске)
• добавлена возможность сканирования файлов Sitemap.xml (классический Sitemap либо индексный со списком XML-файлов)
• добавлена возможность выделения и копирования в буфер обмена значений ячеек по Ctrl+A
• ускорена операция удаления проектов (для полного удаления проектов необходимо делать сжатие базы через меню программы)
• исправлена проблема с не всегда корректным подсчетом пустых тегов H1
• исправлена проблема с не всегда корректным парсингом атрибута <title> у изображений
• исправлено зависание программы при перемещении по записям во время сканирования

Подробное описание версии: SiteAnalyzer 1.9

[Chaser]

Новая версия SiteAnalyzer 1.9.2







Что нового:

• увеличена скорость сканирования сайтов, уменьшен расход оперативной памяти
• осуществлен переход на 64-битную версию (стало доступно сканирование сайтов до 10 млн страниц)
• добавлена возможность запуска нескольких копий программы одновременно
• добавлено сохранение параметров расширенной фильтрации при переключении между табами активного проекта
• добавлено запоминание ширины колонок на вкладках
• добавлена возможность постановки на паузу сканирования списка URL, загруженных при помощи импорта
• добавлен учет параметра lastmode при формировании Sitemap
• добавлена колонка "Сервер", указывающая тип сервера, на котором размещен сайт (пример: nginx/1.16.0)
• добавлено отображение состояний <пусто> и <отсутствует> для заголовков H1-H6
• добавлена возможность сканирования определенных групп URL, без необходимости сканирования сайта целиком (вкладка "Следовать URL" в общих настройках программы)
• добавлена возможность сканирования страниц, не отдающих значение заголовка Content-type
• оптимизирован подсчет дублей H1-H6 (отменен учет пустых либо отсутствующих H1-H6)
• содержимое вкладки "Исключить URL" общих настроек программы стало общим для всех проектов
• улучшено определение кодировок страниц
• исправлено некорректное отображение страниц с редиректами 3xx
• исправлен баг, связанный с некорректным учетом правил "robots.txt"
• исправлен некорректный парсинг страниц, содержащих в URL знак плюс (+)
• исправлен учет изображений при сканировании сайта, когда в настройках разрешен парсинг только HTML (если, например, отключенные объекты отдают код ответа 404)
• исправлено подвисание, возникавшее при загрузке больших проектов
• исправлен баг, возникающий при загрузке больших проектов, когда прогресс в нижнем прогресс-баре становился больше 100%
• при расчете SEO-статистики редиректам 301 и 302 присвоен синий значок вместо оранжевого и установлен 1 балл веса вместо 3-х

Примечание: в связи с обновлением структуры базы данных необходимо заново просканировать все проекты. Как добавить проекты из старой версии в новую описано в разделе FAQ.

Подробное описание версии: SiteAnalyzer 1.9.2

[Chaser]

Новая версия SiteAnalyzer 2.0







Что нового:

• добавлена визуализация структуры сайта на графе (аналогично Screaming Frog)
• добавлена возможность сканирования сайтов по внутренним URL, а не только по главной странице, как было ранее
• добавлена возможность сканирования локальных сайтов на Denwer или Live Server по локальным адресам
• добавлено автоматическое пересканирование страниц, если их скачивание завершается таймаутом (например, когда сайт блокирует большое количество одновременных запросов и возвращает неопределенные коды ответа)
• добавлена возможность автоматического обновления версий программы (при старте программы или через главное меню)
• добавлен счетчик оставшегося времени сканирования текущего проекта
• множество других изменений...

Подробное описание версии: SiteAnalyzer 2.0

[Chaser]

Новая версия SiteAnalyzer 2.0.2







Что нового:

• увеличена скорость парсинга (прирост порядка 10%), повышена стабильность работы сканера
• скорость рисования узлов графа увеличена на порядок 10 раз (теперь граф с легкостью может отображать до 100 000 узлов)
• оптимизировано время финального сохранения проекта в базу (актуально для сайтов больших размеров)
• оптимизировано отображение дубликатов заголовков H1-H6 (убраны дублирующие друг друга страницы)
• добавлена возможность отключения оповещения о выходе новой версии при старте программы
• добавлена колонка с указанием числа входящих ссылок на страницу на вкладке PageRank
• добавлена возможность поворота графа и изменения масштаба на произвольную величину
• исправлено не всегда корректное определение неканонических страниц (Wrong Canonical)
• исправлена ошибка «Access violation», возникающая при удалении большого количества URL
• исправлен баг исчезновения URL, возникающий при постановке на паузу процесса сканирования проекта / списка URL
• исправлен баг, при котором в поле Быстрой фильтрации не работала кнопка Delete
• устранены незначительные ошибки в юзабилити, исправлены мелкие баги

Подробное описание версии: SiteAnalyzer 2.0.2