224
5 мин

Главные новости о наших сервисах: рейтинг CMS и сервис определения CMS

Самой главной проблемой, с которой пришлось столкнуться - поставщик списка доменов перестал актуализировать свою базу. Был найден новый источник данных. После первого тестового сбора данных о CMS мы увидели резкое падение доли определения. Мы обновили отпечатки некоторых cms, но доля оставалась значительно ниже ожидаемой.

Дальнейшее изучение проблемы показало:

  • У многих сайтов html код стал занимать больше 100 КБ.
  • Время ответа и отдачи html у многих сайтов превышает 30 секунд.
  • Количество редиректов часто превышает 2.
  • Наша система определения внешних редиректов не всегда корректно определяет редирект на https версию. 

Мы исправили все проблемы и получили точность определения выше средних значений. 

В сентябре 2019 года мы опубликовали новую версию рейтинга CMS и рейтинга консультантов

В ноябре 2019 года мы решили изучить на каких cms работают самые популярные сайты (источником данных является сервис яндекс радар, который показывает наиболее популярные сайты на основе статистики яндекс метрики).  

Выбрали 3 категории которые нам показались наиболее интересными:

  • общий рейтинг;
  • e-commerce;
  • представительства и организации. 
По этим категориям мы провели определение для сайтов и опубликовали рейтинги. 

После окончания работы над рейтингами началась громкая история вокруг NGINX и нам показалось важным понять реальную долю этого сервера в рунете. На основе данных о наиболее популярных сайтов мы собрали статистику по веб-серверам.

В 2019 году к определению были добавлены новые Cms:

  • Moguta.CMS
  • Битрикс24 Сайты
  • ExpressionEngine
  • 5CMS
  • October CMS
  • Magento
  • Shopify
  • Spindrift
  • Express.js
  • Ecwid
  • Blogger
  • Squarespace
  • Adobe Muse
  • Vigbo
  • Umbraco
  • Mono
Также была реализована возможность создания детальной страницы cms с отзывами, статистикой и основной информацией. Для части cms мы запустили детальные страницы, но большая часть ещё в процессе заполнения. 

Статистика переходов на сайты разработчиков с детальной страницы CMS за 1 квартал 2020 года

Для сервиса определения CMS мы разработали расширения для браузеров Google ChromeOpera и Firefox для того чтобы облегчить определение. 

Начали разработку определение с помощью голосовых помощников (яндекс.диалоги и Google assist). Распознавание адресов сайтов в этих помощниках работает не так хорошо как хотелось бы, но мы следим за развитием данного направления и хотим предоставить возможность быстрого голосового определения. 

Сервис определения cms претерпел не только  небольшой редизайн, но и была полностью переписала вся клиентская часть, что позволило нам увеличить стабильность её работы, вести полную статистику определений и главное это упростит поддержку и доработку сервиса.

Частота определения CMS в нашем сервисе за 60 дней

Наши дальнешие планы:

  • Работа над детальными карточками CMS
  • Публикация новых рейтингов CMS, консультантов, веб-серверов
  • Запуск рейтинга CMS в новом формате
  • Доработка сервиса определения CMS для множественной проверки