Ручной мониторинг сайта: как делать и в чем выгода

Если вы маленькие, но заботитесь о качестве

Как эффективно проводить мониторинг сайта, если в вашей маленькой компании нет специалистов в области визуализации данных или не хватает знаний для создания дашборда, который в автоматическом режиме собирает всю необходимую информацию?

Мониторинг сайта — важная составляющая seo-продвижения. Если вовремя отследить техническую ошибку на проекте, то можно без потерь для трафика и позиций исправить сбой работы сайта. Но если определить ошибку вовремя не удалось, то это может повлечь негативные последствия для бизнеса в целом.

Как отслеживать ошибки на сайте, если нет специальных знаний

Для качественного продвижения необходимо систематически наблюдать за технической работой сайта. Но вся информация хранится в разных системах аналитики. Было бы гораздо удобнее, если бы вся информация лежала в одном месте. Как это реализовать? Дашборд! Но когда мы начинали развиваться как компания, у нас не было ресурсов (ни человеческих, ни финансовых) для создания дашбордов, на которые мы могли бы выводить те данные, которые нам необходимы для технического отслеживания сайта. Наша команда разработала временный вариант решения этой проблемы — ручной мониторинг сайта. Этот вариант нам подошел, потому что он не требует никаких вложений и очень прост в реализации.

Как мы проводим ручной мониторинг сайта

Мы выделили параметры, по которым хотели бы отслеживать техническое состояние проекта:

1. видимость сайта в выдаче;
2. количество страниц в индексе;
3. количество 404 страниц;
4. количество страниц в sitemap.

Чтобы систематически наблюдать за проектами, каждый понедельник наша команда вручную собирает данные по сайтам наших клиентов из различных сервисов аналитики: SeoWork, Topvisor, Яндекс.Вебмастер. Помимо того, что мы берем из сервисов данные, которые нам необходимы для анализа, мы обращаем внимание на другие возможные ошибки, например, в Вебмастере. Если мы выявили дополнительные неточности или аномальные значения в данных, мы сразу же ставим в CRM задачи на исправление.

Чтобы мы смогли разобраться с текущим состоянием проекта, мы сравниваем показатели из сервисов аналитики с прошлым периодом: выросла ли видимость сайта или осталась без изменений, увеличилось ли количество страниц с 404 кодом ответа, упало ли количество страниц не в индексе. Если данные изменились в худшую сторону, например, упала видимость сайта более чем на 5%, наш специалист ставит задачу на поиск причины падения для дальнейшего исправления ошибки.

Так мы всегда можем посмотреть, как менялись наши данные по проекту за весь срок работы над ним, где был рост или падение трафика и др. Для нас важно было сделать это быстро, понятно и без дополнительных вложений.

Преимущества ручного мониторинга сайтов

Ручной анализ подойдет для начинающего вебмастера или компании, у которой нет ресурсов для создания дашбордов.

Когда мониторинг сайта происходит таким образом, каждый сотрудник компании проводит анализ собственноручно:

1. отслеживает изменения данных, основываясь на прошлых периодах;
2. выявляет изменения в показателях и сам сравнивает статус технического состояния сайта с прошлым периодом.

Если сравнивать данный метод с автоматизированными дашбордами, то у него есть преимущество — корректность показателей не зависит от возможных сбоев в работе онлайн-сервиса. Конечно, при ручном мониторинге сайта может сыграть человеческий фактор. И чтобы минимизировать этот риск, старшие специалисты периодически проверяют корректность данных за младшими специалистами.

BI-дашборды

Если у вас есть возможность создать BI-отчет, то может случиться, что со временем вы станете очень редко заходить на дашборд для проверки корректности данных и полностью переложите ответственность за мониторинг сайта на BI-систему. Но не стоит забывать, что в работе онлайн-сервисов тоже могут возникать сбои, например, могут не обновляться данные, сбиваться преднастроенные фильтры или формулы и т.д. И если вы не будете контролировать корректность данных, то можно легко пропустить ошибку в отчете.

Но это вовсе не значит, что ручное техотслеживание является панацеей для данной задачи. Безусловно, у сервисов бизнес-аналитики есть большое преимущество: нужно всего один раз потратить время, и ваш отчет всегда будет актуален и доступен. Но! Чтобы разработать качественный BI-отчет, необходимо обладать определенными навыками получения и визуализации данных или иметь финансовые возможности для найма специалиста, который создаст вам отчет.

С тех пор как мы начали использовать метод ручного анализа, наша компания выросла и продолжает расти. Количество проектов также увеличивается, и этот способ техотслеживания нам уже не подходит. На данный момент мы занимаемся разработкой BI-отчета, в котором сможем отслеживать наши проекты в автоматическом режиме. Пока BI-отчет находится в разработке, мы продолжаем пользоваться методом ручного мониторинга сайтов. И вот как этот метод нам недавно помог.

Кейс: ошибка в Вебмастере

В один из понедельников (день, когда проходит техотслеживание) мы увидели, что в Яндекс.Вебмастере у нас появилась фатальная ошибка. Она заключалась в том, что главная страница была закрыта от индексации.

Соответственно, уменьшилось количество страниц в индексе сайта и произошла просадка по трафику. Падение трафика началось 15 ноября, 22 ноября оно прекратилось и трафик начал восстанавливаться, 29 ноября трафик вернулся к прошлым значениям. За время, пока главная страница сайта была закрыта от индексации, трафик снизился на 25% в обеих поисковых системах, а количество страниц в индексе Яндекса уменьшилось на 60%.

Чтобы как можно быстрее привести сайт в норму, мы каждый день отправляли страницы на переиндексацию, и это нам помогло! Несмотря на фатальную ошибку, мы отделались незначительным падением трафика на достаточно короткое время.

Благодаря тому, что мы проводим регулярное техотслеживание, нам удалось быстро выявить очень серьезную ошибку и оперативно ее устранить.

И это не единственный случай, когда ручное еженедельное отслеживание нас спасало. Ситуации были разные: клиенты забывали продлить домен и сайт был полностью недоступен, важные страницы закрывались от индексации и пр.

Вывод

Разумеется, данный бесплатный метод имеет большое количество недочетов. Как минимум это так называемая monkey job. Вероятно, есть и более удачные варианты решения проблемы техотслеживания. Но на начальном этапе мы выделили такой метод как наиболее удобный для нас. Это хороший вариант, когда у вас всего пара сотрудников и десять проектов. Но когда компания начинает расти, вы все чаще находите недостатки такого решения. Именно это и подтолкнуло нас на разработку автоматизированного BI-отчета.

Возможно, вариант, которым мы поделились в этой статье, окажется полезен и кому-то из вас. Если у вас есть другой, более удобный метод, мы с удовольствием познакомимся с вашими наработками и предложениями. И будем рады услышать ваше мнение о нашем варианте техотслеживания сайтов.

P.s. Подписывайтесь на наш телеграм-канал t.me/seoantteam, чтобы первыми узнавать о выходе новых материалов. Мы регулярно публикуем полезные статьи для веб-мастеров, например, о том, как удалить дубли страниц или как провести аудит сайта самостоятельно и бесплатно. Если же вы не хотите сами проводить SEO-работы над своим сайтом и предпочитаете доверить это профессионалам, то напишите нам, чтобы узнать цену на технический аудит сайта или другие услуги.

Автор: Влад Биктулов (Ant-team.ru).