Дайджест вебинара: SEO аудит и анализ в реальном времени с Биллом Хартцером

  1. Кто такой Билл Хартцер?
  2. Как получить доступ к файлам журнала через плагин cPanel для WordPress?
  3. Изучите содержимое файла журнала
  4. Используйте свои файлы журналов для получения дополнительной информации о статистике сканирования
  5. Обнаружение необычной активности сканирования
  6. Mobile First Indexing Peak
  7. Изменение структуры URL для сайта
  8. Отчеты и функции OnCrawl, полезные для проведения технического аудита
  9. Свежий ранг
  10. Посещение ботом страниц и ресурсов по коду статуса
  11. Отчеты Data Explorer: пользовательские отчеты
  12. Отчеты Обозревателя данных: Активные Сиротские Страницы
  13. Поисковая аналитика для рейтинга ключевых слов
  14. Показы, CTR и клики
  15. Сегментация сайта
  16. Ключевые моменты
  17. Попробуйте OnCrawl бесплатно!
  18. Вы пропустили живой вебинар? Смотрите повтор!

25 сентября OnCrawl удостоился чести принять Билла Хартцера для вебинара по анализу файлов журнала и важности, которую это имеет для SEO аудитов. Он просмотрел свой собственный сайт, чтобы показать влияние оптимизаций на активность ботов и частоту сканирования.

Кто такой Билл Хартцер?

Билл Хартцер - консультант по SEO и эксперт по доменным именам с более чем 20-летним опытом. Билл всемирно признан в своей области, и недавно он дал интервью CBS News, чтобы поделиться своим взглядом на поиск.
Во время этого вебинара Билл представил свои файлы журналов и показал нам, как он использовал их в контексте аудита сайта. Он подробно описал различные инструменты, которые он использует для проверки производительности своего сайта и поведения ботов.
Наконец, Билл ответил на вопросы участников о том, как он использует OnCrawl для получения значимых результатов и дает советы другим оптимизаторам.

Как получить доступ к файлам журнала через плагин cPanel для WordPress?

Если ваш сайт был создан с помощью WordPress и вы используете плагин cPanel, вы можете найти свои логи непосредственно в интерфейсе WordPress.
Перейдите от «Метрики» к «Raw Access». Таким образом, вы можете ежедневно загружать файлы журналов из файлового менеджера и архивировать старые архивы файлов.

Изучите содержимое файла журнала

Файл журнала - это большой текстовый файл, который содержит информацию о посетителях вашего сайта, включая ботов. Вы можете открыть его в простом текстовом редакторе.
Нетрудно определить потенциальные посещения от googlebot или Bing (идентифицируемые через файлы журналов), но все же лучше подтвердить идентификацию бота с помощью поиска по IP.
Вы также можете найти других ботов, которые сканируют ваш сайт, но не очень полезны для вас. Вы можете запретить этим ботам доступ к вашему сайту.
OnCrawl перейдет к анализируя ваши файлы журнала чтобы дать вам четкое и точное представление о ботах, которые посещают ваш сайт.

Используйте свои файлы журналов для получения дополнительной информации о статистике сканирования

Информация о статистике сканирования доступна в старой версии Google Search Console в разделе Сканирование> Статистика сканирования. Они принесут вам новые перспективы, когда вы сравните их с данными ваших файлов журнала.
Данные, отображаемые в консоли поиска Google, не ограничиваются SEO-ботами Google (они содержат все боты, включая Adsense, например) и могут быть менее точными, чем информация, которую вы найдете, проанализировав файлы журналов.

Обнаружение необычной активности сканирования

Билл заметил 3 последних пика, которые можно увидеть в статистике сканирования в Google Search Console. Это важные события, которые вызвали увеличение активности сканирования.

Mobile First Indexing Peak

Mobile First Indexing Peak

На первый взгляд пик 7 сентября в консоли поиска Google может показаться не связанным с событиями на сайте. Тем не менее, анализ журналов в OnCrawl дает подсказки:

Анализ файлов журнала позволяет нам увидеть распределение различных ботов, которые Google использовал для сканирования страницы
Анализ файлов журнала позволяет нам увидеть распределение различных ботов, которые Google использовал для сканирования страницы. Понятно, что активность Googlebot на рабочем столе резко снизилась до этой даты. Этот пик, в отличие от более ранних, которые были слабее, почти полностью состоит из посещений уникальных страниц, уже проиндексированных мобильным роботом Google.
Увеличение органического трафика на 50%, зарегистрированное в Google Analytics, подтверждает, что этот пик соответствует индексации Mobile First на сайте в сентябре, за несколько недель до официального оповещения, отправленного Google!

Изменение структуры URL для сайта

В середине августа Билл внес изменения в структуру своего URL, чтобы сделать его более удобным для SEO.
Сразу после этого изменения консоль поиска Google зафиксировала 2 больших пика, подтверждая, что Google идентифицирует основные события на сайте и использует их в качестве сигналов для повторного просмотра URL-адресов веб-сайта.
Когда мы смотрим на распределение этих посещений в OnCrawl, мы видим, что второй пик менее острый, но скорость сканирования остается высокой в ​​течение нескольких дней. Очевидно, что Google заметил изменения, которые Билл может подтвердить, наблюдая различия в активности сканирования в течение нескольких дней после его изменений.

Отчеты и функции OnCrawl, полезные для проведения технического аудита

SEO посещения и SEO активные страницы

OnCrawl обрабатывает данные вашего журнала, чтобы предоставить точную информацию о ваших посещениях SEO или посетителях, прибывающих из поисковой выдачи Google.
Вы можете отслеживать количество посещений или анализировать активные страницы SEO, которые являются отдельными страницами вашего сайта и получают органический трафик.
Один из элементов, который вы должны проанализировать во время аудита, - это то, почему некоторые проиндексированные страницы не получают органический трафик (или, другими словами, не являются активными страницами SEO).

Свежий ранг

Fresh Rank, метрика OnCrawl, предоставляет важную информацию. В этом случае: среднее время между тем, когда Google сканирует страницу в первый раз, и тем, когда страница получает свой первый визит в SEO.

Стратегии продвижения контента и разработки обратных ссылок могут помочь вам получить более быстрый трафик для новой страницы. Некоторые страницы этого аудита, такие как статьи в блогах, рекламируемые в социальных сетях, имеют более низкий рейтинг Fresh.

Посещение ботом страниц и ресурсов по коду статуса

Боты могут посещать URL-адреса, которые возвращают ошибки 404 или 410. Это могут включать такие ресурсы, как CSS, JavaScript, PDF или изображения.
Вы должны проанализировать эти элементы во время аудита. Перенаправление этих URL-адресов и удаление внутренних ссылок может привести к положительным результатам.
Во время аудита может быть полезно вести записи о том, что обрабатывать, например, URL-адреса, которые возвращают ошибки состояния ботам.

Отчеты Data Explorer: пользовательские отчеты

OnCrawl Data Explorer предлагает быстрые фильтры для создания отчетов, которые могут вас заинтересовать. Вы также можете создавать свои собственные отчеты на основе критериев, которые полезны для вас. Например, вы можете захотеть исследовать ваши активные страницы SEO на предмет отказов и высокой загрузки.

Отчеты Обозревателя данных: Активные Сиротские Страницы

Отчеты Обозревателя данных: Активные Сиротские Страницы

Комбинируя данные аналитики, сканирования и регистрации, OnCrawl может помочь вам обнаружить страницы, которые приводят к обычным и обычным посещениям, которые не всегда повышают ценность вашего сайта. Преимущество использования данных вашего журнала заключается в том, что вы можете обнаружить все посещенные вами страницы на вашем сайте, включая страницы, которые могут не содержать код Google Analytics.
Билл был в состоянии идентифицировать органические посещения SEO в каналах RSS страниц, возможно, через ссылки из внешних источников. Эти страницы Сиротские страницы сайта, у них нет страниц "родственников", которые возвращаются к ним. Эти страницы не повышают ценность его стратегии SEO, но они все еще получают некоторые посещения от естественного трафика.
Они представляют очень хороших кандидатов для начала оптимизации.

Поисковая аналитика для рейтинга ключевых слов

Данные рейтинга можно взять из консоли поиска Google. В старой версии Google Search Console вы можете перейти к поисковому трафику, затем в Search Analytics и просмотреть клики, показы, CTR и последние 90 дней.
OnCrawl предоставляет четкие отчеты о том, как эти данные относятся ко всему вашему сайту. Таким образом, вы можете сравнить общее количество страниц на сайте, количество страниц в рейтинге и количество страниц, которые получают клики.

Показы, CTR и клики

Сегментация вашего сайта позволяет вам одним взглядом подтвердить, какие типы групп страниц классифицированы и на каких позициях.
В этом аудите Билл использует метрики OnCrawl для определения типов страниц, которые имеют высокий рейтинг. Это тип страниц, которые он должен продолжать создавать, чтобы увеличить посещаемость сайта.
Клики на классифицированных страницах тесно связаны с позицией рейтинга: позиции после 10 больше не находятся на первой странице результатов поиска. Количество кликов резко упадет для большинства ключевых слов.

Сегментация сайта

Сегментация OnCrawl - это метод группировки ваших страниц в соответствующие наборы. Хотя предусмотрена автоматическая сегментация, вы можете редактировать фильтры или создавать свою собственную сегментацию. Используя фильтры OnCrawl Query Languages, вы можете включать или исключать страницы из группы на основе различных критериев.
На сайте, который Билл анализирует на вебинаре, сегментация основана на различных каталогах сайта.

Страницы в структуре> Сканирования> Объявления> Активы   В отчете ранжирования OnCrawl график «Страницы в структуре> просканирован> ранжирован> активен» может предупредить вас о проблемах с вашими классифицированными и посещенными страницами
Страницы в структуре> Сканирования> Объявления> Активы
В отчете ранжирования OnCrawl график «Страницы в структуре> просканирован> ранжирован> активен» может предупредить вас о проблемах с вашими классифицированными и посещенными страницами.
Эта диаграмма показывает вам:

  • Страницы в структуре: количество страниц, на которые можно перейти по разным ссылкам вашего сайта;
  • Сканирование: страницы, которые сканировал Google;
  • Доска объявлений: страницы, которые появились в поисковой выдаче Google
  • Активные: страницы, которые получили органические посещения.

Во время аудита вы захотите понять причины, которые привели к различиям между столбиками на диаграмме.
Однако различия между количеством страниц в структуре и количеством просканированных страниц могут быть преднамеренными. Например, если вы запретите Google сканировать некоторые страницы, запретив роботов в файле robots.txt. Вы должны быть бдительными в этом вопросе во время своего одитинга.
Вы можете узнать больше об этих данных в OnCrawl, нажав на диаграмму.

Ключевые моменты

Ключевые моменты этого вебинара:

  • Большие изменения в структуре сайта могут привести к изменениям в активности сканирования.
  • Бесплатные инструменты Google сообщают данные, которые агрегированы, взвешены или округлены и могут быть неточными.
  • Файлы журнала позволяют увидеть реальное поведение бота и обычные посещения. В сочетании с данными сканирования и ежедневного мониторинга они являются мощным инструментом для обнаружения пиков.
  • Надежные данные необходимы, чтобы понять, почему и как произошли изменения. Для этого просто выполните перекрестную аналитику, сканирование, ранжирование и данные журнала, извлеченные из такого инструмента, как OnCrawl.

Попробуйте OnCrawl бесплатно!

Хотите ли вы применить эти методы на своем сайте для получения достоверных данных аудита?

Вы пропустили живой вебинар? Смотрите повтор!

Если у вас не было возможности посетить живой вебинар или вы не смогли остаться до конца, вы все равно можете посмотреть полную версию прямо здесь: