Как найти непосещаемые страницы на сайте

Трафик или посещаемость сайта — это количество пользователей, зашедших на него за определенный период времени.

Страницы без трафика – это страницы с нулевым показателем посещаемости. Ими могут быть:

• страницы, не релевантные (то есть не соответствующие) поисковым запросам;
• служебные и технические страницы, не предназначенные для посещения пользователями;
• страницы, сохраненные пользователями на свой компьютер;
• страницы, на которые не ведут внутренние и внешние ссылки;
• качественные посещаемые страницы, по ошибке заблокированные от индексации (то есть от внесения в индекс — базу данных поисковой системы);
• неканонические URL, которые Google не выбрал в качестве предпочтительных для индексации из набора одинаковых страниц (дублей) на вашем сайте;
• ненайденные страницы (ошибка 404), страницы с малополезным контентом или техническими проблемами.

Почему важно знать о наличии на сайте таких страниц?

Их наличие приводит к потере сайтом пользователей и ухудшению его посещаемости. Посещаемость является одним из показателей востребованности веб-ресурса и относится к числу поведенческих факторов, которые учитываются при ранжирования как в Google, так и в Яндексе. Без хорошей посещаемости невозможно обеспечить высокие конверсии и продажи.

Индексация страниц без трафика может привести к раздуванию индекса – так называется занесение в индекс поисковой системы большого числа страниц, которые не представляют ценности для пользователей. Это отрицательно сказывается на ранжировании сайта, поскольку слишком много времени уходит на сканирование ненужных страниц, а полезные страницы могут совсем не попасть в индекс. Поисковые системы будут считать такой сайт менее качественным и не поставят его на высокие позиции в результатах поиска.

Анализ страниц без трафика поможет выявить и устранить имеющиеся на сайте проблемы — например, страницы с ошибкой 404, ошибочную блокировку от индексации, дублирование контента и другие неисправности или недоработки, оказывающие негативное влияние на ранжирование сайта и его посещаемость.

Как найти страницы без трафика?

В Google Analytics вы можете увидеть нулевой трафик только при просмотре страниц по отдельности.

Воспользуйтесь отчетом Labrika «Страницы без трафика» в разделе поведенческих факторов. Отчет показывает список всех страниц, на которые пользователи не заходили в течение 6 месяцев. Информация предоставляется с тех счетчиков, которые были подключены к сервису Labrika.

Как исправить страницы без трафика?

Для исправления таких страниц необходимо провести их анализ и выяснить причину отсутствия трафика.

Закройте от индексации страницы, которые не предназначены для пользователей

Служебные и технические страницы, не предназначенные для посещения пользователями, не должны попадать в результаты поиска, поэтому, как правило, закрываются от индексации в поисковых системах.

Удалите страницы, не имеющие потенциала для привлечения трафика

Страницы с ошибкой 404 и другими техническими проблемами, дубли, страницы с малополезным контентом нужно удалять или переделывать, наполняя полезным содержимым и устраняя технические ошибки и недоработки. Удалять нужно страницы, у которых нет ни трафика, ни потенциала по его привлечению, отсутствуют обратные ссылки с других веб-ресурсов.

Оптимизируйте страницы, которые могут привлечь трафик

• Если у страницы есть потенциал по привлечению трафика, удалять её не следует. По возможности оптимизируйте такую страницу под популярный поисковый запрос с высоким потенциалом трафика. Пропишите слова запроса в мета-тегах Title и Description, а также в заголовке Н1 – это поможет странице занять позиции в ТОПе поисковой выдаче, а значит, получить трафик. Вы можете воспользоваться рекомендациями по оптимальной длине текстов, Title, Description и H1, а также по добавлению в них ключевых слов, которые сервис Labrika приводит в разделе «Оптимизация страницы».

• Если из-за высокой конкуренции не удается продвинуть страницу по общей высокочастотной фразе, используйте для продвижения более узкие низкочастотные запросы — уровень конкуренции по ним значительно ниже, а значит, и выйти в ТОП будет проще. Кроме того, они лучше привлекают целевой трафик — посетителей, заинтересованных именно в этом продукте.
• Продвигайте страницу по тому запросу, которому она соответствует по типу интента (поискового намерения). Коммерческие страницы с товарами или услугами успешно продвигаются только по коммерческим запросам, нацеленным на покупку этих продуктов. Для продвижения информационных страниц (статей, блогов, видеообзоров, страниц вопросов и ответов и т. п.) выбирайте информационные запросы, направленные на получение сведений о данном предмете. Посмотреть тип запроса можно в «Таблице по ключевым словам» на сервисе Labrika.
• Предлагайте контент в том формате, который преобладает в ТОПе выдачи по данному запросу (инструкции, обзоры, подборки, мнения, инструменты и т. д.). Скорее всего, это именно то, чему пользователи отдают предпочтение.
• Напишите привлекательные сниппеты (краткие описания сайта в поисковой выдаче) – это повысит их кликабельность и привлечет больше посетителей. Помимо оптимизации под запрос мета-тегов Title и Description, которые используются для формирования сниппета, вы можете описать ваше УТП (уникальное торговое предложение) и конкурентные преимущества, добавить слова, которые покажут коммерческую направленность страницы (купить, заказать, цена, название города, где осуществляются продажи и т. д.). Улучшить ваши сниппеты поможет отчет Labrika «Сниппеты свои и по ТОП10».

Снимите ошибочную блокировку индексации нужных страниц

При случайном запрете индексации качественных посещаемых страниц нужно изменить настройки сайта таким образом, чтобы поисковые системы могли добавлять эти страницы в поиск. Наиболее распространенным способом блокировки индексации является метатег robots с атрибутом noindex. Это небольшой фрагмент кода страницы, который запрещает поисковым системам индексировать URL-адрес. Также могут препятствовать индексации блокировка страницы в файле robots.txt, содержащем директивы по сканированию для поисковых роботов, запрет краулеру посредством атрибута nofollow переходить по ссылкам, ведущим на страницу, и др. Чтобы найти все страницы, закрытые для индексирования, посмотрите на Labrika отчет «Блокировки индексации».

Исправьте ошибки навигации

Ошибки навигации приводят к направлению посетителей и поисковых роботов на несуществующие страницы (ошибка 404) или к появлению большого количества дублей и также могут препятствовать индексации нужных страниц. С помощью отчетов Labrika проверьте использование редиректа (переадресации) и атрибута rel=canonical, указывающего приоритетную для индексации каноническую страницу.

Google обычно не индексирует неработающие страницы – если они имеют обратные ссылки, следует перенаправить их на рабочие страницы по той же теме. Это позволит получить больше трафика. Страницы с ошибкой 404 отображаются на Labrika в отдельном отчете.

Добавьте внутренние и внешние ссылки на страницу

Если страница содержит качественный релевантный контент, но отсутствует в индексе, хотя технические настройки не препятствуют индексированию, добавьте ссылки на неё с подходящих по тематике авторитетных страниц вашего сайта. Это поможет поисковому роботу быстрее найти и проиндексировать нужную страницу, а пользователям — переходить на неё с других страниц. Увидеть страницы, на которые не ведут внутренние ссылки, можно в отчете Labrika «Посадочные, мало входящих (< 5)».

Размещайте естественные внешние ссылки на страницы – используйте справочники организаций, популярные блоги, социальные сети, тематические сайты, форумы и другие ресурсы, на которых можно получить бесплатную обратную ссылку. Внешние ссылки до сих пор остаются важным фактором ранжирования в Google – согласно данным исследований, наблюдается значительная корреляция между общим количеством ссылок на страницу и ее рейтингом.

Воспользуйтесь отчетами и инструментами Google для проверки проблем на странице

Проверьте «Отчет о мерах, принимаемых вручную» и «Отчет о проблемах безопасности», — проблемы в любом из этих отчетов Google могут помешать отображению вашей страницы в результатах поиска.

Используйте инструмент проверки URL — он предоставляет информацию о проиндексированной Google версии определенной страницы. Вы сможете получить подробные данные о неполадках на странице (включая ошибки AMP, ошибки структурированных данных, проблемы с индексированием), а также получить рекомендации по их устранению.

Часто бывает необходимо найти страницы сайта без трафика с помощью Яндекс Метрики, а затем быстро их удалить. В этой статье я и расскажу и покажу как это сделать.

Вступление

Прежде всего, хочу сказать, что в Яндекс Метрике, по состоянию на сегодняшний день, нет стандартного отчета, который бы позволил одним кликом решить эту задачу. К тому же для отчета «Содержание» — «Страницы входа», который мы будем использовать, есть стандартное ограничение, которое гласит:

Детализация до уровня отдельных визитов и посетителей была отключена для исключения рисков деанонимизации пользователей. Показываются только строки с информацией не менее чем по 10 посетителям.

Источник: Яндекс Метрика

Другими словами, данный отчёт Яндекс Метрики, не отобразит нам страницы на которые заходило менее 10 посетителей за выбранный промежуток времени. Он нам отобразит страницы сайта на которые заходило от 10 посетителей включительно.

Условимся, что под страницами без трафика мы будем далее понимать те страницы, которые за выбранный временной интервал посетило до 10 посетителей.

А если временной интервал выбрать, скажем, 6 или 12 месяцев, то такие страницы и вправду можно считать страницами без трафика, а следовательно, не представляющими для SEO никакой ценности. Такие страницы ещё называются зомби-страницами (от англ. Zombie Pages) и, они как правило, подлежат удалению либо доработке.

Инструкция

Условимся, что наш целевой временной интервал — 6 месяцев. Тогда алгоритм нахождения страниц сайт без трафика с помощью Яндекс Метрики будет следующим:

1. Выгружаем из Яндекс Метрики (отчет «Содержание» — «Страницы входа») все страницы сайта, на которые количество было от 10 включительно за весь целевой временной интервал. Для выгрузки в XLSX формат выбираем «Данные таблицы» и далее XLSX (см. рисунок 1). Получаем соответствующий список страниц, сохраняем его в рабочую папку на компьютере.

2. На этом шаге нам нужно выгрузить все страницы сайта. Я использую для этой цели, а также для многих других seo-работ программу Screaming Frog. Можно, конечно, воспользоваться и списком страниц из sitemap.xml, если он, конечно, корректно генерируется, то есть выводит все актуальные страницы сайта.

Чтобы спарсить все страницы сайта, нужно ввести ULR главной страницы сайта в строку «Enter URL to Spider» программы Screaming Frog и нажать кнопку «Start». После завершения сканирования применяем фильтр «HTML». Далее удаляем из списка страницы у которых «Status Code» отличный от 200 (см. рисунок 2), то есть в списке должны остаться страницы сайта со «Status Code» = 200 .

Я также удаляю из списка страницы, которые закрыты от индексации, то есть со статусом «Non-Indexable» в столбце «Indexability» (см. рисунок 2) — обычно это какие-нибудь служебные страницы сайта или страницы пагинации.

Далее оставшийся список экспортируем в XLSX файл через кнопку «Export».

3. На этом этапе воспользуемся инструментом сравнения списков и сравним списки полученные на шагах 1 и 2 между собой. Я использую онлайн инструмент от WPNEW (вы можете воспользоваться любым другим — это не принципиально). Чтобы воспользоваться этим инструментом для наших целей нахождения страниц, которые посетило от 0 до 9 (включительно) юзеров, нужно:

• В правое поле (2 список слов) вставляем урлы из списка, который мы получили на шаге 1.
• В левое поле (1 список слов) вставляем урлы из списка, который мы получили на шаге 2.
• Выбираем опцию «Уникальные слова, которые есть только в первом списке» (см. рисунок 3).
• Жмём кнопку «Получить уникальные слова» и получаем урлы страниц без трафика.

Далее итоговый список таких урлов без трафика, которые можно считать малозначимыми, вы можете удалить с сайта либо закрыть от индексации в том случае, если планируете их в последующем доработать.

Обновление: иногда сервис от WPNEW глючит, поэтому в случае его неработоспособности можете использовать его аналог — компаратор слов от Букварикс.

Как быстро удалить страницы без трафика с сайта на CMS WordPress?

После того, как мы получили готовый список URLs страниц без трафика возникает вполне логичный вопрос, а как их можно быстро удалить с сайта. Следующий лайфхак актуален для сайтов на CMS WordPress.

Нам понадобится плагин «Bulk Delete«. Устанавливаем его. И далее заходим в «массовое удаление записей» и ищем здесь поле «по url» (см. рисунок 4). Вот в это поле и вводим список наших урлов (каждый в новой строке), которые нужно удалить с сайта.

Применяйте данный лайфхак и улучшайте ваше SEO!

Показываю простой способ, как вычислить страницы без трафика на вашем сайте. Когда знаешь что «не работает» — можно скорректировать текст, закупку ссылок и т.д. Полуавтоматическая работа.

Чтобы получить траф на эти «пустышки-страницы», попробуйте заказать Семантическое Ядро, которое покажет правильную структуру сайта и слова для перелинковки. Тогда и люди пойдут из поиска.

Для задуманного понадобится:

• Данные с Google Analytics
• Какой-нить софт, чтобы узнать URL всех ваших статей сайта
• MS Excel

Кратко алгоритм действий

Для начала выгрузим отчет по страницам входа и трафику на них за любой период с Google Analytics (GA).

Затем при помощи программы соберем все URL вашего сайта. Программу бесплатную подскажу.

Останется получить данные по кол-ву посетителей на каждую страницу вашего сайта, в чем поможет Excel.

Выгрузим статистику из Google Analytics

Заходим в «Страницы входа»

Выбираем отображение на странице нужное кол-во строк (можете выбрать максимум)

Сверху страницы находим «Экспортировать» и делаем это в Excel

Сохранили полученный файл куда-нить себе на компьютер.

Получаем URL всех страниц сайта

Для получения всех страниц сайта прекрасно подходит бесплатная программа Netpeak Spider. Ранее о еще одном нестандартном применении ее я рассказывал в этой статье.

Запускаем программу и дожидаемся окончания сканирования сайта

После чего выгружаем отчет с одним лишь параметром все в тот же файл Excel

В полученном файле можете почистить лишнее, если бот нашел то, что вы безуспешно прятали)

Объединяем полученные данные в один файл

Теперь откроем отчет Google Analytics и скопируем в новый файл Excel нужные нам столбцы. Нас интересует 1 и 4. Можно прихватить вместе со 2 и 3, либо удалить их, чтобы осталось только нужное.

Я «прихватил» все, чтобы информации на выходе получить чуть больше.

Как уже говорил, копируем эти данные в новый файл Excel на Лист1.

Открываем файл с информацией, которую вам спарсил по сайту ранее Netpeak Spider. Как видим, у нас URL сайта в абсолютном виде (присутствует название домена). А в отчете GA относительные ссылки. Приведем к общему виду.

В файле отчета Netpeak Spider выделяем свой домен, при этом / в конце домена не трогаем (должно остаться):

Нажимаем CTRL+F и заменяем автоматически название домена на пустое значение. Таким образом оно исчезнет автоматически во всех ячейках

Полученную информацию копируем полностью и вставляем в файл Excel на Лист2. Если помните, на Лист1 у вас информация из GA.

Используем формулу

Последнее, что осталось сделать, это получить на Лист2 напротив URL страниц вашего сайта соответствующее значение со статистики. Там, где не будет цифры (#Н/Д) с количеством посещений — это искомые статьи, куда к вам не заходят и нужно предпринимать какие-то меры по исправлению ситуации.

Скопируем себе на Лист2 в первую строку названия колонок с отчета GA (Лист1). Это для удобства

А теперь «королева вечера». Ее Величество, формула.

[sociallocker]

=ВПР($A2;Лист1!$A$2:$B$399; СТОЛБЕЦ();0)

[/sociallocker]

Здесь у нас фактически 2 переменные:

• $B — это колонки с Лист1, откуда мы хотим получить значение.
• $399 — количество строк на Лист1, из которых мы хотим получить данные. Выставляете свое значение

Итак, у нас есть на Лист1:

• $B — колонка «Сеансы»
• $C — колонка «Новые сеансы, %»
• $D — колонка «Новые пользователи»

В формуле мы и будем вставлять подходящую букву для соответствующей колонки. Ниже результат полученных данных по статистике захода на URL

Т.е. вставили формулу в первую ячейку нужного ряда и потянули вниз, чтобы она автоматически заполнила для других URL данные.

Смотрим наглядное видео по использовании формулы в Excel

Смотрите в высоком разрешении.

Дополнение

Следует учитывать, что трафа на страницу может не быть по причине того, что она не проиндексирована. Поэтому советую собрать «пустышки» в отдельный файл и прогнать программой YCCY.

Так же немаловажным фактором является время, когда статья попала в индекс и конкуренция. Т.е. смотрим на ситуацию под разным углом.

Итог

Благодаря формуле идет автоматическое сравнение URL по первому ряду и подстановка соответствующих значений в следующий ряды данных.

Надеюсь было понятно. Можно использовать и с другими счетчиками статистики.

Если используете другие методы вычисления страниц без трафика — буду рад перенять опыт. Напишите в комментарии.