Как найти молодые сайты в интернете

Наша цель — найти молодые сайты и проанализировать их. Посмотреть какие типы страниц и какие кластеры запросов растут, учесть это для проектирования нашей структуры, а также для расстановки акцентов при продвижении.

Разбираться будем на примере ювелирного агрегатора. У нас был список конкурентов, который мы ранее составили для нашей структуры, об этом подробнее читайте в статье — https://convertmonster.ru/blog/seo-blog/sozdanie-struktury-sajta-po-konkurentam/.

Выглядит этот список вот так:

Анализ сайтов конкурентов

Копируем этот список и идем в checktrust.ru. Создаем обычный проект, добавляем список из нашей таблицы в список анализируемых сайтов:

В следующем шаге отмечаем три пункта:

1. Дата регистрации домена по whois
2. SimilarWeb трафик с поиска
3. SimilarWeb посетителей

Подтверждаем следующий шаг, готово, переходим в проект.

Выбор молодого сайта для анализа

Нас интересуют молодые сайты, поэтому мы фильтруем их по дате. Это дата первичной регистрации сайта. Далее смотрим на определенное соотношение даты регистрации и количества трафика за месяц. Количества трафика делим на 30, получим соотношение посетителей в день, желательно чтобы это число превышало 1 тысячу. Возникает вопрос — до какого порога опускаться по возрасту? 2-3 года, предпочтительнее находить наиболее молодые сайты. Выбираем один из доменов. Больше всего нас интересует динамика сайта и трафика. Плагином SimularWeb смотрим динамику трафика по времени:

Проверка динамики роста трафика

Не всегда можно доверять этим данным, поэтому мы идем в semrush.com и проверяем выбранный домен здесь, вбиваем домен и смотрим по нему динамику. Видим, что динамика трафика положительная:

Это значит, что сайт можно анализировать дальше. Далее смотрим, какие страницы наиболее популярны и видим, что на главную идет больше всего трафика:

Это не очень хорошо, желательно находить сайты, на которых трафик больше рассаживается по внутренним страницам. Обращаем внимание на страницы, которые собирают больше всего трафика. В нашем случае это кольца, детские серьги, мужские печатки. На основе этих данных уже можно при проектировании структуры подумать о том, чтобы отдать приоритет нужным рубрикам и запустить их в производство первыми, для них первых готовить тексты. В идеале вы должны найти сайт, у которого отличная динамика и посмотреть, какие страницы у него быстрее всего растут.

Для контентных сайтов процесс происходит ровно также, мы анализируем страницы и рубрики, которые собирают больше всего трафика и на основе этих данных можем делать выводы о том, с какой семантикой лучше начать работать.

Таким образом, находим интересные кластеры запросов, которые мы можем добавить в структуру или, если мы уже их предусмотрели, просто сделать на них акцент при продвижении.

Закажите у нас seo-аудит и мы поможем Вам с созданием структуры сайта!

Получить предложение!

Подпишись и следи за выходом новых статей в нашем монстрограмме

Остались вопросы?

Не нашли ответ на интересующий Вас вопрос? Или не нашли интересующую Вас статью?  Задавайте вопросы и темы статей которые Вас интересуют в комментариях.

Получайте бесплатные уроки и фишки по интернет-маркетингу

Сейчас кризис, стоимость клика упала и соответственно доход. Что же делать? Давайте попробуем найти нишу, а если быть точней, то сайт у которого мало страниц в индексе, которому не больше года и посмотрим на его семантическое ядро. Поехали!

Открываем рейтинг сайтов LiveInternet.ru и получаем URL сайтов всех категорий. Получать URL я буду с помощью программы Content Downloader в которой есть «Сканер сайтов» для получения всех ссылок на странице, предварительно указав ему диапазон парсинга от 1 до 1000.

Весь парсинг занимает 3 минуты. В итоге мы получили около 30 тысяч доменов.

После того, как мы получили список сайтов, нам нужно узнать дату регистрации. Я это делаю с помощью программы RDS API.

После этого отсортируем столбец «Возраст» и сделаем экспорт в Excel файл, в котором удалим домены, которые появились до 2014 года и снова добавим в RDS API.

У нас осталось 870 доменов для исследования, которые были зарегистрированы от 1 января 2014 года.

В итоге, у нас есть данные о количестве страниц в индексе и возрасте сайта. Осталось узнать посещаемость, чтобы оставить только сайты с посещаемостью. Для того, чтобы узнать посещаемость доменов добавим их в программу Netpeak Checker.

Теперь осталось объединить Excel файлы из Netpeak Checker и RDS API, чтобы в итоге получить следующее:

С помощью фильтра удаляем сайты с посещаемостью менее 500 (можно и больше) и начинам исследование.

Данные о посещаемости:

• От 100 до 1000 — 180 сайтов
• От 1000 до 2000 — 138 сайтов
• От 2000 до 4000 — 95 сайтов
• От 4000 до 10 000 — 76 сайтов
• От 10 000 до 20 000 — 33 сайта
• От 20 000 до 60 000 — 18 сайтов
• От 73 000 до 79 000 — 3 сайта
• Более 100 000 — 1 сайт
• Более 400 000 — 1 сайт

Последние два сайта — это политические новости.

Это данные SimilarWeb.com по сайту «Русская весна», который был создан по данным RDS API в марте 2014 года. Данные говорят сами за себя. Политика — горячая тема, но не каждый захочет с ней связываться, да и трафик здесь не поисковый — будет тяжело монетизировать.

Нам такие сайты — не подходят. Поэтому продолжаем открывать сайты по очереди и смотреть данные по структуре его трафика. Чтобы не делать поиск вручную — можно использовать SimilarWeb API (напишите сами или закажите у программиста). После регистрации в качестве разработчика — вы получите API-код. С примерами запросов вы можете ознакомиться на этой странице — https://developer.similarweb.com/doc. На странице выберите «Rank and Reach API».

Обновление от 24 февраля: Не знаю, совпадение это или ребята из RDS API прочитали пост, но сегодня в RDS API появилась возможность смотреть процентное соотношение трафика по данным SimilarWeb.com для трафика из поиска, социальных сетей, прямого трафика и т.д. Класс! Стоимость проверки 100 сайтов — 10 центов.

Когда найдем тот, у которого доля поискового трафика будет составлять более 50% можно приступать к следующему этапу.

Теперь одно из самых интересных — просмотр запросов по которым сайт продвигается и сколько трафика он по каждому запросу получает. Для просмотра запросов по которым сайт находится в TOP20 я использую advodka.com.

Я нашел достаточно много интересных сайтов, которые стоит изучить, но рассмотрим только один — на не коммерческую тематику, сайт про … котиков! Сайт murkote.com создан создан в июле 2014 года и на начало февраля 2015 года имеет посещаемость 7000 посетителей в сутки. В индексе Яндекса 485 страниц.

Вставляем URL в сервис и видим следующую картину:

Сайт по 8 тысячам запросов находится в TOP20 Яндекса и 6 тысячам в Google — это достаточно прилично, я считаю. Еще крутится по 2 запросам в Директе, скорей всего для улучшения ПФ.

Теперь самое интересное — смотрим эти самые 8 тысяч запросов и узнаем самые популярные запросы:

Сервис показывает позицию сайта по запросу, частотность, стоимость клика в Директе и процентное соотношение трафика. Используя эти данные можно быстро рассчитать примерный доход с такого сайта и решить, стоит ли делать подобный или нет.

После этого открываем сервис Ahrefs.com и смотрим ссылки на данный сайт:

Сервис показал всего 462 беклинка, большая часть из которых с адресом сайта в качестве анкора.

Проделываем все это для всех сайтов, которые мы нашли и выбираем один или несколько сайтов, которые будем делать.

Шаги:

1. Парсинг ссылок с рейтинга Li.ru
2. Просмотр возраста сайтов и количество страниц в индексе через RDS API
3. Просмотр посещаемости через Netpeak Checker
4. Просмотр запросов по которым сайт получает трафик через advodka.com
5. Просмотр ссылочной массы через ahrefs.com

Вот вроде бы и все. А как вы ищите интересные сайты для анализа?

Обновление: У сайта из примера была склейка со старым сайтом, но это не меняет сам принцип поиска. Надо только предварительно проверять на склейку.

1. 	30.10.2013 06:08
   	Здравствуйте, уважаемые форумчане. Честно говоря, не знал как правильно назвать тему, поэтому, назвал как посчитал правильным:) Итак, хочу рассказать, как можно быстро найти молодые сайты, собирающие неплохой траффик. Скрытый текст (вы должны войти под своим логином или зарегистрироваться и иметь 50 сообщение(ий)): У вас нет прав чтобы видеть скрытый текст, содержащийся здесь. На этом всё, откланиваюсь и готовлюсь к здоровой критике:)
   25
   Спасибо сказали: Ailton(23.12.2013), buninsan(06.02.2016), Dezm(17.03.2015), DOleg(16.12.2013), Drummo(06.11.2013), feuer81(17.03.2015), GOODPower(25.02.2016), izograf(16.12.2013), Kiwikov(16.12.2013), klassman(23.12.2013), marshel(16.12.2013), milanfan1993(05.11.2013), monsterteam83(01.11.2013), NightHawk(16.12.2013), ohmygod(30.10.2013), OneShot (30.10.2013), Rlove(27.04.2014), ROMASA464 (31.10.2013), seoalb(16.12.2013), SEOrush(17.03.2015), STRIJ(30.10.2013), vefaro(29.12.2016), zhurik(01.11.2013), Вадим(19.09.2015), Гендальф Серый(16.12.2013),

2. 	30.10.2013 06:12
   Banochkin.com Репутация: 91 Webmoney BL: ?	а не лучше самому находить интересные для себя тематики и уже по ним собирать траф, чем плодить конкуренцию по тематике, выбранной случайно? Banochkin.com — веду блог, создаю и продвигаю сайты. Контакты.
   0

3. 	30.10.2013 06:14
   	Я показал пример на первом сайте, с открытой статой, ни кто не мешает сделать сортировку по своей теме и уже там искать.
   1
   Спасибо сказали:

5. 	01.11.2013 13:57
   Adio Репутация: 1120 Webmoney BL: ?	monsterteam83, небольшой совет на будущее-для благодарности существует специальная кнопка, не стоит набивать посты подобным образом, ни к чему хорошему это не приведет.
   2

6. 	16.12.2013 01:17
   Дипломник Репутация: 10 Webmoney BL: ?	Сообщение от monsterteam83 Благодарю за статью ахахах, за какую статью спасибо? там хайд 50 сообщений, ты даже не можешь видеть ее
   0

7. 	16.12.2013 01:25
   Дизайнер года Репутация: 741 Webmoney BL: ?	Отличный способ отрывать ВЧ НК запросы, спасибо, пошел пробовать Боже!) Ты просто красавчик, я себе такого трафа нарыл) Последний раз редактировалось Kiwikov; 16.12.2013 в 01:46. Качественный дизайн сайтов от 70$ — Профессиональный дизайн для Вас и Ваших клиентов!
   0

8. 	16.12.2013 01:51
   Опытный Репутация: 152	Жаль, что такой способ завязан исключительно на ссылочной бирже, если молодой сайт собирает приличный трафик, то ни лучше ли его и монетезировать? Зачем ещё в биржу загонять, когда тиц 10 всего навсего. А если загоняют, значит такой траф им не особо нравится. Имеет ли смысл подобный сайт «копировать»? Юзаю этот хостинг с приятными ценами
   0

9. 	16.12.2013 02:09
   Дизайнер года Репутация: 741 Webmoney BL: ?	Сообщение от NightHawk копировать Почему копировать? Это один из отличных способов собрать трафик. Сообщение от NightHawk Зачем ещё в биржу загонять, когда тиц 10 всего навсего. А если загоняют, значит такой траф им не особо нравится. или из-за незнания Качественный дизайн сайтов от 70$ — Профессиональный дизайн для Вас и Ваших клиентов!
   1
   Спасибо сказали:

10. 	16.12.2013 04:01
    Дипломник Репутация: 26 Webmoney BL: ?	Сообщение от NightHawk Имеет ли смысл подобный сайт «копировать»? Возможно человек просто не умеет монитезировать сайт по другому, если хорошо подумать, можно сконвертировать любой трафик.
    0

Нередки случаи, когда свежий домен с возрастом до полугода приходит на продвижение и требует положительной динамики уже после первых двух апдейтов. Давайте разберемся, какие ситуации с молодыми сайтами могут застать врасплох SEO-специалиста.

Типичные ошибки и подводные камни при продвижении молодых сайтов

1. Доля высококонкурентных запросов превышает 15 % от всего ядра. 

2. Отсутствие минимальной работы с юзабилити сайта. 

3. Отсутствие низкочастотных запросов в ядре.

4. Отсутствие внятной структуры материалов на сайте, продвигаемые страницы находятся более чем в трех кликах от главной страницы.

5. Отсутствие «вменяемых» url-адресов.

6. Покупка огромного количества ссылок.

7. Малая коллекция релевантных документов.

8. Отсутствие оптимизации текстового содержимого.

Некоторые нарушения способствуют очень медленной индексации вашего сайта, потому что поисковой системе попросту «нечего индексировать», т.к. содержимое сайта не обновляется.

Подробно об ошибках и подводных камнях ниже.

Определение целей, задач и способов продвижения

Молодые сайты богаты на сюрпризы, поэтому перед определением целей следует тщательно проверить веб-ресурс в целом, проанализировав страницы на наличие нарушений лицензии на поиск Яндекса. Плюсом будет, если сайт еще не попал в индекс. В таком случае вероятность попадания под фильтры практически равна нулю.

К нарушениям относятся следующие аспекты:

1. Скрытое содержимое: 

· ссылки;

· тексты;

· заголовки;

Скрытое содержимое подвергается удалению подчистую.

2. Слабо и/или плохо видимые тексты

Слабая видимость содержимого «лечится» подложкой, отличной от цвета текста.

3. Неуникальные тексты и дублирующийся контент

Неуникальные тексты – переписываются и/или удаляются.

Если все же временно остались некоторые страницы с неуникальными текстами, их следует закрыть в файле robots.txt.

4. Структура материалов и url 

· Продвигаемые страницы должны находиться максимум в двух кликах от главной страницы.

· Каждая страница должна занимать свое логичное место в общей структуре документов.

· Url-адреса страниц должны легко восприниматься.

· Необходимо наличие поиска по сайту и одного-двух инструментов отбора товаров.

5. CMS и дизайн

Если сайт сделан на бесплатной CMS, а шаблонный дизайн часто встречается на других сайтах, то движок следует заменить в ближайшее время на более функциональный.

На бесплатных движках не получится выполнить минимум необходимых для продвижения

доработок по технической оптимизации. Также можно забыть о разработке дополнительных инструментов.

Прежде чем приступать к выбору стратегии продвижения, следует избавиться от явных нарушений, если они имеются. Делать все это надо как минимум потому, что ни одна поисковая система не оповестит вас о том, что на сайт наложены санкции.

Первые шаги для эффективного продвижения молодых сайтов

Далее изучаем структуру сайта и вносим корректировки в нее и в основное меню, если необходимо. Следует обязательно подключить навигацию «хлебные крошки» – она поможет избежать медленной индексации, как бывает с большинством молодых сайтов.

Каждый товар должен находиться в своей категории или группе, а информационные страницы должны быть отделены от коммерческой половины сайта. Также стоит проверить сайт на отсутствие вредоносного кода с помощью инструмента «Яндекс.Вебмастер».

К этому моменту продвигаемые запросы уже разгруппированы для страниц.

После того, как на сайт размещены необходимые тексты, можно выбрать стратегию продвижения.

Любая стратегия продвижения начинается с добавления сайта в индекс. Стоит учесть особенность продвижения молодых сайтов – не надо пытаться продвигать высококонкурентные запросы.

Конкурентность определяется как значением спроса в регионе, так и процентным соотношением главных страниц в выдаче по проверяемому запросу. Высококонкурентные запросы плохо сочетаются с молодыми сайтами в крупных регионах, от них следует временно отказаться.

Как только главная страница сайта добавлена в очередь на индексацию с помощью инструмента «Яндекс.Вебмастер» и сайт ожидает посещения его роботом, необходимо сделать геопривязку сайта. Для этого в инструменте «Яндекс.Вебмастер» следует указать регион, к которому принадлежит сайт, и страницу контактов, содержащую подтверждение выбранного региона. Контактные данные должны быть уникальными и действительными!

В инструменте «Яндекс.Справочник» необходимо создать карточку организации. В процессе добавления организации нормально, если заявка рассматривается более недели.

После успешной индексации и двух апдейтов с учетом привязки региона происходит следующее.

У сайта появились позиции, а вместе с этим будут появляться посещения и заведется минимальная поведенческая история.

В процессе ожидания позиций может потребоваться на 1-2 апдейта больше предполагаемого периода, т.к. изменения проиндексировались, но не отранжировались. Это нормально.

Теперь настало время закупки ссылок. Идеальными донорами для молодого сайта будут некрупные новостные блоги и социальные сети.

Покупать ссылки можно на любые страницы, кроме тех, что закрыты в robots.txt. Как минимум 70 % от общего числа должны составлять «естественные» ссылки (те, которые в качестве анкора содержат указательные слова: «здесь», «тут», «на этом сайте» и т. д.).

Постепенное наполнение закрытых в файле robots.txt страниц и удаление строчек из файла позволит расширять коллекцию релевантных документов.

Оценка результатов и корректировка дальнейших работ

После грядущих 2-3 апдейтов (около двух, максимум трех недель) можно получить кое-какие результаты в виде повышения позиций. Именно тогда следует выбрать стратегию. Работать с имеющейся аудиторией, которая будет увеличиваться малыми долями за счет небольшого роста позиций или целенаправленно увеличивать трафик.

Увеличивать трафик можно за счет нескольких методов: 

· расширение коллекции документов; 

· добавление разделов FAQ, «Вопрос-ответ» и проч.; 

· покупка ссылок с тематических ресурсов (естественных ссылок на этом этапе должно быть около 20-30 %); 

· обмен ссылками с партнерами;

· регистрация сайта в Яндекс.Каталоге. 

За счет ссылок будут расти показатели ТИЦ и PR, если ссылки, конечно, размещаются на тематических донорах и успешно индексируются.

Настало время анализа поведенческих факторов. Для этого прекрасно подойдет Яндекс.Метрика.

Для начала проанализируйте карту кликов и путь перемещения пользователей. Элементы, по которым не совершают кликов, стоит удалить.

Также можно заменить их более популярными или просто переместить в другое место. Страницы, с которых уходят, следует сравнить со схожими страницами конкурентов и добавить те же полезные блоки, каких у вас не было (витрины, фотокаталоги, цены, инструменты расчета и т. д.).

То же касается и страниц с высоким показателем отказов.

Например, добавление витрины с дачными участками дало следующий результат:

Страница ранее:

Страница сейчас:

Рост позиций после добавления витрины, ее индексации и ранжирования.

Особенности продвижения молодых сайтов

1. Ссылки

В то время как на обычный сайт закупается огромное количество ссылок с минимальной долей «естественных», для молодого следует придерживаться правил:

· При покупке ссылок делать больший упор на «естественные ссылки».

· В первый месяц не стоит покупать ссылки на только что созданные для продвижения страницы.

· Ссылки следует покупать не только на продвигаемые страницы. 

2. Контент

В то время как на обычном сайте все страницы заполнены текстами, а новые пишутся в основном для раздела статей, для молодых сайтов следует придерживаться правил: 

· Расширение коллекции документов.

· Наполнение пустых страниц.

· Рерайт неуникальных текстов. 

3. Структура и юзабилити 

На сайте «с историей» уже есть четкая структура, полезные инструменты и учтены все необходимые аспекты юзабилити. А вот для молодого сайта следует учесть следующее: 

· Хлебные крошки должны описывать расположение каждого документа так же, как и url-адрес страницы с документом.

· Ссылки на самые интересные для продвижения страницы должны быть на главной странице.

· На сайте должен быть минимум самых необходимых инструментов, например, поиск по сайту.

Если запросы выбраны удачно (отсутствуют высококонкурентные запросы), а все советы учтены и сайт индексируется, собранные данные за неделю или месяц дадут отличное представление о вашем сайте. Вы сразу поймете, с чем нужно работать!

можно как-то так:

1) качаем тут или где-то еще (по ссылке только ru, su и рф, другие зоны тоже думаю можно где-то найти) список доменов за нужный период

2) вставляем список в Screaming Frog SEO Spider, или любой аналог типа Netpeak Spider, в общем сканер сайтов, где есть возможность сканировать список сайтов, а не тупо один сайт (в Screaming Frog эта опция называется list mode)

3) сканируем. тут лучше запастись компом и интернетом помощнее. у меня на слабеньком ноуте месячную дозу ру-доменов сканирует за несколько часов насколько помню. побольше потоков ставьте (в пределах разумного) и авторизацию на сайтах отключайте чтобы окна не вылазили. глубину ставил 1 вроде как. чтобы не зависало надо в файле ScreamingFrogSEOSpider.l4j в папке программы поставить ей побольше оперативки. в общем с настройками если немного поиграться то все ок будет) Netpeak по идее быстрее сканирует но дорогой он

4) ждем пока просканируется

ice99:
Ну, спарсить то я спарсил, получил домены в столбик. Ну, могу экспорт сделать в csv.

А как автоматически почекать возраст доменов?

есть же проги типа Netpeak checker и разные онлайн-сервисы