Обычно на свой блог я пишу то, что мне нравится или интересно. Сегодня я хочу рассказать о том, что мне интересно, но не нравится – об нескольких тысячах новостных дорвеев. Они мне ничем не мешают и вроде бы пускай бы жили, кому до них какое дело. Но они мне не нравятся и поэтому я их покажу вам.

Таких дорвеев я нашел тысячи. Вот несколько штук для примера:

  • sivan.in.ua
  • ca9.com.ua
  • www.torrentmsk.ru
  • immit.ru
  • www.sadek.com.ua
  • komento.ru
  • torcell.ru
  • plass.in.ua
  • twiglo.com.ua
  • www.metamex.ru

Структура главных страниц максимально простая:

  • Нерабочая форма логина/регистрации.
  • Некликабельный логотип, но у каждого дорвея он уникальный, как и фавиконка
  • Блок со спаршенными видео
  • Блок со спаршенными новостями
  • Несколько банальных приемов перелинковки
  • Карта сайта
  • Блоки с тизерами

На внутренних страницах тоже ничего особого нет, все тоже самое, кроме контента. Контент на странице новости представляет собой спаршенные сюжеты из Яндекс.Новостей. Заходите, к примеру, на страницу новостей политики news.yandex.ru/politics.html, кликаете по любой новости и попадаете на страницу сюжета. Под первыми 3 сообщениями в сюжете будет кнопка «Развернуть все сообщения». Весь контент, что вы видите на странице после нажатия на кнопку и парсится на эти дорвеи.

На эти доры парсится всё подряд из новостей – любых тематик и языков. Есть русские новости.

«Россия — священная наша держава,
Россия — любимая наша страна.»

Есть и украинские.

«Ще не вмерла Украіна,
И слава, и воля!
Ще намъ, браття-молодці ,
усміхнеться доля!»

А есть немецкие и английские. Поскольку мало кто знает мелодию гимна Великобритании, давайте лучше вспомним гимн Украины еще раз:

«Ще не вмерла Украіна,
И слава, и воля!
Ще намъ, браття-молодці ,
усміхнеться доля!»

Ссылки на источники новостей в сюжетах остаются, но реализованы через внутреннее перенаправление. Такой себе – новостной дорвей агрегатор. Есть еще раздел с видео, куда тоже какой-то рандом заливается, но там кроме заголовков ничего и нет больше.

Доменные зоны разные, чего только нет. Структура URL шаблонная, но не одинаковая. Можете посмотреть сами как реализованы URL внутренних страниц на разных сайтах. Есть даже кнопки для репоста в социальные сети (а на вашем СДЛ до сих пор нет))000).

IP все уникальные, но расположены на одном сервере.

  • 92.253.200.139
  • 92.253.200.134
  • 92.253.200.117
  • 92.253.200.124
  • 92.253.200.142

Сохраним скриншот главной на будущее, вдруг кому пригодится (кликабельно).

И сам дорвей (главная + внутренняя), тоже сохраним, чтобы можно было скачать.

Батя Google это творчество не оценил – вся сетка в бане. А вот сучке Яндексу – это по нраву. Большинство проверенных мною примеров сидят в индексе по 4-5к страниц каждый.

Трафик собирается по новостным запросам из поиска. К примеру, вы где-то на улицах Киева услышали, что в Украине теперь российский гимн государственным стал и полезли в Яндекс искать инфу по этому поводу. А там как раз на вашем родном языке, на русском, все написано — на доро-агрегаторах. И пару тизеров заодно с Жанной Фриске с историей её успеха.

Один такой сайт за время жизни приносит 50 000 — 100 000 хостов трафика. В среднем, 100 в день. Возможно, раньше дела шли лучше, ну а сейчас пока так. 100 000 * 1 000 = 1 000 000. Один миллион трафика с сетки в 1к сайтов. И мне подсказывают, что для этих ребят 1к доров это пыль.

Комментарии, как всегда, открыты и без премодерации, так что Welcome Back.