Как с помощью Yahoo Pipes быстро вывести лгунишку на чистую воду?

27.08.2010

Давно я про Yahoo Pipes не писал, да? Ну вот, подвернулся хороший повод, отличный пример, как можно применить трубы для нестандартной задачи быстрого сбора интересной статистической информации.

Я иногда почитываю топсэйповский ридер и вот сегодня наткнулся на смешной самопиар плагиатора Шепелева, мимо которого просто не смог пройти :) Любопытно же! Неужели правда конкурент мой нерадивый достиг таких высот и у него в сутки по 700 строчек покупают?

Сергей Шепелев лжец. Мальчик совсем заврался, бедняга

Добыча информации

Итак, чтобы проверить нашего подопытного на True/False, необходимо обладать статистикой. Из того, что система Nolix может нам дать представляет интерес количество рекламодателей для каждой площадки, URI которых в системе представлены как http://nolix.ru/site/N, где N на данный момент не более 467.

Быстренько собираем трубу для парсинга отдельной такой страницы. Выглядит эта трубка примерно так (а выше ссылка на саму трубу):

Труба парсера Ноликса изнутри

Но сайтов довольно много, значит этот парсер надо как-то автоматически дёргать. Напишем ещё обёрточку для предыдущей трубы, на вход которой мы сможем подавать некоторое количество идентификаторов, разделённых запятыми а на выходе уже получать все интересующие нас данные. Нет проблем, эта труба ещё проще!

Массовый парсинг ноликса через Yahoo Pipes

Но, естественно, какими бы крутыми ни были Yahoo Pipes, одновременно 400 запросов они не позволят сделать через себя, труба завяжется узлом :) Поэтому для вызова обёртки напишем несколько строчек на PHP, а потом останется лишь запустить скрипт в браузере…

Вот и всё, напарсилось за три минуты.

Всё, информация получена! Менее чем за две минуты я опросил все страницы площадок в «Ноликсе» и снял с них информацию. На скриншоте видно, что браузер после 20 циклов редиректа немного смущается, но за 20 циклов опрашивается 200 страниц, так что пара подзатыльников и FireFox легко выполняет задачу почти на полном автомате.

Итак, смешное разоблачение лжеца

Напоминаю слова Шепелева:

Вчера состоялся мини-рекорд по количеству размещений рекламных строк в день на сайтах системы Nolix — 784 размещения за сутки. Это ли не повод добавить хороший сайт в систему?

Конечно, надо же предоставить потенциальным лохам клиентам побольше поводов, а то хороших сайтов в системе явно дефицит, в основном жуткий шлак с посещаемостью полторы калеки в месяц.

Так вот, мой эксперимент показал, что во всей системе на данный момент в ротации всего лишь чуть более 330 рекламных строк. Во всей системе.

У кого есть мозг уже всё поняли, а остальным рекомендую всё же попытаться поразмыслить над тем, как при таких условиях мог получиться упомянутый лгунишкой «мини-рекорд».

Впрочем, Шепелев врёт и не краснеет, наверняка придумает отмазку. И я не удивлюсь, если в комментарии поналетят его защитнички с аргументами типа «да ты просто завидуешь» и «пацан к успеху идёт» :)

Ещё информация для размышления

Всего в системе Nolix 257 сайтов, но среди них лишь владельцы 95 могут похвастаться рекламодателями, причём 29 из них довольствуются всего лишь одним рекламодателем. Реальность особенно красиво сочетается с бравадой Шепелева:

Nolix получает все большую популярность, с системой работают крупные и даже очень крупные площадки, рекламодатели стали регулярно пользоваться специально отведенным для них инструментом массового размещения рекламных строк, веб-мастера выводят деньги ежедневно…

Просто слёзы умиления катятся по моим суровым щекам! :-D

Вообще, поражаюсь, конечно. Да, часто доморощенные маркетологи сильно приукрашивают действительность, начитавшись книжек типа великих продавцов. Но так беспардонно врать как делает это Шепелев умеют считанные единицы. Так что мы видим своего рода уникум, талант этакий.

А среди сапёрчиков, похоже, много полнейших лохов, которых легко и просто разводить, чем и пользуются деятели вроде Шепелева. Лохи заглядвают лжецам в рот и радостно плюсуют их посты (да, конечно я завидую). Вам нравится, когда вас считают идиотами и вешают жидкую лапшичку на уши? Тогда продолжайте верить. И я уверен, Серёжик придумает для вас ещё много увлекательных сказок.

В том числе и поэтому сообщество тех, кому не хватило всегда будет состоять большей частью из вебмастеров третьего мира, гордых владельцев говносайтов всех мастей. Я не представляю, что может заставить серьезного сайтовладельца воспользоваться такой системой с таким хозяином и такой атмосферой.

Если и есть тут случайно затесавшиеся добротные толковые сайты, они явно чувствуют себя в этом окружении как лебеди, попавшие каким-то чудом в грязную лужу со свиньями.

Список сайтов c Nolix на одной странице

Скрипт мне выплюнул табличку, а я её закинул на гуглодоксы.
Вот эта табличка — изучайте, если интересно.

P.S. Инструменты для проверки эксперимента

Кстати, я там выше не написал, но для надёжности и контроля я провёл полный цикл парсинга три раза (извини, Серёжик, за трафик) — результаты полностью совпали.

P.P.S. Если поправите пару строчек в скрипте, сможете получить и полный список рекламодателей с URLами и текстами ссылок. Там занимательные перлы иногда попадаются :)

P.P.P.S. А после другим человеком был раскрыт и другой обман Шепелева. Думаю, это уже неисправимо, человек лжёт постоянно, стиль жизни такой.

Есть вопросы?

  1. # СОДА

    вводи категорию ненависть или баттхёрт :)

  2. #  Тормоз

    Ненависть — слишком серьезное чувство, мало кто его достоин :) Это так, цирк да и только.

  3. #  art

    o_O меня пощитали!

  4. # snakeweb: 

    Прикольно, ну вранье тоже бывает полезно в рамках бизнеса, когда нет тех кто может проверить твои слова :)
    Тормоз – молодец!

  5. # Ivseo

    Только твое разоблачение сыграет nolix‘у только на руку. Черный пиар тоже пиар ;)

  6. # webproektov

    Согласен с предыдущем оратором. Зачем тебе, как основному конкуренту ноликса, поднимать вокруг него шумиху?

    К тому же ты критикуешь не продукт, а фактически методы его продвижения. Создаешь на ровном месте pr конкуренту :) Если автор ноликса не дураг, он без особых напрягов сможет обратить твою статью себе на пользу.

  7. # x007xx36

    Тормоз, красава!!! как надоели самопиарщики, ппц. Хоть кого то вскрыли.

  8. # Евгений: 

    О блин, сайт некого Арт которого посчитали нехрена не работает. Называется кстати, donothing. Вот ничего и не делает.

    Про ПР выше замечено правильно, но не точно. Все же если говно продукт есть говно продукт и серьезные люди это узнают, а серьезные люди обычно проверяют, то не пойдут туда а пойдут в нормальную систему. Как то так.

  9. # Андрей: 

    Положили парню блог :) Видимо трубами задергали

  10. # Shepelev

    Дружище, спасибо за статью. Почему в ней нет ссылки на Nolix?

    Сейчас крутится около 500 сток, ну да не суть.

    Твои расчеты были бы ~верны, если б рекламные строчки не имели свойство откручиваться :) Ты видимо не в курсе, как это работает (на сайте nolix.ru можешь об этом почитать. :)

    p.s. жду обязательно активную ссылочку, чего такому великому разоблачению пропадать :)

  11. # Бутылк.Ус

    Тормоз…
    Меняй ник на Садиста =) Такого препарирования информации я еще не видел!
    Тебе бы в СМИ с твоими талантами! Цены тебе не будет как аналитику =)
    Это никакой не баттхёрт, это качественный и профессионально-садисткий удар ножом в голову со спины! =)

  12. # Бутылк.Ус

    Шепелев, уйди… Ты мне не раз уже на глаза попался. И поверь, это не примелькавшийся бренд, это, скорее, случайная кучка говна, которая может валяться на любой дороге в мире.
    Я тебе говорю как действительный красндопиломный профессиональный менеджер – методы твои даже непроффесионалы считают УГ, выводят на чистую воду программисты-самоучки, лохи стремительно умнеют…

    Хотя, пожалуй, дуй-ка ты на сёрч. Топи его со всеми школьниками окончательно.

  13. # Alex: 

    Ну вот я владелец DAOS. Что я вижу. В nolix’e уже давно есть режим гарантированных показов – в DAOS – нет.

    О потерях объяв в DAOS говорят все и с этим столкнулся, например, я.

    В nolix судя по блогам такой проблемы нет, тем более я думаю он все-таки не на файлах.

    При этом комиссия в ноликсе не высокая, если бы я не купил даос полгода назад, я бы сейчас выбрал бы nolix.

  14. #  Тормоз

    Твои расчеты были бы ~верны, если б рекламные строчки не имели свойство откручиваться :)

    Ну конечно-конечно, 784 строчки у тебя купили и больше половины открутились за несколько часов, ведь «Nolix получает все большую популярность, с системой работают крупные и даже очень крупные площадки» :-D Кто бы сомневался.

    Ну вот я владелец DAOS. Что я вижу. В nolix’e уже давно есть режим гарантированных показов – в DAOS – нет.

    А в Daos он изначально не предполагался вообще-то. Вы описание перед покупкой не прочитали? Да, это была моя ошибка и режим появится, но вообще-то я его не гарантировал никому.

    И ещё, Alex, пожалуйста имейте в виду, что все ссылки не на личные странички в моём блоге считаются спамом. Если бы не критичный характер комментария, я бы просто забанил вас, но ведь вы посчитали бы, что я заблокировал за критику. Пока удалил ссылку, в следующий раз не ставьте её такую сами, ОК?

    При этом комиссия в ноликсе не высокая, если бы я не купил даос полгода назад, я бы сейчас выбрал бы nolix.

    10% — не высокая? Посчитайте, за какое время вы потеряете эквивалент стоимости Daos. Если у вас популярный интересный сайт, удивитесь, как быстро это будет происходить. И вы будете терять эту сумму регулярно, причём будете полностью зависеть от системы.

    Да, в некоторых случаях аренда предпочтительней владения, но вы точно уверены, что случай с Daos и плагиатором Nolix один из них?

  15. # Sam

    Лучше бы фичами мерились, а не воевали ;)

  16. # Pensioner

    Не понял насчет «развода лохов»: ноликс стоит, обьявы крутятся, деньги платятся.
    Значит все ок для меня.
    А говно или не говно мой блог- решает рекламодатель, и Шепелев точно не может на него повлиять.

  17. # Кемеровский

    Тормоз, не умоляю заслуг Даоса и Ноликса, и не вступая в полемику и критику обоих проектов, выскажусь:

    Комиссия 10% – не большая. Ты сравниваешь ее со стоимостью своего Даоса, а нужно сравнивать с существующими биржами траффика либо ссылок.

    Я говорю о том, что нужно сравнивать продукты, и биржи отдельно. И сравнивать комиссию Ноликса и стоимость Даоса – некорректно.

    Среди бирж, например, комиссия 10% – это сущие копейки.

  18. # Pensioner

    Если комиссия 10% в ноликсе, то чтобы отбить замену его на даос нужно заработать 500 баксов. При средней цене 2$ за тысячу показов, это 250к трафика.
    К примеру, блог с тысячей просмотров в день будет выходить в ноль 8 месяцев при постоянном наличии рекламодателей.
    Я все правильно понимаю?

  19. # che: 


    Твою бы энергию, да в мирное русло. Потратил бы на какой-нибудь проект с теми же трубами.

  20. # Alex: 

    10% — не высокая? Посчитайте, за какое время вы потеряете эквивалент стоимости Daos. Если у вас популярный интересный сайт, удивитесь, как быстро это будет происходить. И вы будете терять эту сумму регулярно, причём будете полностью зависеть от системы.
    ___
    Вот конкретно сейчас я по DAOS теряю, например, из-за возврата денег рекламодателям после сбросов и полностью завишу от вашего желания, а чаще нежелания развивать продукт.

    Историю с закладочником помните? Там ближе к концу пробивалось дай бох, если 10%.

  21. #  Тормоз

    Что значит «после сбросов»? И сколько их у вас было? Можете показать на каком сайте стоит Daos?

    Email, под которым вы пишете здесь у меня вообще нигде не зарегистрирован.

    И про «Закладочник» давно пора забыть — он отработал на славу, надеяться на вечную поддержку было бы глупо (тем более, я её вообще никогда никому не гарантировал).

  22. # Alex: 

    Конкретно у меня на сайте с посещаемостью до 50 человек в день – сбрасывалось один раз. При этом используется он 2.5 недели.

    У меня есть и другой сайт, где около 3000 просмотров в день. Вот туда ставить DAOS я даже не стал – понимал, что замучают сбросы.

    Вы сейчас так пишете, как будто считаете, что я вам просто нагадить в комментах хочу. Поверьте это не так, хотел бы – выложил бы ваше творение на нульде.

  23. #  Тормоз

    Я повторяю свой вопрос. На каком сайте использовался/используется Daos? И на какой email вы совершали покупку?

    Мне по любому самому ничтожному поводу пишут клиенты, но что-то от вас письма не помню, вы только в комментариях что-то активизировались. Странно.

  24. # TRS

    Alex, у меня при стабильных 5к просмотрах в день все работает отлично.
    Сбой был только один раз, но я быстренько восстановил все из бэкапа.

    Тормоз, на каждый товар найдется свой покупатель)

    п.с. про отзыв я все помню!)

  25. # HoldFast

    Все равно, ты сосешь, а Шепелов деньги получает.

  26. #  Тормоз

    TRS, да это засланный казачок, уже ясно. В базе клиентов нет, письма нет, на простой вопрос ответить не может.

  27. # : 

    вот как проекты рекламить без палева надо :))

    www.nulled.ws/showth…

  28. # Macro: 

    Прив! Глянь сюда
    www.maultalk.com/top…#

    думаю тебе интересно будет :)

    Кстати у меня brokenbrake.ru ,надо будет на что- нибудь махнуться.

  29. # jkeks

    уважуха Тормозу.
    Просьба:
    Пожалуйста поанализируй еще и топсапу на предмет наличия в ней лучших. Ну вообщем какой-нибудь зажигательной статистики.
    Спасибо тормозу. Мне бы писать такие посты. А вот мне пофиг сколько там в базе у нолика, мне нравится идея и реализация, кстати для юкоза прикручивается.

  30. #  Тормоз

    Macro, отлично! Лгунишка везде где только мог засветился и ещё ему совести хватает отмазываться. Впрочем, мне с ним сразу всё ясно было.

  31. # poru4ik

    Почитал статью, в чем смысл? убрать конкурента? Так он никуда не денется, а исправит ошибки ИМХО :) На мой взгляд времени потрачено много, которое можно было бы реализовать с гораздо больше для себя пользой. Хотя, у всех свои тараканы в голове.

  32. #  Тормоз

    Что значит «исправит ошибки»? В мозгу подкрутит лживый модуль? Смысл в том, что я всё равно из любопытства проводил этот анализ, так почему бы его не опубликовать? Да и слишком доверчевых людей предостеречь, чтобы не верили всему подряд.

  33. # Арго: 

    Че за срач? Это недостойно.

  34. # Alex Pro

    Мда, глянул я на тот список, что ты выложил на гуглдокс – на таких сайтах трафика не собрать.

  35. # 32symbols

    Первый раз о Шепелеве услышал из блога Усатого, почитал его личный блог,
    просто брр

  36. # nihontour

    Думаю не стоит «лжецу» посвещать всю статью и время потраченную на разоблачение. Рано или поздно люди поймут. Этим должны заниматься SE.

Комментирование этой статьи закрыто.

Интересное Покупки ТехникаРазное Отдых Статьи Строительство Услуги Общество Хобби Культура Советы Уют