В друзьях у ботов

Тут капитан очевидность Евгений Чупрунов сделал наброс про ботов в блоге губернатора. Печально, но наброс основан на голословных утверждениях и мутных примерах. Это ведь не радио и не телевидение, где размер и активность аудитории зависят от фантазии считающего. Это интернет — тут все штуках. Вот и боты тут в штуках, и по моим оценочным оценкам :), как минимум — 962 из 1602.

Для того чтобы быстро вникнуть в первопричины, рекомендую почитать этот короткий пост.

Анализ пользователей livejournal добавивших в «друзья» губернатора.

Мы давно работаем с интернет статистикой и для нас не представляет никакого труда написать пару роботов-парсеров, которые соберут информацию с интернет-страниц. 20 минут программирования и простенький робот генерирует файл со списком френдов(*) губернатора. В файле 1602 записи, для каждой записи собрана следующая информация…

ID;
Никнэйм;
Дата создания;
Дата обновления;
Постов;
Друзей;
В друзьях;
Взаимных друзей;
Комментариев получено;
Комментариев отправлено;
Тегов;
Имя;
Место;
Сайт;
Рейтинг;
Соцкапитал.

Вы можете скачать этот файл и сами поиграться. Фильтры, сортировки, графики и т.п. Может ваши выводы не совпадут с моими.

Уже при беглом просмотре сводной таблицы мне бросился в глаза следующей факт — у френдов губернатора есть несколько волшебных дат. Именно в эти даты они написали свой последний пост:

06.05.2012 — 513;
25.10.2012 — 200;
Никогда -121;
24.04.2012 — 79;
01.11.2012 — 76;

При этом, в среднем в сутки публикуют посты 7 френдов губернатора (за последние три месяца). Для верности посчитаем только те дни, которые как минимум в 10 раз отличаются от среднестатистических. Кроме того, исключим последнюю неделю и пользователей которые зарегистрировалось только для того чтобы читать. В итоге получаем 868 френдов-ботов вычисленных только по дате последнего обновления.

Для пущей уверенности сравним остальные данные этих френдов-ботов. У всех социальный капитал равен нулю, имя совпадает с логином, местонахождение — «Российская Федерация», использовано тегов — 2 (это минимум), даты регистрации совпадают с точностью до нескольких дней, количество полученных/отправленных комментариев и написанных постов тоже примерно одинаковое.

Осталось 734 френда. Вторым шагом сделаем тоже самое с датой регистрации. Там уже нет такого большого количества явных френдов-ботов, но есть 94 пользователя даты регистрации которых совпадают с датами уже исключенных. При быстром просмотре сводной таблицы видно что все данные этих 94 пользователей совпадают с данными исключенных френдов-ботов. Исключаем и их.

Осталось 640!!! Кто же они, френды губернатора? Давайте изучим их подробнее.

Социальный капитал

Социальный капитал — показатель очень похожий на Google PageRank и индекс цитируемости Яндекса, только не для сайтов, а для пользователей ЖЖ.

~90% френдов губернатора вообще не имеют социального капитала в ЖЖ (социальный капитал меньше десяти не отображается). А вот так распределись оставшиеся ~10%:

Распределение для френдов социальным капиталом больше 10.

А вот и герои (отсортировано по убыванию социального капитала, первые 10):

2469 — http://kukmor.livejournal.com/
2292 — http://vsegda_tvoj.livejournal.com/
2044 — http://asaratov.livejournal.com/
637 — http://fima_psuchopadt.livejournal.com/
630 — http://nikitskij.livejournal.com/
624 — http://golubchikav.livejournal.com/
348 — http://onepamop.livejournal.com/
334 — http://michael_077.livejournal.com/
276 — http://krowohlebka.livejournal.com/
228 — http://papa_gen.livejournal.com/

То же самое, но для френдов у которых в профиле есть «Великий Новгород» или один из райцентров новгородской области (далее по тексту — новгородцы):

115 — http://dvdm.livejournal.com/
88 — http://ev_chuprunov.livejournal.com/
70 — http://nibaal.livejournal.com/
63 — http://yakovenk0.livejournal.com/
38 — http://pilgrimminstrel.livejournal.com/
38 — http://hivrich.livejournal.com/
22 — http://vitusska.livejournal.com/
21 — http://alexandrov_blog.livejournal.com/
14 — http://v_novgorode.livejournal.com/
13 — http://abbsol.livejournal.com/
11 — http://lazybear.livejournal.com/
11 — http://velikin.livejournal.com/

Полученные комментарии

Количество полученных комментариев.

Топ 10:

285552 — http://fima_psuchopadt.livejournal.com/
254138 — http://kukmor.livejournal.com/
212955 — http://vsegda_tvoj.livejournal.com/
189933 — http://asaratov.livejournal.com/
110014 — http://golubchikav.livejournal.com/
85196 — http://yuss.livejournal.com/
56307 — http://papa_gen.livejournal.com/
54211 — http://michael_077.livejournal.com/
51817 — http://oleg_shein.livejournal.com/
47006 — http://onepamop.livejournal.com/

Топ 10 среди новгородцев:

26340 — http://pilgrimminstrel.livejournal.com/
23674 — http://antalex.livejournal.com/
19894 — http://dvdm.livejournal.com/
15924 — http://nibaal.livejournal.com/
15406 — http://lazybear.livejournal.com/
4852 — http://ev_chuprunov.livejournal.com/
4766 — http://yakovenk0.livejournal.com/
4006 — http://alexandrov_blog.livejournal.com/
2575 — http://vitusska.livejournal.com/
2412 — http://hivrich.livejournal.com/

Отправленные комментарии

Количество отправленных комментариев.

Топ 10:

151960 — http://kukmor.livejournal.com/
111039 — http://vsegda_tvoj.livejournal.com/
76080 — http://yuss.livejournal.com/
55965 — http://fima_psuchopadt.livejournal.com/
54933 — http://golubchikav.livejournal.com/
46492 — http://pilgrimminstrel.livejournal.com/
32834 — http://papa_gen.livejournal.com/
23537 — http://antalex.livejournal.com/
19824 — http://onepamop.livejournal.com/
19424 — http://nibaal.livejournal.com/

Топ 10 среди новгородцев:

46492 — http://pilgrimminstrel.livejournal.com/
23537 — http://antalex.livejournal.com/
15760 — http://dvdm.livejournal.com/
19424 — http://nibaal.livejournal.com/
11877 — http://lazybear.livejournal.com/
11599 — http://alexandrov_blog.livejournal.com/
3579 — http://mirovbur.livejournal.com/
3154 — http://yakovenk0.livejournal.com/
2710 — http://ev_chuprunov.livejournal.com/
2686 — http://vitusska.livejournal.com/

Посты

Количество написанных постов.

Топ 10:

21484 — http://nikolino.livejournal.com/
17583 — http://vsegda_tvoj.livejournal.com/
17095 — http://pilgrimminstrel.livejournal.com/
17064 — http://fima_psuchopadt.livejournal.com/
12141 — http://asaratov.livejournal.com/
8196 — http://yuss.livejournal.com/
5250 — http://golubchikav.livejournal.com/
4794 — http://novgorod_news.livejournal.com/
4599 — http://papa_gen.livejournal.com/
4559 — http://dymm69.livejournal.com/

Топ 10 среди новгородцев:

17095 — http://pilgrimminstrel.livejournal.com/
4794 — http://novgorod_news.livejournal.com/
3105 — http://lazybear.livejournal.com/
2026 — http://antalex.livejournal.com/
1530 — http://nibaal.livejournal.com/
1157 — http://yakovenk0.livejournal.com/
898 — http://dvdm.livejournal.com/
790 — http://alexandrov_blog.livejournal.com/
756 — http://hivrich.livejournal.com/
673 — http://malinovskay.livejournal.com/