Вважаємо порносайти, оцінюємо ефективність Роскомнадзора



Вся історія почалася з досить бурхливого обговорення процентного співвідношення порно vs. все інше. Дискусія плавно переросла в тоталізатор. Хто називає цифру ближче всього до «реальної», той і в дамках. Ставки зроблені, ставок більше немає.

Як і де?
Залишалося з'ясувати «реальний» показник. Заздалегідь були визначені критерії та вибірка, в рамках якої вимагалося провести дослідження. Достатнім критерієм, на думку більшості учасників спеціальної олімпіади, з'явилася проста регулярка на слово porn в контенті + кілька їдких слівець (всі ми їх знаємо). Вибіркою взяли топ 1,000,000. Незважаючи на те, що сайти в інтернеті ~400кк, Алекса досить чітко виділяє тих, у кого є хоч який-небудь трафік.

Зарядили краулер, понеслася. Зауважу, що учасники тоталізатора гуглити не намагалися, підстави не довіряти кому-небудь немає, тема делікатна, та й, правда, цікаво ж, скільки? А може воно того, його все менше і пора качати?

Всіх переміг сишник
Він зі ставкою 2,9% виявився ближче всіх до отриманих значень. Ми знайшли 26044 порника (2,6%) з мільйона топових доменів (на 04.07.2016). Зізнатися, цифра багатьох здивувала, розбіжність у значеннях був не малий, верхню планку давали на рівні 35%. Полізли гуглити, знайшли статтю з дослідженням від Forbes за 2011 рік, з цифрою в ~4%, хто побічно підтвердило адекватність отриманих значень. Але, невже падає?

Динаміка
Підійшли відповідально, тримали регулярку майже 3 місяці, стежили за динамікою. Поки стежили, спалили падіння великої сітки (хтось жорстко заабузил хостера). Падіння ви можете помітити на графіку 4 серпня, ~2000 сайтів пішло в даун, але вже 5 числа хлопці відновилися і продовжують доставляти контент донині, без єдиного розриву. Порносайти стабільно отжирают свою частку: за 3 місяці з 2,6% з 3,3% (33147)

Що там Роскомнагляд?
Як раз під завершення нашого дослідження піднявся хайп навколо адалт контенту, лідером якого став всіма улюблений Роскомнадзор, поблокировавший особливо популярні сайти.

Джойним базу заблокованих сайтів (спасибі Роскомсвободе) на отриманий нами список порников, отримуємо 626 доменів. Це 1,88% від усіх сайтів, які ми визначили як брудні, розпусні.

Хочеться зрозуміти, яку частку контенту блочит держава не за кількістю доменів, а за їх значимістю. Раптом всі ці 626 доменів агрегує 90% трафіку і користувачі змушені шукати заміну серед менш якісних продуктів. Даних по трафіку у нас немає, але є рейтинг Алекси, де:

1. Google


999999. Qoranona.com (цитую: «Солодке життя слухатися Бога», всі арабською, виручив гугл-перекладач).

Цікавий збіг, топ 1, ніяк не пов'язаний з релігією, допомагає доносити інформацію релігійною сайту з останнього місця в маси. Якщо що, я не намагаюся образити почуття віруючих, я про технології фактами. Є цей сайт екстремістським визначити можливості не маю, так що заходити на нього нікому не раджу (на всякий випадок).

Так от, про рейтингу
Щоб приблизно оцінити частку трафіку сайтів, які поблочил Роскомнадзор, роздамо їм ваги. Для простоти підрахунку віднімемо у списку від значення рейтингу 1,000,000 і візьмемо по модулю, тобто:

Google, як самий відвідуваний сайт дає нам 999999 очок на барабані, а Qoranona.com1.

Загальну суму ваг для списку вважаємо як суму натурального ряду, вона у нас = 500000500000

Сума ваг сайтів (33147 домену на останній день скана), які ми визначили як порники = 18096750838 (3,6% від суми всього списку, при 3,3% за кількістю займаних доменів)

Сума ваг 626 доменів, які були заблоковані = 460251373, що становить 2,54% від загальної суми ваг порносайтів. Думаємо, що можна вважати цю цифру за показник ефективності винищення державою контенту для дорослих на даний момент.
Джерело: Хабрахабр

0 коментарів

Тільки зареєстровані та авторизовані користувачі можуть залишати коментарі.