За что блокируют сайты в россии
РКН: Что это такое, как работает ведомство, можно ли выйти из под блокировки
Разбираем, что такое РКН, как работает ведомство, какие способы блокировки есть, к кому они применяются, можно ли выйти из под блока с минимальными потерями трафика для бизнеса, ведь трафик режет до нуля! И самое главное, можно ли вернуть заблокированный домен.
P.S.: Текст вычитали и дополнили эксперты
Статью вычитали и дополнили: Артем Абловацкий, Алексей Степанов, Александр Букреев, Игорь Шулежко и еще несколько специалистов, которые предпочли остаться в тени)
Всем привет. На связи Толстенко Александр. Сегодня, мы с коллегами по цеху, подготовили для вас информацию про работу Роскомнадзора. В работе ведомства очень много нюансов, которые порождает множество вопросов, на которые в сети ответов почти нет.
Если вы занимаетесь продвижением сайта, рано или поздно, по различным причинам Роскомнадзор может заблокировать ваш сайт, и не важно, какая у вас тематика сайта. Блокировки прилетают на различные виды ресурсов: онлайн казино, сайты про букмекеров, новостные сми, блоги, интернет магазины, порталы, онлайн кинотеатры и тд.
Итак, разберемся же, что это за страшные три буквы РКН, чем занимается ведомство, с кем сотрудничает, как блокируются сайты и что делать, если пришло письмо на почту с требованием устранить нарушение (абузоустойчивые хосты, как правило игнорируют).
P.S.: Статью пишу исходя из собственного опыта, т.к. когда столкнулся с проблемой пришлось изучить немало информации в сети, где не везде она была раскрыта полностью, из-за чего возникало непонимание, как работает ведомство и что происходит при блокировке сайта на практике.
P.S.: P.S.: Данная статья, носит больше обзорный характер, в ней будет минимум технических моментов. Технические нюансы и наблюдения за ресурсом подробнее опубликовал в опросе про блокировку со стороны хостингов и в наблюдении за заблокированным сайтом.
РКН является федеральным органом власти. В его полномочия, входит довольно таки большой список функций. Вот несколько самых важных:
P.S.: С полным списком полномочий ведомства можно ознакомиться на официальном сайте https://rkn.gov.ru/about/credentials/
Проще говоря, РКН производит контроль за тем, как исполняются Федеральные законы в Интернете. Если органы управления выявляют случаи нарушения, ресурс попадает в черный список на блокировку.
За что заблокируют ваш сайт? Роскомнадзор и бан ресурсов в двух словах
Сразу о конце: в P.S. можно найти краткое содержание и понять — стоит ли это всё осмысленно читать. Скажу сразу — стоит, потому всё не так просто, как хотелось бы.
Сразу скажу, что есть статьи на Хабре о проверках Роскомнадзора, они интересные, но рассказывают несколько об ином (например, вот эта, эта или вот ещё одна).
О Роскомнадзоре (РКМ) ходят легенды: часть из них — мифы, часть — истории «о чёрной, чёрной комнате», а вот часть — сущая правда. Материал ниже — о том, как и когда ваш сайт может пострадать от РКМ и почему.
Для начала — мини-FAQ.
1. Кого и за что блокируют?
Об этом написано много и почитать можно, в том числе и по ссылка на оффсайте http://eais.rkn.gov.ru/, также можно посмотреть и на https://reestr.rublacklist.net/.
2. Эффективны ли блокировки?
И да, и нет. Поясню: одни говорят, что, например, «аудитория RuTracker упала за год после блокировки, но „количество скачанных торрентов не изменилось“, а другие уточняют: »… блокировка Rutracker.org снизила его рекламные доходы и аудиторию (и всё же признают, что… скачивать меньше пиратского контента пользователи не стали)». VPN, TOR и т.д. создают простор для мыслей, а популярность, скажем, LocalBitcoins только возросла благодаря информации в онлайн-СМИ о бане сайта.
Итак, во-первых, это «ковровая блокировка»: наверняка все помнят Абсурдопедию и её ban по IP, когда по факту были заблокированы все сайты на движке Wikia. Аналогично из-за блокировки по IP страдал и сайт Луркоморье. При этом позволить себе выделенный хостинг могут не все, а услуга выделенного IP — недорогая, но не решает проблемы «один IP — несколько сайтов». Не решается и проблема доменов и поддоменов: даже у крупных игроков. Скажем, https://market.yandex.ru/ и https://money.yandex.ru/ — это не (совсем) Яндекс. Первый выделили из-за ФЗ «О товарных агрегаторах», который пока только на рассмотрении. Второй — из-за печально известного ФЗ №161 «О национальной платёжной системе» (исторически выделение было «до», но фактически именно закон и последующая продажа части Сбербанку определили судьбу Я.Денег).
Во-вторых, чтобы не думать, что есть какие-то преграды для блокировок — несколько примеров самых ярких из них: из-за разных ошибок блокировали, например, саму Корпорацию Добра — Google (домен gstatic.com). Попадали в неугодные и Википедия, Вконтакте, Reddit, Пикабу… Более того, сам Роскомнадзор угрожал блокировками it-гигантам (кстати, рекомендую внимательно ознакомиться с комментариями, хотя бы с первым из них). И, конечно же, все помнят «триумфальное» закрытие LinkedIn. При этом обоснование для закрытие LK было более, чем сомнительное на мой взгляд. Но это — отдельный разговор.
Одна из самых больших проблем подобных блокировок в том, что происходят они зачастую по прошествии длительного времени после принятия (заочного, как правило) судебного решения.
Вот, например, Заочное решение от 27.03.14 г. Октябрьского районного суда г. Пензы: «истец Елистратов Д.Г. обратился в суд с вышеназванным иском, указав, что на сайтах информационно-телекоммуникационной сети „Интернет“ www.sportswiki.ru и www.expewrt.sportswiki.ru, хостинг-провайдером которых является ответчик ООО „МакХост“, открыто пропагандируются употребление… неограниченному кругу лиц, указываются места приобретения… и даются ссылки на сайты в сети Интернет, где можно заказать по электронной почте и затем получить… (Далее суд делает вывод, что нужно) обязать ответчика «ООО МакХост» бессрочно ограничить доступ к Интернет-сайтам: www.sportswiki.ru и www.expewrt.sportswiki.ru путем блокировки DNS-имен указанных сайтов на DNS-серверах хостинг-провайдера». Часть пропусков о запрещённых препаратах сделаны не мной — а непосредственно судом, ибо так положено: недаром Д. Ассанж назвал их одним из трёх всадников Апокалипсиса (если точнее — в книге «Шифропанки» об этом говорит Д. Эпплбаум в беседе с Джулианом, но последний всё это поддерживает и развивает).
К слову, по статистике чаще всего именно они — причина блокировок.
Но что куда интересней — так это ФИО истца: Елистратов Д.Г. И здесь вплотную подходим к одной из важных проблем — недобросовестной конкуренции. В частности, она есть «любые действия хозяйствующих субъектов (группы лиц), которые направлены на получение преимуществ при осуществлении предпринимательской деятельности, противоречат законодательству Российской Федерации, обычаям делового оборота, требованиям добропорядочности, разумности и справедливости и причинили или могут причинить убытки другим хозяйствующим субъектам — конкурентам либо нанесли или могут нанести вред их деловой репутации». Ранее была ещё одна, более точная в данном случае формулировка: «распространение ложных, неточных или искажённых сведений, способных причинить убытки другому хозяйствующему субъекту либо нанести ущерб его деловой репутации».
Итак, на сайте parapharm-russia. ru (не хочу активных ссылок для подобных ресурсов) видим, что именно так — Елистратов Д.Г.- зовут Генерального директора. Опять же, исходя из описания на сайте получаем: «производственное предприятие „Парафарм“ было создано в Пензе, и успешно работает с 1995 года. Наш профиль — высокотехнологичное производство лечебно-профилактических средств». Более того, Елистратов Д.Г. является также директором и другой, весьма говорящей названием компании, secret-dolgolet. ru. По мнению Вики-спортвики: «вы можете лицезреть первый прецедент, как производители БАДов или другая крупная фирма могут легко осуществить блокировку любого неугодного сайта».
Очень верно было отмечено и следующее: «при этом в иске Елистратова указывались не конкретные разделы энциклопедии, посвящённые наркотикам, а адрес главной страницы портала — Sportswiki.ru и сайт Expewrt.sportswiki.ru, переправляющий на эту домашнюю страницу. Второй адрес, судя по всему, указан с опечаткой и должен выглядеть, как Expert.sportswiki.ru, без лишней буквы «w» в первой части URL».
Таким образом, ни процессуальные (см. выше), ни фактические ошибки не есть преграда для блокировки: скорее наоборот — отсталый характер развития районных (и мировых) судов есть залог успеха большинства из анализируемых дел. Но всё это — отдельная тема, так как как раз сегодня проводится реформа отрасли.
Пока же остановлюсь на другом важном тезисе: «ресурс находится в списке http://eais.rkn.gov.ru/. При этом, первые уведомления поступили спустя 3 месяца после вынесения решения суда, таким образом, его уже нельзя обжаловать (срок обжалования составляет 3 месяца)».
Отменили же решение только 26.02.15 г. Президиумом Пензенского областного суда.
И вот здесь, в помощь it-бизнесменам хотелось бы вставить свои 2 копейки, которые не раз выручали.
Дело в том, что Почта России, не смотря на полеты, развитие e-commerce сегмента и другие новации, всё ещё не хочет исполнять свои основные обязанности должным образом. Например, приносить судебные уведомления на юридический адрес.
Между тем, в Приказе ФГУП «Почта России» от 31.08.05 г. №343 отмечено, что «…после доставки первичных извещений … доставляются и вручаются под расписку вторичные извещения».
Кроме того, в Порядке приёма и вручения внутренних регистрируемых почтовых отправлений, который утвержден Приказом ФГУП «Почта России» от 17.052 г. № 114-п говорится: «20.2. РПО доставляются по указанным на них адресам (кроме дефектных почтовых отправлений и РПО с описью вложения) или выдаются на объектах почтовой связи. Доставке по адресу, указанному на почтовом отправлении подлежат: почтовые отправления и уведомления о вручении категории «Заказное»…».
Более того, в обязанность почтальона согласно Порядку приёма и вручения внутренних регистрируемых почтовых отправлений входит и следующее обязательство: «по возвращении из доставки почтальон сдаёт: накладные поименные ф.16 (с расписками получателей), извещения ф.22 на врученные РПО, бланки Е 1-в «Подтверждение получения». «.
Далее — можно посмотреть и на положения Постановления Пленума ВАС РФ от 17.02.2011 г. №12 (ред. от 11.07.2014 г.) «О некоторых вопросах применения Арбитражного процессуального кодекса Российской Федерации …», где указано, что «… судебное извещение направляется по трём соответствующим адресам, а юридическое лицо … считается извещенным надлежащим образом, если судебное извещение вручено хотя бы по одному из этих адресов».
Эту же позицию подчёркивает и Постановление Правительства РФ от 15.04.2005 г. № 221 «Об утверждении Правил оказания услуг почтовой связи», на основе которого изданы все Приказы ФГУП «Почта РФ»: «почтовое отправление (почтовый перевод) с уведомлением о вручении» … — почтовое отправление (почтовый перевод), при подаче которого отправитель поручает оператору почтовой связи сообщить ему или указанному им лицу, когда и кому вручено почтовое отправление…».
Скажу даже больше, что согласно толковому словарю русского языка слово «вручать» означает «…отдавать в руки, отдавать непосредственно, лично кому-либо».
К чему все эти юридические изыски?
К тому, что ст. 237 ГПК РФ оговаривает вот что: «ответчик вправе подать в суд, принявший заочное решение, заявление об отмене этого решения суда в течение семи дней со дня вручения ему копии этого решения». И именно это — одна из главных отличительных особенностей именно заочного решения.
К сожалению, не все мои коллеги (it-юристы) понимают и разделяют эту позицию, но, поверьте, именно она становится спасательным кругом, когда нерадивая работа Почты РФ, излишнее рвение Роскомндазора и прокуратуры складываются с потребительским терроризмом, а то и вовсе — произволом. Об этом — чуть подробней ниже.
Вспомним блокировку btc-сайтов: из последних — exmo.com и localbitcoins.com, а ранее — bitcoin.org, indacoin.com,coinspot.ru,hasbitcoin.ru,bitcoinconf.ru,bitcoin.it,btcsec.com (далее — Сайты о Биткоине).
Так, относительно Exmo: «иск был подан прокурором Приморского района к Роскомнадзору с требованием ограничить действие сайта для российских пользователей по причине содержащейся на нем информации, запрещенной в России» И это при том, что у сайта есть вполне конкретный владелец, который к России не имеет никакого ( в правовом поле) отношения:
Пока не нашёл полного текста решения (буду признателен за помощь) — гипотеза от коллеги: «… иск был подан прокурором Приморского района к Роскомнадзору с требованием ограничить действие сайта для российских пользователей по причине содержащейся на нем информации, запрещенной в России. Есть предположение, что Прокурор подал иск по заявлению в Прокуратуру физического или юридического лица на этот сайт. Почему Приморский районный суд? Потому что иски о прекращении выдачи оператором поисковой системы ссылок, позволяющих получить доступ к информации в информационно-телекоммуникационной сети «Интернет», могут предъявляться также в суд по месту жительства истца, то есть нахождения Прокурора, т.е. к Прокурору явился кто-то из жителей нашего Приморского района, либо ЮЛ!». Возможно. Скажу больше — примеры подобные уже есть.
А вот и ссылка на явный произвол: согласно решению по сайтам СоБ: «… криптовалюты … являются денежными суррогатами» (Решение от 05.10.14 г. Невьянского городского суда Свердловской области). Отмечу, что в г. Невьянске проживает 23 545 человек, тогда как по данным Pr-Cy у одного только bitcoin.org посещаемость составляет 230 509 человек в месяц. Одним словом, это всё равно, что снести дом в 16 этажей и на 5 подъездов в целях защиты прав жителей «дома напротив», который представляет собой старую лачугу в 30 кв. метров, делят кою 3 человека с очень даже запятнанной репутацией (в Иркутске такие дела встречались, но с отрицательным для хозяев «лачуг» исходом).
А ведь между тем, криптовалюты — не денежные суррогаты. Более того, ЦБ РФ, который согласно ФЗ «О центральном банке» один может решать, что есть денежный суррогат (если только иное не будет закреплено на уровне ФЗ), через зампреда — О. Скоробогатову явно выразился в 2016 году, что рынок крипто будет урегулирован в ближайшие 2-3 года, а пока — трогать его не надо. Но прокуратуру и иже с ней это не остановило.
Чтобы стало понятней: у ЦБ есть информационное письмо (примерно такое же, как о «цифровых деньгах»), посвящённое бонусам: «выпуск лицами, не являющимися кредитными организациями, карт, в том числе „подарочных“, „накопительных“, „дисконтных“, „бонусных“, в целях их использования физическими лицами для расчетов с поставщиками услуг (товаров, работ), отличными от эмитентов карт… является нарушением законодательства Российской Федерации». Интересна подача материала — Информационное письмо от 28.02.13 года. Таким образом, если гос. органы «разойдутся», под такую формулировку могут попасть: любые сервисы, с бонусными программами (кинотеатры, хостинги, интернет-магазины….); сервисы по типу WebMoney; разного рода «мили» от авиакомпаний и т.д.
Поэтому не стоит обольщаться, если думаете, что блокирует только «совсем опасных, и тех, кто связан с криптой».
Если будет интересно — в следующий раз продолжим о бонусам. Пока — всё. Вопросы станут отличным дополнением!
P.S. Для тех, кто читает только начало и конец — аннотация статьи:
Технические аспекты блокировки интернета в России. Проблемы и перспективы
Начнем сразу с дисклеймера: ниже принципиально не будет политических вопросов. Административные и юридические вопросы тоже будем обходить настолько, насколько сможем, чтобы полностью не вырывать техническую часть из остальных плоскостей.
Блокировки интернета в России уже есть — это данность, с которой мы живем и должны жить дальше. А раз так, нужно разбираться, как это устроено технически, что может и не может провайдер. Филипп Кулин (schors) давно начал собирать информацию по этому поводу, участвовал в нормативной работе, ходил на разные совещания. В итоге сейчас больше него о блокировках в России знает только Роскомнадзор, но это не точно. Под катом краткая сводка актуального состояния дел.
Сплошной клубок проблем
Казалось бы, есть блокировки и есть. Не нравятся они нам, но, может быть, ничего плохого в них нет?
На самом деле, блокировки — это сплошной клубок проблем.
Сопутствующий ущерб — самая большая проблема блокировок. Самый яркий пример, иллюстрирующий это, произошел в апреле 2018 года, когда были заблокированы большие блоки IP-адресов облачных сервисов, соответственно, многие сервисы не работали и понесли большой ущерб.
Волатильность нормативов и практик, которые все время изменяются. Год назад этот рассказ был бы абсолютно другим, а два года назад он, скорее всего, противоречил бы сегодняшнему. Через год снова все будет по-другому. Сегодня это так, через месяц — немножко не так, а через полгода вообще не так. За этим надо следить, но и успевать работать тоже надо.
Блокировки трудно диагностировать. Если какой-то ресурс попал в блокировку именно по реестру — это самый простой случай. В случаях, которые мы рассмотрим дальше, отличить реальную блокировку от технических проблем достаточно сложно. Яркий пример — в октябре у Яндекса падал DNS часов на пять, за это время многие успели решить, что это блокировка Роскомнадзора. Определить точно, действительно, трудно, а ситуации такие уже бывали, поэтому люди сразу думают о блокировке.
Невозможно предсказать, когда вас заблокируют и заблокируют ли вообще. Вы спокойно работаете, а работа у вас вдруг закончилась.
Уверяю, большинству из вас так не повезет! Такие документы не будут по счастливой случайности утекать вам в руки. Когда ваш бизнес закончится, вы узнаете об этом постфактум.
В простых случаях известно, почему ваш сайт заблокировали. Например, на форуме разместили информацию, которую какой-то суд признал запрещенной, а вы не успели среагировать. Но общение с надзорным органом имеет неприемлемые сроки — например, сутки. В интернете за это время вы можете потерять пятую часть бизнеса.
Все это приводит к некой безысходности. Можно с иронией рассуждать над, например, Дэвидом Хомаком и блокировкой Лурка. Но совсем другое дело, когда это происходит с вами, как один раз произошло со мной. Клиент указал IP-адреса моих серверов у домена, которым я не управлял — я сижу, а телефон просто не умолкает. Клиенты говорят, что они уходят, требуют вернуть деньги, а я сделать ничего не могу! И никто не может мне в этом помочь. Это реально ощущение полной безысходности.
Группы риска
Принцип работы блокировок
Сначала кратко обсудим, как происходит блокировка, чтобы понимать полную картину.
Важно понимать, что трафик фильтруется каждым провайдером. То есть не где-то на трансграничных маршрутизаторах или государственным фильтром, а каждый провайдер ставит себе фильтр между интернетом и абонентами в каждой своей подсети. На схеме выше устройство проверки рядом с абонентами, потому что оно изображает из себя абонента — это важно.
Инструменты фильтрации
Провайдеры могут покупать фильтрованный трафик у вышестоящего провайдера. Но тут есть проблема — покупая трафик у вышестоящего провайдера, провайдер-покупатель не может определить техническая проблема или блокировка. Он не имеет никакого инструмента, потому что получает уже порезанный трафик, и это не очень хорошо сказывается на его бизнесе.
Либо можно использовать:
Есть следующие варианты реализации.
Например, у вас есть небольшой канал в 100 Гбит, вы поставили фильтр в разрыв.
Некоторые зеркалируют трафик, но с зеркалированием трафика проблема в том, что работает это как бы на опережение. То есть фильтр пытается ответить быстрее нормального ответа, соответственно, если фильтр начал тормозить, — штрафы (напомню, 50-100 тысяч рублей).
Выборочная маршрутизация — когда трафик на IP-адреса, среди которых может быть что-то из «выгрузки», проходит через отдельный фильтр.
К сожалению, точных цифр нет, но судя по косвенным признакам и тестам, это сейчас самый распространенный способ фильтрации трафика.
Выборочная маршрутизация может дополняться тем, что наборы IP-адресов для фильтрации агрегируются в большую сторону. То есть блокируется не просто несколько адресов, а вся сразу сеть /24 попадает на фильтр. Плюс у крупных провайдеров, например, в МТС, есть специальные службы безопасности, которые специально ищут блоки IP c риском, которые тоже попадают в фильтрацию.
Также выборочную маршрутизацию можно комбинировать с фильтрацией DNS-запросов. Это популярный метод, которым пользуется, например, Дом.ru.
Разберем поэтапно проблемы, которые все это приносит.
Принятие решения о блокировке
Роскомнадзор принимает решение — это сразу вызывает проблему связанную, так скажем, с организацией службы поддержки. В ряде случаев он должен уведомить владельца сайта или хостера, но при этом адресат уведомления не точен (он берется из публичных данных, а не все поддерживают актуальные адреса), уведомления теряются, открытой информации нет.
Из-за этого происходят всякие плохие вещи. Хостер или владелец сайта не может контролировать, какие запросы к нему ведутся, никакой открытой информации нет. Например, у Google есть база сайтов с вирусами, где вы можете себя зарегистрировать как автономную систему, как-то подтвердить, что вы автономная система, и действительно самому смотреть, какие сайты по мнению Google в вашей автономной системе распространяют «зловреды». С блокировками такого нет — вы рассчитываете только на то, что уведомление до вас дойдет, и вы его вовремя успеете прочитать.
Сроки взаимодействия с Роскомнадзором не соблюдаются, и в целом немного странные, несмотря на то что есть нормативы — за сутки отправить уведомление, за сутки ответить, за сутки принять решение. Когда вам приходит уведомление, а вы говорите, что у вас нет такой информации и просите разъяснений, то можете получить ответ и через несколько недель. А, может, вас заблокируют, а потом ответят, что информация у вас таки есть. Такие ситуации у меня были, но мало кто подает в суд — я вообще не знаю таких случаев.
Опять же, если пришло уведомление, вы не всегда можете понять, о чем оно. В большинстве случаев Роскомнадзор нормально описывает, что имеет в виду. Но даже в нашей практике микро-хостера было три случая, когда по описанию было непонятно, о какой информации речь. Я даже не знал, что клиенту написать — протоколы и тексты решения Роскомнадзор выдает только по суду, хотя у них есть такие документы.
Время применения «выгрузки»
Итак, решение приняли, провайдер скачал «выгрузку» и дальше должен с ней что-то сделать. Есть два варианта, насколько быстро: сутки или незамедлительно.
Важно, что сутки отведены и на блокировку ресурса, и на разблокировку, если вдруг принято решение о разблокировке. У многих это сделано, как ночные обновления коммутатора. Из моего опыта: не вовремя принял уведомление, ресурс заблокировали, вопрос решили, но сутки ждешь, пока разблокируют. А бизнес не ждет, появляются потери.
Чтобы понимать, как все фильтруется, надо знать, что находится внутри «выгрузки». Там список записей в XML одного из четырех типов по видам блокировки и реквизиты решения:
Важно: всего 139 тысяч записей, а самый популярный тип блокировки — это блокировка «по домену». Это HTTP и HTTPS протоколы.
Токсичность «выгрузки»
Перед тем, как блокировать ресурс, провайдер должен разобрать «выгрузку». С этим тоже есть проблемы. Я специально обратил внимание, что «выгрузка» — это не реестр, а некий технический документ, который провайдеру выдается для того, чтобы он на его основе принимал решения. Но несмотря на это, провайдеру приходится проводить очень большую обработку «выгрузки».
Например, в «выгрузке» есть избыточность, записи перекрывают друг друга. Если взять какой-то URL, это не значит, что не будет блокировки по домену, который содержится в этом URL. Таких сейчас не так много, правда, — чуть более трех тысяч.
В «выгрузке» содержатся URL с фрагментами (#) и сессиями. Это вообще ужас, потому что надо понимать, как проходит проверка.
Провайдер должен приводить «выгрузку» в нормальный вид, потому что в ней встречаются неправильные URL и домены. В основном сейчас встречаются только обратные слеши. Бывают пробелы, но их быстро убирают, а к обратным слешам почему-то особенная «любовь». Ну ладно, с обратными слешами вопрос решили, а если появится какой-нибудь плюсик? Поэтому всегда должен быть мониторинг, всегда надо что-то делать.
Еще раз обращаю внимание, что проблема провайдера — это наша проблема. Что делает провайдер? Мотивация в 100 тысяч рублей — это хорошая мотивация сделать так, чтобы вообще при любой проблеме, даже при любом намеке на проблему, рубить сразу, а потом разбираться.
Актуальность в «выгрузке» тех IP-адресов, которые не «блокировка по IP-адресам», а всех остальных (блокировки по домену, по URL, по маске) выглядит примерно так. 
Буквально чуть больше половины актуально, а остальные полный фарш.
Проверка блокировок
Вся история реализации блокировок в России это история проверок этих блокировок.
Я не знаю, как заграницей, у нас это абсолютно точно именно история проверок. Все блокировки делаются не так, как написано, как их делать, а так, как проверят, потому что никому не нравится платить штрафы, особенно 100 тысяч.
До реестра запрещенных сайтов существовал список экстремистских материалов Минюста (он и сейчас существует, просто сейчас он в реестре, а тогда был отдельным) и прокурорские проверки блокировок по этому списку. Я микро-хостер и то умудрялся попадать на блокировку у меня таких ресурсов.
Существующие виды проверок:
«Ревизор» стоит за фильтром и полностью прикидывается абонентом. Но сам прибор ничего не делает, он получает задачи и отдает ответы в некий центр управления, т.е. это такой удаленный shell внутрь сети провайдера. Действует он очень похоже действует на RIPE Atlas.
Центр управления автоматизированной системы — это настоящий highload-сервис, потому что у нас 4 тысячи операторов связи, у них не по одной сети, а коробочка должна стоять в каждой сети. То есть не у каждого провайдера, а в каждой сети каждого провайдера. Соответственно, у центра управления есть определенные проблемы.
Вопрос: есть ли проблемы у самой проверки? Конечно, есть.
Проблемы проверки
На СПЕКТР-2017 (форум под эгидой самого Роскомнадзора) один из начальников ФГУП главного радиочастотного центра (ГРЧЦ) Вэклич А.А. сделал целый доклад о том, какие есть именно технические проблемы с проверкой «Ревизором» провайдеров.
Методика работы АС «Ревизор»
В соответствии с этими проблемами создана методика работы «Ревизора».
И да, слайд ваше исчерпывающе иллюстрирует данную методику. Я не очень понимаю, как чисто логически с этим можно жить. Для нас это все выливается в то, что провайдеры пытаются как-то эту проблему решить, и делают это удобным для себя способом, и не всегда удобным для нас.
Работая без методики, многие провайдеры получили экзистенциальный опыт. Вообще вся методика блокировки — это эмпирический путь, который стоит денег, нервов, падений, даже сейчас, когда какая-то методика уже немного устоялась.
Есть неофициальный чатик (что примечательно — в Telegram, где же еще), где провайдеры общаются с сотрудниками Радиочастотного Центра. Самое интересное, что там можно получить реальную помощь, сотрудники ГРЧЦ помогают провайдерам решать их проблемы, и рассказывают, как работает «Ревизор». Но это все неофициально, нет никаких документов.
Есть норматив Роскомнадзора о способах и методах ограничения доступа, который зарегистрирован в Минюсте. Он специально идет в конце, потому что имеет самый низкий приоритет. Провайдеры действуют не так, как написано в нормативе, а так, как работает способ проверки.
Методика работы с «выгрузкой»
По нормативу и по накопленному опыту, расскажу, как работают с «выгрузкой», то есть как наши ресурсы блокируются.
По URL:
По домену:
По домену с маской теоретически провайдеры фильтруют просто как по домену без звездочки. Поскольку опять же проверок нет, то и проблем тоже пока нет.
По IP-адресу и блоку IP-адресов фильтруют, как умеют, — прямо на пограничном маршрутизаторе иногда.
Добросовестные участники
Мы знаем, что блокируются не тольк «злые» люди, но и добросовестные участники интернета. Например, когда человек не имел умысла держать запрещенную информацию у себя на хостинге, но не прочитал письмо или не получил уведомление.
Вторая группа — это зарубежные участники. Они живут в своем правовом поле и не нарушают законодательство. У них можно посмеяться, например, над взятками, они не видят в этом ничего плохого. Например, хостеры даже не имеют права удалить эту информацию, потому что на них законы не распространяются. Они не злые люди, но блокировки бьют и по ним.
Проблемы фильтрации
Давайте разберем проблемы, поговорим о фильтрации DNS, которая рекомендуется нормативом.
Первый вопрос: а причем тут DNS? Действительно, может быть размещена запрещенная информация, но DNS представляет нужный людям сервис, именно как DNS, например, IP-адреса. При подделке DNS получается все не очень хорошо, и не понятно, почему так.
Второй момент — реализация перехвата DNS. На самом деле перехватывают весь трафик (просто ставят свой кэширующий сервер — самая распространенная практика), и соответственно встает вопрос качества обслуживания. Например, в своем офисе я специально сделал обход Дом.ru только для DNS, потому что невозможно работать, когда приходится ждать ответа от их DNS.
Все это можно ускорить, создав свою систему подмены ответов. Тогда провайдер должен разработать систему и поддерживать ее. Так тоже делают, но это редкость.
При распространении технологии шифрования запросов DNS (DNSCrypt, DoT, DoH) неизвестно останется ли тип блокировки по DNS.
С фильтрацией доменов по маске проблема в том, что домены могут быть на разных IP, то есть вам придется сканировать всю полосу HTTP/HTTPS. Но что делать с остальными протоколами? Вы сканируете всю полосу, а, например, запретили только Telegram по маске (по домену) — что с этим делать? А проверки всё равно нет!
Следующий очень важный момент — кстати, это наше будущее — что делать, если на порту 443: нет SNI, SNI шифрованный (ESNI) или вообще другие протоколы, например, QUIC, DNSCrypt, VPN, MTProto-proxy?
Крупные компании, например, Google, уже поддерживают шифрованный SNI, а у Яндекса DNSCrypt на 443 порту. Сейчас этот вопрос каждый решает по-своему. Некоторые провайдеры, особенно мобильные, если не могут опознать трафик как HTTPS, просто его вырубают. Точно статистики на эту тему я привести не могу, но сам подход не внушает оптимизма.
Резолвинг домена
Ставить фильтр на всю полосу, например, в 100 Гбит малореально. Вместо этого провайдеры берут домены, их IP-адреса, и уже этот трафик сканируют. Это делают и крупные, и мелкие провайдеры, в основном крупные, кстати говоря.
В нормативе этого нет, но «вы же понимаете!». «Ревизор» проверяет по реальным адресам и по тем, что в «выгрузке», то есть и так, и так. Резолвинг используется, потому что провайдерам это выгодно. Он дает им возможность фильтровать все-таки не 100 Гбит, а гораздо меньше исходящего трафика.
Проблема фаз при проверке известна давно — все плачут, колются и продолжают так делать. Провайдер взял IP, обновил фильтры, но до проверки «Ревизора» IP изменился. Время, за которое ресурс сменил IP (желтая стрелка на схеме), может измеряться миллисекундами, но этого достаточно, чтобы провайдер получил штраф.
Второй вариант: после смены IP ресурса, провайдер и «Ревизор» имеют одинаковый IP, все всё сделали вовремя, только провайдер обновил фильтры на миллисекунду позже, чем «Ревизор» проверил — с соответствующим ущербом. Понятно, что провайдер в такой ситуации постарается подложить столько соломки, что это может нам не понравиться.
С резолвингом есть еще проблемы:
«Протухшие» домены
Домен «протухает», когда у него закончился срок регистрации, но он остаётся в «выгрузке», потому что, естественно, никто за этим не следит. Новый владелец домена получает контроль над тем типом блокировки, которая в «выгрузке». В «выгрузке» могут быть и поддомены, а когда вы купили домен, вы получаете контроль над всеми поддоменами.
Я нашел в «выгрузке» около 200 «протухших» доменов, но на самом деле их там больше. Мы не знаем, сколько доменов уже куплено людьми, которые решили пошутить. Может, их нет, может есть.
К чему это приводит?
На картинке сбои сайтов Яндекса, ВКонтакте, Википедии. Справа график MSK-IX, который сам MSK-IX отрицает и говорит, что это был внутренний сбой. Но внутренний сбой почему-то по времени точно совпадал с DNS-атакой.
DNS-атака заключалась в том, что кто-то купил «протухший» домен, кинул туда тысячи IP-адресов и начал поливать все, что хочет, то есть на эти IP-адреса кидать Яндекс, ВКонтакте и т.д. Кто-то поигрался, и так до сих пор и неизвестно, кто.
Все, конечно, надували щеки и говорили, что такого быть не может. Но несмотря на это, на графике справа внизу, который показывает количество доменов в «выгрузке», видно, что 5 июня 2017 года Роскомнадзор провел основательную чистку.
Одной из целей атаки были платежи через банковские карты. Банки этого не признают, поскольку тогда их акции упадут. Но по факту некоторые банки действительно подверглись DDoS, в результате чего у них целый вечер не работала оплата картами.
Вы думаете, что кто-нибудь что-нибудь сделал?
14 марта 2018 год: другой вектор атаки, но тоже с «протухших» доменов. Кто-то купил 4 домена, получил контроль над 400 поддоменов, и залил туда 4 000 IP-адресов. У ТрансТелеКома, у которого по заверениям Роскомнадзора все в порядке, где-то на 600 тысячах переполнилась таблица на маршрутизаторах, и 20% сетей ТTK по всей стране прилегло.
Не прошло и года:
Это график резолвинга, то есть IP-адреса из доменов из «выгрузки». 5 мая я говорю Леониду Евдокимову: «А не пошутить ли нам — не написать ли на графике что-нибудь морзянкой?» Через час он это сделал. По цифрам видно, что мы по нескольким тысячам IP подкалибровались под мой резолвинг и под мое время (я постоянно опрашиваю домены), чтобы пики было видно, и начали писать: DIGITAL RESISTANCE.
На втором графике была большая надпись: «Воистину Попов!», потому что был День Радио. Я привожу его, потому что на нем видно, как Роскомнадзор наконец-то начал чистить домены. Там где ступенька, там они 2 домена уже нашли, а 2 еще нет, но они довели чистку до какого-то ума. На момент генерации надписи «протухших» поддоменов в «выгрузке» было около 4 000, а к ноябрю стало стабильно, то есть Роскомнадзор проводил регулярные чистки. Но, к сожалению, к времени выхода статьи количество доменов опять возросло — сейчас их 1538.
Кстати говоря, это единственный результат моей деятельности за несколько лет — реально начали хоть что-то делать!
Кстати, об авариях и сбоях. Дело в том, что оборудование и программы фильтрации почему-то не хотят ходить строем: где-то тормозят, случаются сбои и ошибки. Чуть возрастает нагрузка, и качество обслуживания становится никаким. Можно, например, использовать DNS-атаку — в простом случае сайт не упадет, потому что все нормально фильтруется, но качество его работы для пользователя будет очень низким. Можно так скажем «полудедосить» сайты, чтобы снизить качество их работы.
Например, прошлым летом у Ростелекома в нескольких регионах фильтр выдавал почему-то один чанк HTTP протокола неправильно, и соответственно на экран валился мусор. Владелец сайта Motobratan.ru был в отпуске и сказал, что ему все равно. Сайт все выходные так проработал, пока в понедельник с утра инженер не пришел и не починил.
Проблемы провайдера
По-хорошему должен быть регламент техобслуживания на случай, если:
Кстати говоря, когда была авария на ТТК, многие просто выключили фильтрацию и «Ревизора», на всякий случай.
Фантазии
Любимая фантазия о том, что с этим всем можно сделать, — белые списки. Но есть но:
Еще одна фантазия — давайте сделаем единый государственный DNS для резолвинга, и все будет нормально.
Отвечу на полном серьезе, без иронии: да. Заблокировать Telegram можно, если немного изменить нормативную базу, законы, поставить волшебные DPI и пренебречь сопутствующим ущербом. Мы, это видим на примере Ирана, в котором заблокированы тысячи сайтов, но зато относительно хорошо блокируется и Telegram.
Надеемся, этот рассказ помог составить общее представление о технической составляющей блокировок интернета в России.
Некоторые подробности можно узнать из ответов на вопросы после доклада, на сайте Филиппа Кулина, в Telegram-канале о регулировании интернета в России @usher2 и в профиле schors
Эта статья основана на одном из вызвавших самый большой интерес слушателей докладе HighLoad++ 2018. Узнать о новых материалах и открытых видео удобно из рассылки — она нечастая, и исключительно по делу. Например, её получатели точно в курсе, что вовсю идет заявочная кампания на апрельский Saint HighLoad++.