что делать если заблокировали сайт
Блокировка сайта Роскомнадзором. Что делать и как обойти бан?
Вы здесь
Если Вы занимаетесь сайтами серых и темных ниш, то с проблемой блокировкой сайтов Роскомнадзом на территории РФ думаю уже знакомы. Но меня подобная проблема всегда обходила стороной, так как сайты которые я веду в основном белые и пушистые, иногда с оттенками серого. Но даже на белые сайты могут прилетать абузы и блокировки от РКН. Так, в начале декабря, на один из моих проектов тоже прилетел предновогодний сюрприз и трафик в один из дней упал в разы.
Предыстория
Коротко о сайте:
На сайт часто приходили жалобы, верней не на сайт в целом, а на отдельные объявления (те же сигареты, копии брендов). Иногда это были предупреждения на почту указанную на сайте, но чаще жалобы летели хостеру, а они уже писали мне, я в свою очередь всегда их тут же удалял.
Беда в том, что в этот раз никаких предупреждений не было (как мне казалось), поэтому причину резкого падения я понял не сразу. Что делает сеошник когда видит такую картину?
Сначала я просрался, потом собрался и начал гонять сайт по сервисам анализа в поисках проблемы, проверять ответы кодов, доступность, позиции, апдейты и.т.д. Но все показывало норм. Позиции просесть не успели, апдейтов не было, сайт технически исправен. В процессе анализа понял что трафик порезало именно с России. Было как-то у меня что Cloud Flare по IP резал страну, поэтому думал на него, и убили сутки на настройку сервера.
Не забыл и на сайт Роскомнадзора заглянуть и проверить нет ли сайта в базе (https://blocklist.rkn.gov.ru/). Сайт был, но ограничение было наложено на страницу, а не на домен. Причем об этом ограничении я знал и ранее, оно было наложено еще с лета (более 5 месяцев), а сайт не доступен стал только сейчас. Страницу не удалял, так как это была категория, причем она сидела в топе по жирным запросам что давало хороший траф на нее (даже с учетом блокировки) и конверсию по монетизации сайта. Ну в блоке и в блоке, сайт же не заблочен был, поэтому этот вариант тоже отложил в сторону.
Многие наверное уже думают:
Бля, как ты мог не заметить? Ведь при блокировке сайта РКН выводится заглушка с сообщением что оный ресурс наказан?
Главная загвоздка моей слепоты была в том, что я живу в Украине (ага, не «на», а «в»), в рунет хожу через VPN от Hideme, а зайдя на сайт под VPN никакой заглушки как оказалось позже не видно, даже если у тебя российские IP установлены. Блокировка происходит на уровне DNS сети в регионах. Когда попросил знакомых с России посмотреть на сайт, сразу все стало на свои места. Прислали такой скрин:
Почему тогда не было предупреждений по email или от хостера? Как оказалось были, вот только в СПАМ все письма от РКН попадали от того я их и не видел. Стоит отдать должное они старались, неоднократно предупреждали, терпели и ждали пока же я исправлюсь.
Вот пример одного из таких писем:
Роскомнадзор информирует/the Roscomnadzor is informing
В случае непринятия провайдером хостинга и (или) владельцем сайта мер по удалению запрещенной информации и (или) ограничению доступа к сайту в сети «Интернет», будет принято решение о включении в единый реестр сетевого адреса, позволяющего идентифицировать сайт в сети «Интернет», содержащий информацию, распространение которой в Российской Федерации запрещено, а доступ к нему будет ограничен.
С уважением,
ФЕДЕРАЛЬНАЯ СЛУЖБА ПО НАДЗОРУ В СФЕРЕ СВЯЗИ, ИНФОРМАЦИОННЫХ ТЕХНОЛОГИЙ И МАССОВЫХ КОММУНИКАЦИЙ.
Последнее такое письмо было 09.12.19, а уже 11.12.19 сайт приуныл.
Что стоит знать о блокировке Роскомнадзором?
Шаги для разблокировки сайта РКН?
Зная нюансы указанные выше стоит начать с ответа на вопрос: можем ли мы устранить причину нарушения (контент который стал причиной блокировки), или наш сайт сплошное нарушение))?
В моем варианте сайт белый, только отдельные страницы серые, поэтому опишу шаги для этого случая. В случае если такой контент удалить не возможно, шаги будут отличаться.
Минимизируем потери трафика
Первоочередная задача при блокировке сайта Роскомнадзором конечно же минимизировать потери посещаемости на время, пока идет процесс разблокировки сайта. Для этого:
Здравствуйте. Сайт https:// адрес был внесен в реестр запрещенных. Сообщаю Вам, что я устранил причину внесения сайта в реестр, все страницы нарушающие правила удалены с портала. В связи с этим прошу Вас удалить сайт из https://адрес данного реестра и возобновить доступ. Сообщите пожалуйста о статусе заявки, о том нет ли более проблем с сайтом которые могут повлечь его блокировку, и сроки когда можно ожидать восстановления работоспособности сайта.
С уважением, Зинченко А.А
Все. Дальше остается только ждать ответа от них.
Сколько времени проходит на разблокировку сайта от Роскомнадзора?
Письмо мной было написано им 13.12.19, и уже (или аж) 24.12.19 я получил ответ:
С уважением,
ФЕДЕРАЛЬНАЯ СЛУЖБА ПО НАДЗОРУ В СФЕРЕ СВЯЗИ, ИНФОРМАЦИОННЫХ ТЕХНОЛОГИЙ И МАССОВЫХ КОММУНИКАЦИЙ.
В среднем ответ приходит в промежутке от 7 до 10 дней.
25.12.19 трафик на сайт заметно улучшился, но так как Новый год на носу трафик всегда к этому времени проседал, поэтому оценить реальные потери сложно.
Действия после разблокировки
Последствия блокировки и парадоксы
Позиции
Самым интересным является то, что после блокировки сайта позиции в Яндексе начинают стремительно падать, а вот в Гуле наоборот позиции начали расти.
На сегодняшний день (конец Января) позиции в Яндексе восстановились, за исключением некоторых отдельных запрос
Посещаемость
Конечно же посещаемость на время блокировка значительно просела, практически весь российский трафик ушел. Создание домена зеркала не дало ощутимого эффекта на таких коротких сроках, его польза лишь в том, чтобы предоставить доступ к сайту постоянным посетителям. Новые на него идут в очень малых количествах так как он не успел проиндексироваться и занять позиции вытеснив старый домен.
На сегодня посещаемость восстановлена, можно даже сказать полностью, и даже больше, с учетом корреляции на Январь месяц, который всегда был на сайте хуже Декабря.
Но вот если до блокировки лидером по трафику был Яндекс (хоть и не с большим отрывом), то теперь им стал Google, и отрыв уже заметен. При этом позиции в Яндексе восстановлены полностью.
Здесь я описал историю и шаги для сайта, у которого лишь некоторые из страниц нарушали правила РКН, если же сайт сам по себе из серых и черных ниш, то шаги по выходу с под бана будут различаться. Вернее это будет история не выхода с под блокировки, так как его разблокировать не получится, а о том, как восстановить трафик на новом домене-зеркале. При этом 301 редирект и склейка со старым сайтом, как я говорил ранее, скорее всего снова приведет к новой блокировке. Опыта такого пока нет, как будет может напишу отдельную статью.
Если у вас есть свой опыт вывода сайтов с под блокировки РКН было бы интересно почитать ваше мнение и опыт в комментариях, или на отдельных статьях по теме.
Кейс: Что делать, если ваш сайт заблокировал Роскомнадзор?
Роскомнадзор (Федеральная служба по надзору в сфере связи, информационных технологий и массовых коммуникаций) учреждён для того, чтобы блокировать доступ к интернет-ресурсам по запросу прокуратуры и других структур. Ограничение доступа осуществляется во внесудебном порядке, поэтому производится достаточно оперативно.
Блокировка РКН происходит на уровне интернет-провайдеров — все операторы связи в обязательном порядке подключаются к информационной системе, в которой содержится список заблокированных сайтов (Единый реестр запрещённых сайтов). За актуальность сведений в реестре отвечает служба Роскомнадзора. Проверить блокировку URL-адресов можно на сайте РКН.
Информацию о причинах блокировки можно найти на сайте Роскомнадзора
В свою очередь провайдеры обязаны обеспечить блокировку ресурса, чтобы исключить доступ пользователей к запрещённому контенту. Также ограничивается доступ к VPN-сервисам и анонимайзерам, своевременно не подключившимся к реестру.
Причины блокировки
Перечень оснований для блокировки ресурса определяется федеральным законодательством. Доступ к сайту ограничивается, если в его контенте будут найдены признаки:
Даже у легального бизнеса есть вполне реальная возможность попасть в реестр запрещённых сайтов.
Кейс сети «Горилка»
Сайт магазинов алкогольной продукции под брендом «Горилка» gorilka63.ru оказался заблокирован хостинг-провайдером по требованию Федеральной Службы по регулированию Алкогольного рынка (Росалкогольрегулирование). Законодательство он не нарушал, но бремя доказательства невиновности и разблокировки в данном случае ложится на плечи владельцев ресурса.
В случае блокировки по решению Росконадзора в браузере появляется специальное уведомление
Как снять блокировку Роскомнадзора с сайта
Не стоит рассчитывать на то, что обычные пользователи будут искать способы обойти блокировку сайта Роскомнадзором и вы сможете сохранить свой трафик.
Устранить нарушения
Важно понимать, что разблокировка законопослушного ресурса — вопрос в первую очередь юридический. Юристы компании «Горилка» связались с Роскомнадзором, чтобы уточнить пути устранения нарушений, приведших к блокировке. Официальной причиной значилась продажа алкоголя через интернет, но, как выяснилось, сайт попал под санкции службы из-за того, что не были указаны лицензии на торговлю спиртными напитками и ИНН точек продаж. На сайте также не имелось сообщения, указывающего в явном виде на отсутствие дистанционной торговли.
После устранения этих нарушений, была отправлено уведомление в Роскомнадзор на исключение из реестра. Заявка составляется в свободной форме и отправляется по электронному адресу zapret-info@rkn.gov.ru.
Нарушения, найденные Росалкогольрегулированием, устранены
Сохранить трафик
Второе, что важно понимать, что решение вопросов с государственным ведомством — вопрос не быстрый, поэтому, чтобы избежать полной потери трафика на значительное время (срок рассмотрения заявки Роскомнадзором по закону до 30-ти дней), мы предприняли следующие меры:
С момента отправки заявки на разблокировку 24 октября до разблокировки 28 ноября прошло все же чуть больше 30-ти дней.
Информацию о заблокированных сайтах и историю блокировок можно найти на сайте общественной организации Роскомсвобода
После снятия ограничений с ресурса можно возвращаться к старому доменному имени, проведя обратные действия.
В данном кейсе сайт также переведён на HTTPS-протокол. Так мы не только сохранили трафик на уровне до блокировки, но и увеличили его, обеспечив сайт безопасным подключением.
Трафик до, во время и после блокировки
7 способов зайти на заблокированный сайт 2021
Эффективные способы обхода блокировки сайтов
Сеть Интернет изначально создавалась с целью предоставления ее пользователям доступа к информации из любой точки мира, включая видео-контент и музыку. Но, несмотря на это, доступ к ресурсам некоторых сайтов сегодня может быть ограничен. Это связано с региональными ограничениями, которые вводятся по усмотрению законодательных органов.
Если вам все же необходимо выполнить вход на заблокированные сайты, существует несколько методов обойти подобные ограничения. Далее в статье мы рассмотрим особенности и эффективность каждого из них.
Расширения для веб-обозревателей
Чаще всего для просмотра сайтов и получения доступа к контенту используются сторонние браузера, такие как Chrome, Firefox или Opera. Каждый из них обладает возможностью расширения своего функционала при помощи специальных дополнений, к числу которых относится и программное обеспечение для обхода блокировки сайтов. Принцип работы таких расширений заключается в перенаправлении трафика и сокрытии реального местоположения, что позволяет обойти заблокированный сайт.
Чтобы воспользоваться этой функцией в рамках браузера Google Chrome, необходимо:
При использовании других Интернет-обозревателей, чтобы зайти на заблокированный сайт, потребуется выполнить аналогичные действия, а в некоторых и дополнительно купить подписку.
Браузеры с интегрированным VPN-сервисом
Если предыдущие действия вызывают у вас сложности, можно использовать более простой вариант обхода региональных ограничений – браузеры со встроенным VPN. В отличие от предыдущего решения они существенно ограничивают скорость работы в сети Интернет, однако при этом обеспечивают достаточно стабильное соединение.
К числу самых популярных Интернет-обозревателей, через которые производится разблокировка сайтов, относятся:
Некоторые из них также возможно использовать для обхода региональных ограничений на смартфонах, использующих для работы ОС iOS или Android.
Браузер TOR и распределенные сети
Не менее эффективным и в то же время достаточно простым способом обхода блокировки является использование Tor Browser. Особенность данного программного обеспечения заключается в использовании распределенной сети, не позволяющей Интернет-ресурсу получить доступ к информации о пользователе или его текущем местоположении. Это обеспечивает не только возможность получить доступ к заблокированным сайтам, но и защиту используемого устройства от атак хакеров.
Данный метод является общедоступным и абсолютно бесплатным. Однако он имеет один существенный недостаток – значительное снижение скорости подключения.
Сервисы VPN
При необходимости обойти запрет на сайты также можно при помощи сервисов VPN. Данное программное обеспечение представлено в виде специального приложения с довольно простым интерфейсом, позволяющим без особых усилий получать доступ не только к сайтам, но также и к стриминговым сервисам и услугам других стран.
Существующие сегодня VPN-сервисы, позволяющие получить доступ к заблокированному сайту, можно условно разделить на два вида:
Кроме того, последние отличаются мультиплатформенностью и могут устанавливаться на любые операционные системы и устройства, включая смартфоны на Android и iOS.
DNS-сервисы
Несмотря на столь широкий выбор способов, их использование может не принести желаемого результата, так как блокировка некоторых ресурсов может осуществляться за счет настроек DNS. В таких случаях, чтобы зайти на заблокированный сайт, потребуется воспользоваться DNS-сервисами. Принцип их работы заключается в перенаправлении трафика через туннель таким образом, чтобы сайт его распознавал как трафик определенной страны.
Преимущества DNS-сервиса заключаются в:
Более того данный метод позволяет смотреть заблокированные сайты на всех устройствах, подключенных к сети, независимо от используемой операционной системы.
Прокси-серверы
Для получения доступа к определенным сайтам может быть недостаточно шифрования и обыкновенной смены IP-адреса, которые производятся всеми описанным выше методами. Это связано с тем, что некоторые ресурсы используют самые современные технологии защиты от взлома и могут определять поддельные IP-адреса. Лучшим решением в таком случае, чтобы открыть заблокированный сайт, будет использование прокси-сервера.
Принцип работы данного метода заключается в одновременном использовании нескольких реальных IP-адресов. Это создает видимость того, что ресурс просматривается одновременно несколькими пользователями из разных стран. Таким образом, гарантируется сохранение анонимности, обход блокировки и надежность соединения. Чтобы воспользоваться подобным сервисом по разблокировке сайтов, пользователю потребуется обратиться к поставщику соответствующих услуг, где ему предложат либо скачать приложение, либо установить соответствующее расширение для браузера.
Создание собственного сервиса VPN
Если вас не устраивает ни один из перечисленных выше вариантов, существует еще один способ обойти запрет на сайты – это создание собственного сервиса VPN. Для этого потребуется:
Таким образом, можно создать собственный небольшой сервер VPN персонально для вас и вашей семьи или же полноценный сервис, которым смогут пользоваться тысячи людей.
Блокировка сайта РКН: Блокировка и технические нюансы
Сайт попал в запрещенный список ресурсов Роскомнадзора и его заблокировали? В данном материале поделюсь своими наблюдениями и тем, что было с проектом клиента, который попал под блок РКН.
Всем привет. На связи Толстенко Александр. В общих чертах принцип работы Роскомнадзора и инструкцию, что делать если сайт заблокировали, писал в статье: РКН: Что это такое, как работает ведомство, можно ли выйти из под блокировки.
P.S.: Материал вычитали и дополнили профессиональные сеошники.
В данной статье, опишу как вообще происходит блокировка и свои наблюдения за клиентским проектом, который попал под блокировку РКН и что с ним происходило во время и после ее снятия.
P.S.: Рекомендую ознакомиться с первыми двумя ссылками выше, т.к. каждый текст является дополнением текущего. Из за большого объема и множество технической информации, пришлось разбить материал на части. Ниже, напишу только о том, что было с сайтом.
Что происходит с сайтом для поисковых систем, когда его заблокировали?
Ничего. Поисковые роботы Яндекс и Google продолжали индексировать сайт в обычном режиме.
Ниже, примерно по дням, напишу кратко свои наблюдения за проектом, который попал «под раздачу» РКН.
Почему примерно? Изначально, не планировал делиться наблюдениями за проектом. Хронологию событий восстанавливал по памяти и переписке с клиентом, в которой остались кое какие скрины.
P.S.: P.S.: На продвижении находился очень большой проект. Поэтому он долгое время не индексировался поисковыми системами, особенно Гугл (он упорно не хотел клеить старый домен к новому), в отличие от Яндекса.
День 1
Когда сайт перестал открываться в браузере, причину поняли сразу, как только проверили логи сервера и посмотрели почту на которую был зареган выделенный сервер. От хостинг провайдера, в почте было «письмо счастья» РКН, которое владелец сайта благополучно не прочитал (у меня доступов не было).
По логам сервера, сайт парсился ботами Яндекс и Гугл, как ни в чем, ни бывало.
Ключевые запросы по которым ранее были переходы на портал, по-прежнему держались в ТОП 10 поисковой выдачи, но при попытке перехода по ссылке из серча, проект не работал, т.к. уже был заблокирован хостингом из за выявленных нарушений РКН.
P.S.: Если важно сохранить трафик и быстро среагировать, рекомендую настраивать мониторинг минимум раз в сутки, на попадание сайта в список РКН.
День 2
После того, как в первый день погуглил и поизучал инфу, которой было с гулькин нос и она была раскидана по разным источникам, проконсультировались с юристом, опросили знакомых владельцев сайтов, обсудили свои догадки (в постановлении не было четкой причины, было указание только на домен), начали править тексты и убирать блоки за которые могли закрыть сайт.
Т.к. мы не знали, сколько бы длилась эпопея с разблокировкой домена, было принято решение купить домен-зеркало и склеить его через 301 редирект, чтобы можно было побыстрее вернуть трафик и заменить url неработающего домен на новые в результатах поисковой выдачи.
P.S.: Как разблокировать старый домен и какие еще действия еще можно предпринять, подробно написал в статье: РКН: Что это такое, как работает ведомство. (ссылка в самом начале).
День 4
Сайт по прежнему недоступен для пользователей по старому домену, только еще появилось сообщение о блокировки web-ресурса от интернет провайдера.
При попытке определить какие страницы домена остались в индексе поисковой системы посредством запроса в яндексе
увидел, что в выдаче начали появляться страницы нового домена, т.е. пошла склейка нового сайта.
День 5
Решил проверить, начал ли Гугл склеивать новый домен со старым. Для этого вбил в строку поиска выборочно несколько самых посещаемых страниц сайта. В индексе, по-прежнему были ссылки на старый домен.
Попытался ускорить попадание в индекс нескольких важных страниц нового домена закупкой ссылок с сайтов СМИ — особого результата не увидел, хотя ссылки были не с самых дешевых источников и посещаемость у них была 1000-3000 чел/сутки.
P.S.: При проверке на момент написания текста выяснил, что в ТОПе по старому домену еще есть очень много не склеенных страниц портала.
Когда делал выборочную проверку по ключам, которые были в ТОПе в Гугла и давали максимальный трафик, заметил конкурента, который попал под блок чуть раньше нас и по наблюдениям, точно не работал где то недели две, пока они не переехали на другой домен. Или сразу не заметили, или не знали что делать и как быстро решить проблему. У него тоже в ТОПе долго висели url от старого домена по некоторым страницам.
P.S.: В процессе работы увидел еще нескольких конкурентов, которые также попали в список РКН, но они быстро восстановили доступ к старому домену и переклеили информацию на новый.
День 7
После выходных, опять проверял сайт в результатах выдачи Гугла, чтобы посмотреть изменилось ли что-то от проделанных действий. Увидел забавную картину, о которой я бы и не узнал, если бы за выходные не переехал с Краснодара, в соседний небольшой городок.
Так вот, когда перешел по ссылке из результатов выдачи по старому домену и сайт открылся без vpn по новому, сразу не понял, что произошло. Спустя несколько минут, поймал себя на мысли, что домен у нового провайдера не блокируется и меня редиректит на новый.
Тогда пошел проверять блокировку ресурса с мобильного телефона и разных ip-адресов: МСК, Краснодара и смартфона с питерской симкой. Сайт был в блоке, а в соседнем городе нет. Почему так, не знаю, возможно дело в кэше DNS провайдера, а может в другом причина.
P.S.: Была у меня одна забавная история с кэшем dns у одного Севастопольского провайдера. Когда жил в Севастополе и делал сайт на одном хостинге, а потом перенес его на другой. Сайт с кабельного интернета был недоступен, а с мобильного телефона работал. Обратился к провайдеру, который ответил, что видимо закешировался dns. Хоть техподдержка и сказала, что кешь скинула и сайт должен был сразу заработать, через кабель он заработал только спустя 3-5 дней.
День 8
P.S.: Пока ждали ответ, в панели Яндекс.Вебмастере сайты расклеились из за различного контента) Что делал, подробно написал в первой ссылке в начале статьи выше.
День 10
Обратную связь от РКН после подачи заявления получили примерно через 7 дней. Когда сняли ограничение, по старым url с поиска, при клике редиректило уже на новый домен без впн.
Что было с трафиком до/после?
После блокировки ресурса, трафик сократился примерно на 80-90%, т.е. откуда то, на сайт все же переходы были. Как выяснилось позже, когда анализировал метрику, остаточный трафик на сайт шел с «глубинки». Об этом бы никогда бы не узнал, не переехав за выходные в другой населенный пункт.
P.S.: На момент написания статьи трафик восстановился примерно на 80% из Гугла и Яндекса. Проблема в том, что портал очень большой и боты его не успевают быстро переиндексировать, хотя и был настроен Last-Modified.
Выводы
Ограничение доступа к веб ресурсу и его поддоменам происходит в первую очередь на уровне хостинга, во вторую провайдером связи, где есть нарушения.
Новое зеркало вскоре после переезда будет заблокировано, если не устранены предписания Роскомнадзора.
Если вы хотите быстро восстановить трафик, нужно использовать только 301 редирект. От 302 в результатах выдачи поисковых систем будут url заблокированного домена, кликнув по которому, посетитель будет видеть неработающий сайт.
Если резко упал трафик почти до нуля, первым делом проверяйте блокировку на сайте РКН. Если блока нет, копайте дальше.
А ваш проект блокировал РКН? Наблюдали, что происходит с проектом? Можете поделиться полезной информацией?