Sorry, you have been blocked
This website is using a security service to protect itself from online attacks. The action you just performed triggered the security solution. There are several actions that could trigger this block including submitting a certain word or phrase, a SQL command or malformed data.
What can I do to resolve this?
You can email the site owner to let them know you were blocked. Please include what you were doing when this page came up and the Cloudflare Ray ID found at the bottom of this page.
Cloudflare Ray ID: 80ec013548a3b369 • Your IP: Click to reveal 45.84.122.41 • Performance & security by Cloudflare
Как обойти блокировку сайта провайдером
Доверьтесь своей интуиции. Это случается довольно часто — как в странах с тоталитарными режимами, так и в демократических странах.
В этом руководстве мы расскажем вам все, что нужно знать о том, как провайдер блокируют сайты: как они это делают, как определить, что это ваш случай, и как обойти блокировку сайта провайдером.
Содержание
Может ли провайдер блокировать сайты?
Да, они правда могут это делать. Если кто-то скажет вам, что нет, то этот человек просто не понимает, как устроено подключение к интернету.
Вот в чем тут дело – когда вы открываете веб-сайт, ваше соединение проходит через вашего провайдера. Это необходимо, так как иначе у вас не было бы доступа в интернет.
То есть вместо такой схемы:
Ваше устройство → веб-сайт
Ваше соединение выглядит следующим образом:
Ваше устройство → сеть интернет-провайдера → веб-сайт
Поэтому провайдер без труда может решать, какими сайтами вам разрешено пользоваться, а какими нет.
Геоблокировка или блокировка сайта провайдером?
Не путайте эти два понятия. Если вы открываете веб-сайт и видите сообщение о том, что контент недоступен в вашем регионе, то это геоблокировка, а не блокировка сайта провайдером.
Вот пример того, как выглядит такое сообщение:
Чтобы узнать, как обойти геоблокировку, воспользуйтесь нашим универсальным руководством. Там подробно описано, что это такое, как это работает и как это обойти.
Как провайдер блокирует сайты?
Насколько мы можем судить, интернет-провайдеры могут использовать три метода:
1. Фаерволы
Фаерволы позволяют провайдерам (и другим администраторам сети) управлять потоками трафика внутри сети. По сути, ваш провайдер устанавливает правила входящего и исходящего трафика, а фаервол обеспечивает их соблюдение.
Если по такому правилу никто в их сети не может открывать Facebook, то все исходящие/входящие соединения с этим сайтом автоматически блокируются фаерволом.
И, как мы показывали чуть выше, все ваши соединения проходят через сеть вашего провайдера. Так что вам придется играть по их правилам.
Кроме того, фаерволы также работают на основе IP. А ваш провайдер – это тот, кто назначает вам IP-адрес. Поэтому, если вы пользуетесь его услугами для посещения интернета, правила трафика фаервола автоматически применяются к вам.
2. Фильтрация DNS
Когда вы вводите название веб-сайта в адресную строку браузера и нажимаете Ввод, все происходит в фоновом режиме:
- Браузер запрашивает у вашего провайдера IP-адрес сайта.
- Интернет-провайдер использует собственный DNS-сервер (который действует как телефонная книга интернета) и находит там IP-адрес, соответствующий названию веб-сайта.
- Провайдер возвращает IP-адрес сайта, и ваш браузер подключается к нему.
Если бы не было DNS-сервера провайдера, вам пришлось бы вводить IP-адрес веб-сайта в строке URL. Что просто крайне неудобно, будем честными.
Но, к сожалению, это также дает вашему провайдеру контроль над вашими DNS-запросами. Если он захочет заблокировать сайт, то просто настроит свой DNS-сервер так, чтобы он возвращал некорректный IP-адрес.
Например, допустим, он хочет заблокировать Facebook. Вместо того, чтобы возвращать IP-адрес Facebook (185.60.218.35), DNS-сервер вашего интернет-провайдера вернет IP-адрес, который не обслуживается или ведет на пустую страницу, либо на лендинг с объяснением, почему вы не можете получить доступ к сайту.
В качестве альтернативы можно просто дать DNS-серверу инструкцию игнорировать все запросы, запрашивающие IP-адрес Facebook.
3. DPI (глубокий анализ пакетов)
DPI – это метод сетевого анализа, который позволяет интернет-провайдерам анализировать ваши пакеты данных. Они могли бы использовать утилиты вроде Wireshark. Это означает, что провайдер сможет видеть нечто подобное подобное при проверке вашего трафика:
Однако нельзя полностью уверенно утверждать, что провайдеры будут пользоваться Wireshark. Мы используем эту утилиту как пример, чтобы показать вам, как работает DPI и как ваш сетевой трафик может выглядеть в глазах вашего провайдера.
С помощью DPI ваш интернет-провайдер сможет увидеть:
- Ваши незашифрованные DNS-запросы (к каким сайтам вы хотите подключиться).
- HTTPS SNI (указание имени сервера) – название сайта, который вы пытаетесь открыть. Таким образом, даже если вы посещаете только HTTPS-сайты, которые шифруют ваш трафик, ваш провайдер все равно сможет видеть, какие сайты и веб-страницы вы просматриваете.
Благодаря этой информации они могут использовать DNS-фильтрацию и фаерволы для блокировки сайтов, к которым вы пытаетесь получить доступ.
Как проверить, блокирует ли ваш провайдер сайты
Для начала, вы можете видеть подобные сообщения при попытке открыть сайт:
- Нет источника
- Не удалось воспроизвести
- Проверьте подключение к Интернету
- Каталог недоступен
Есть вероятность, что ваш интернет-провайдер просто-напросто блокирует веб-сайты. Однако это не 100% гарантия, поэтому вот что еще можно сделать, чтобы проверить, блокирует ли ваш провайдер сайты:
- Включите мобильный интернет вместо домашнего. Если ваш мобильный тариф принадлежит другому оператору и вы можете получить доступ к нужным сайтам, то это значит, что ваш провайдер блокирует сайты.
- Попробуйте использовать онлайн-инструмент Down for Everyone or Just Me. Кроме того, попробуйте погуглить “[название сайта] + status.”
- Если у вас есть друзья или родственники, которые находятся за границей или используют другого провайдера, попросите их проверить, работает ли у них нужный вам сайт.
- Если ни один из этих советов не сработал, вам придется выйти из дома, найти ближайшее место, где есть общественный Wi-Fi (от другого провайдера), подключиться к их сети и посмотреть, работает ли сайт там. Если да, то ваш провайдер определенно блокирует веб-сайты.
Почему провайдер блокирует сайты?
Трудно сказать. Причин может быть сколько угодно. Мы считаем, что провайдеры могут блокировать сайты по следующим причинам:
- Они используют системы безопасности, которые считают веб-сайты вредоносными. Или они сами недолюбливают определенные сайты и домены.
- Правительство вынуждает их блокировать эти ресурсы. Обычно это происходит в странах с репрессивными режимами, таких как Китай и Туркменистан.
- Законы страны способствуют блокировке сайтов интернет-провайдерами. Например, порнографические сайты, азартные игры или торренты также могут быть вне закона.
- У них какие-то личные или технические проблемы с веб-сайтом, который вы пытаетесь посмотреть. Однако мы не нашли ни одного случая, когда блокировка происходила по подобной причине. В таких ситуациях они, как правило, занижают вам пропускную способность.
Если ничего из этого не относится к вашей ситуации, вы всегда можете позвонить в техподдержку и спросить.
Как обойти блокировку сайта провайдером?
Итак, мы выяснили, что ваш провайдер при желании может блокировать веб-сайты. Вы даже знаете, как это возможно с технической точки зрения.
Но что можно сделать, чтобы обойти эти методы блокировки?
Вот что показывают наши исследования и тесты:
Базовые методы
Начнем с довольно простых советов. Вам не придется сильно утруждаться, чтобы опробовать их. И в отличие от всего остального, что мы сегодня обсудим, эти советы не включают сторонние услуги, которые вам потребуется купить и/или установить.
Итак, давайте начнем:
- Во-первых, попробуйте открыть сайт по IP-адресу вместо URL. Если ваш провайдер использует DNS-фильтрацию или заблокировал только URL-адрес, то вы должны иметь возможность разблокировать сайт. Чтобы выяснить IP-адрес сайта, используйте команду ping (“ping [site name]”) в командной строке (Windows) или терминале (macOS).
- Если у вас безлимитный мобильный трафик и заблокированные сайты открываются на вашем телефоне, то можете использовать этот безобидный метод. Если у вас современный и достаточно мощный смартфон, вы можете даже создать точку доступа и подключиться к ней с нужного устройства. Однако не ждите очень высоких скоростей.
- Измените свой DNS-адрес, чтобы избежать DNS-фильтрации. Попробуйте вот эти адреса:
-
: 208.67.222.222 и 208.67.220.220. : 8.8.8.8 и 8.8.4.4. : 1.1.1.1.
Если эти опции не сработают, переходите к другим нашим рекомендациям.
Используйте VPN
VPN – это онлайн-инструменты, которые скрывают ваш IP-адрес и шифруют ваш трафик. В данном случае вам будет интересен пункт “Скрыть свой IP-адрес”. Это функция, которая позволяет обойти интернет-провайдеров, блокирующих веб-сайты.
Вот как это сделать:
- Сначала вы подписываетесь на VPN-Сервис, затем скачиваете и устанавливаете приложение.
- Затем вы подключаетесь к VPN-серверу. В этом случае подойдет любой сервер.
- Затем сервер и приложение согласуют и установят между собой зашифрованное соединение.
- С этого момента, при посещении сайта все ваши запросы будут поступать на него через VPN-сервер. Точно так же все содержимое сайта будет поступать на ваше устройство через сервер. Это, по сути, посредник между вами и сетью.
- Таким образом фаервол вашего провайдера больше не сможет регулировать ваш доступ к сайтам. Весь ваш веб-серфинг будет происходить через IP-адрес сервера. И этот адрес не будет блокироваться никакими правилами фаерволов.
Более того, как правило, VPN имеют свои собственные DNS-серверы. То есть, помимо обхода фаерволов, вы также можете обойти DNS-фильтрацию.
Да, и регулирование DPI и пропускной способности больше не будет проблемой, так как VPN шифруют ваш трафик насквозь. Ваш провайдер не может видеть, какие сайты и страницы вы просматриваете.
Разблокируйте любые желаемые веб-сайты при помощи CactusVPN
Если вам нужен действительно хороший VPN, то предлагаем познакомиться с нашим Сервисом. У нас есть огромный опыт в том, как помочь людям с обходом цензуры и регулированием от интернет-провайдеров. Кроме того, мы также предлагаем поддержку DoH (DNS Over HTTPS, “DNS поверх HTTPS”). С помощью этой технологии вы можете зашифровать свои DNS-запросы и избежать любой формы DNS-фильтрации.
Специальное предложение! Получите CactusVPN за 3.5$ в месяц!
И как только вы станете клиентом CactusVPN, у вас будет 30-дневная гарантия возврата денег.
Используйте прокси
Прокси-сервер работает точно так же, как VPN – он перехватывает и перенаправляет ваши запросы на сайты, скрывая при этом ваш реальный IP-адрес.
Однако прокси-серверы не предоставляют такого сильного шифрования, как VPN. Так что вы остаетесь уязвимы перед DPI. Кроме того, они, как правило, не включают DNS-серверы, поэтому DNS-фильтрация также может быть проблемой.
С другой стороны, слабое шифрование означает, что вы получите лучшую скорость, чем при использовании VPN – конечно, если вы не используете бесплатный онлайн-прокси. Эти службы быстро переполняются и применяют ограничения по пропускной способности, поэтому там часто очень медленные скорости.
Вместо того чтобы платить за автономный прокси-сервер, задумайтесь о подписке на CactusVPN. За эту цену вы получаете не только VPN, но и серверы, которые дополнены прокси-серверами (без каких-либо дополнительных затрат).
Используйте Tor
Tor (The Onion Router) — это анонимный онлайн-инструмент, который скрывает ваш IP-адрес и шифрует трафик. Но делает он это немного иначе, нежели VPN или прокси.
В целом, в случае с Tor ваш трафик переходит по разным серверам (обычно по 3), прежде чем достичь сайта, который вы хотите посетить. Таким образом, Tor скрывает ваш IP-адрес и помогает обойти блокировку сайта провайдером.
Более того, Tor также несколько раз шифрует ваш трафик. Так что, у вас будет сразу несколько уровней защиты.
Однако у Tor есть некоторые недостатки, которые точно не делают его самым безопасным способом добиться конфиденциальности.
Помимо непонятной поддержки и нескольких утечек IP-адресов, также существует проблема скорости: эта сеть слишком медленная. В ней около 6 000 серверов и чуть более двух миллионов пользователей. Так что да, ситуация выглядит не очень хорошо.
Может ли провайдер заблокировать средства разблокировки?
Возможно, вы где-то читали статьи и слышали, что провайдеры якобы не могут этого сделать.
Безусловно, мы не любим приносить плохую весть, но в действительности они это могут. Конечно, для этого им придется вести активное наблюдение за тем, какие инструменты вы используете.
Как правило, провайдеры используют DPI для обнаружения VPN-трафика (особенно OpenVPN) и просто блокируют IP-адрес, к которому вы подключаетесь. Мы не уверены на 100%, работает ли DPI для трафика Tor, но есть и другие сервисы, которые могут вычислить его (например, Plixer или CapLoader).
Они также могут использовать DPI, чтобы узнать, используете ли вы сторонние DNS-серверы, а затем просто оборвать подключение к ним.
Что касается прокси, то большинство из них предлагают слабое шифрование или вообще не используют его. Таким образом, ваш провайдер может без труда анализировать ваши пакеты данных, чтобы узнать, какие сайты вы посещаете.
Интернет-провайдеры также могут работать с компаниями, которые предоставляют информацию об IP-адресах (например, MaxMind и IP2Location). У них есть базы данных, полные IP-адресов VPN-Сервисов и прокси (возможно, Tor тоже там числится, но эти базы пока еще общедоступны), а также доступ к сценариям и инструментам, которые автоматически блокируют эти адреса.
Что тут можно сделать?
Если ваш провайдер блокирует IP-адреса прокси, VPN и Tor, самый простой способ обойти это –подключиться к другому серверу. Таким образом, вы получите новый IP-адрес.
Конечно, если они продолжают блокировать все новые IP-адреса, к которым вы подключаетесь, то вам не повезло.
Если они обрывают ваши DNS-запросы, попробуйте переключиться на другого поставщика DNS. Хотя провайдеру будет нетрудно понять, что вы это сделали, и он начнет обрывать и эти запросы тоже. Лучшее, что вы можете сделать, – это включить DoH для шифрования ваших DNS-запросов. Вот как это делается в большинстве браузеров. А если вы являетесь пользователем CactusVPN, ознакомьтесь с нашими пошаговыми руководствами DoH.
Кроме того, используйте только те VPN-Сервисы, которые предлагают обфускацию. Таким образом, Вы можете скрыть свой трафик OpenVPN при DPI-анализе. В CactusVPN вы можете использовать obfsproxy сразу на нескольких платформах. Вы также можете использовать другие протоколы, но они используют выделенные порты, которые их выдают. Так ваш провайдер узнает, что вы используете VPN.
Приходилось ли вам когда-нибудь иметь дело с провайдером, блокирующим веб-сайты?
Если да, то что вы сделали, чтобы обойти блокировку? Удалось ли вам выяснить причину блокировки?
Не стесняйтесь, и расскажите нам о своем опыте в комментариях. И если вам действительно понравилась эта статья, не забудьте поделиться ею со своими друзьями в соцсетях.
Не работает WARP 1.1.1.1? Чем заменить VPN?
В начале 2022 года многим пользователям, которые даже не знали, что такое VPN, понадобились услуги виртуальной частной сети, в связи с тем, что на территории РФ компания Meta* была признана экстремистской организацией. Соответственно, Instagram*, Facebook*, другие соцсети и сайты стали недоступны. Блокировки сайтов — ограничивают малый бизнес и возможности общения.
Теперь для того, чтобы не прерывать свое общение с друзьями, развивать бизнес, продвигаемый через социальные сети, нужно скрыть свое реальное местоположение. Для этого нужно установить приложение на ПК или мобильное устройство.
Некоторые сервисы ВПН также подверглись блокировкам, а другие — просто перестали нормально функционировать. Например, VPN 1.1.1.1 не работает, хотя на некоторых устройствах установить соединение все-таки возможно. Роскомнадзор периодически блокирует сервисы, поэтому чтобы иметь возможность постоянно находиться на связи в заблокированных ресурсах, мы советуем попытаться устранить проблему самостоятельно или установить сразу несколько программ. Сегодня мы разберемся, как решить проблему неработающего VPN.
Что делать, если VPN 1.1.1.1 не соединяет
1.1 1.1 появился в 2018 году. Этот ВПН предлагает свои услуги пользователям бесплатно. Он помогает беспрепятственно попадать на заблокированные сайты, иметь доступ к информации, общению, продвижению. Также сервис обеспечивает конфиденциальность личной информации пользователя.
1.1 1.1 подходит для установки на ПК, а также телефоны и планшеты на базе Android/iOS. После выхода VPN компания разработала еще один популярный сервис на базе «единиц».
Позже вышел VPN-сервис, встроенный в приложение 1.1.1.1 — WARP. Его также можно было установить через магазины приложений. Но после того, как начались сбои с «единицами», WARP перестал подключаться.
Почему не работает 1.1.1.1
В марте 2022 года в техническую поддержку 1.1.1.1 стали поступать жалобы от пользователей, в которых говорилось о сбоях в работе программного обеспечения. Чуть позже стало известно, что он заблокирован по распоряжению Роскомнадзора.
Вместе с «единицами» под блокировку попали и другие ВПН. Например, на территории РФ не работают Lantern, Nord, Psiphon, Windscribe, но остались хорошие бесплатные версии VPN, при помощи которых можно зайти в заблокированные соцсети. О них мы напишем позже.
Пользователи, у которых установлен Proton VPN, также не могли попасть на заблокированные сайты. В новостях была информация о блокировке, но у некоторых абонентов он подключается, это может быть связано с оператором связи, через который устанавливается соединение с мобильным Интернетом.
Все ограничения по использованию ВПН вводятся «в рамках закона о суверенном рунете в России». По закону «О связи» VPN признаются угрозой, ведь они открывают доступ к запрещенным ресурсам на территории РФ.
Многие ВПН умеют маскировать трафик, и система не может распознать, что с устройства вход совершается при помощи VPN. Попробуйте включить этот режим на 1.1.1.1, тогда, вероятно, он начнет работать.
Для работы можно проверить настройки DNS и применить другую конфигурацию. Например, если провайдер заблокировал не все DNS сервера, то при изменении точки подключения ВПН вновь заработает. Но это можно выяснить только опытным путем.
Обратитесь в техническую поддержку сервиса. Специалист даст комментарии по текущей ситуации в плане блокировки. Есть вероятность, что трудности с подключением связаны не с ограничениями ПО, а с работой программы. Техподдержка знает пути обхода и может помочь вам восстановить интернет-соединение через ВПН.
Какие VPN-сервисы работают в РФ
Несмотря на то, что сервис 1.1.1.1 подвергся блокировке, другие расширения и программы все еще функционируют. Например, для того чтобы открыть недоступные сервисы на ПК, установите браузерное расширение Troywell VPN. При помощи него можно не только сохранить конфиденциальность данных пользователей в сети, но и обеспечить доступ к заблокированным ресурсам.
Troywell VPN — новая разработка, с множеством серверов по всему миру. Скачивание, установка и использование — предоставлены совершенно бесплатно. ВПН отдает высокую скорость и не имеет ограничений по скорости, трафику или времени использования. Подходит для всех браузеров, поэтому вам не придется менять привычное программное обеспечение на компьютере. Революционные методы шифрования обеспечивают полную безопасность.
К установке доступны три версии продукта:
- Lite — не требует специфической настройки и подходит для начинающих пользователей. Соединение происходит только через серверные прокси.
- Middle — имеет расширенный функционал, дополнительные локации и прокси в сетях Wi-Fi.
- Pro — настройки сети можно выполнить вручную, больше серверов, можно подключаться через мобильные прокси, возможно настроить ПО «под себя».
Если вы хотите установить платный сервис VPN, то учитывайте — оплата подписок для многих сервисов сейчас недоступна в РФ.
Блокировка VPN в России
Возможно ли заблокировать все сервисы, чтобы ограничить доступ пользователей к «внешнему Интернету». Много дискуссий было на эту тему, но единственный вывод — нет, такое развитие событий является практически невозможным.
Новые сервисы будут появляться постоянно, что, напротив, снизит уровень контроля трафика и может привести к еще более плачевным последствиям. Тем более, если заблокировать вход через VPN на определенные ресурсы, то граждане РФ, которые находятся за пределами страны не смогут попасть на Госуслуги или прочесть новости своей страны. Такое ограничение прав россиян считается неприемлемым.
Вывод
Все VPN в РФ заблокировать не смогут, но если вы заметили, что ваше программное обеспечение работает некорректно, то пора искать другой способ доступа к информации.
Устанавливайте бесплатный сервис Troywell VPN в свой браузер и продолжайте развивать свой бизнес в социальных сетях, через мобильные приложения, общаться с друзьями или родственниками, читать новости с зарубежных сайтов.
*Социальные сети Instagram и Facebook запрещены в РФ. Решением суда от 21.03.2022 компания Meta признана экстремистской организацией на территории Российской Федерации.
**Reels – формат публикации в запрещенной в Российской Федерации организации.
Приложение 1.1.1.1: Как в России обойти блокировку Интернет-ресурсов
С момента начала российского вторжения в Украину приложение из США занимает первое место в списке загрузок в России. Приложение под названием 1.1.1.1 от компании Cloudflare из Сан-Франциско помогает обойти контроль интернета. «Мы хотим, чтобы информация по-прежнему была в свободном доступе», — сказал финансовый директор Cloudflare Томас Зайферт в интервью Handelsblatt. По его словам, компания придерживается своего бизнеса в России.
Украина считает, что это неправильно. Заместитель премьер-министра Михаил Федоров раскритиковал руководство стартапа, стоимость которого оценивается примерно в 35 миллиардов долларов, как эгоистичное. «В то время, когда Россия нападает на Украину и ее ракеты и танки убивают беззащитных детей, российские веб-ресурсы также должны оставаться беззащитными», — потребовал Федоров.
Причина особого внимания к Cloudflare заключается в бизнес-модели компании. Приложение 1.1.1.1 — это лишь побочный продукт, который сейчас оказывается особенно полезным в России. Основной бизнес Cloudflare — это сеть серверов в более чем 270 городах по всему миру. Благодаря этому компания предлагает своим клиентам более быстрый доступ к их веб-сайтам.
В то же время компания также обещает защитить сайты своих клиентов от хакерских атак. Cloudflare является одновременно акселератором и защитником, отсекая нежелательные запросы и атаки до того, как они достигнут клиентов.
«Мы отражаем от 82 до 85 миллионов атак в день. Это невероятно большое число», — сказал Зайферт. Еще до начала российской атаки в Украине Cloudflare защищала многие организации в Украине с помощью своего сервиса, сказал он. «До вторжения мы подключили к нашей сети большую часть критически важной инфраструктуры в Украине. К правительственным сайтам, критической инфраструктуре, СМИ мы добавили еще множество ресурсов», — сказал Зайферт.
1. В России заблокировали Cloudflare WARP и другие VPN-сервисы. 16 марта 2022 года российские пользователи столкнулись с блокировкой работы популярного VPN-сервиса. https://www.comss.ru/page.php?id=10291 Так что как кому повезет с оператором.
2. Для Винды программа только на 10 и 11 версии.
Разве goodbyeDPI не помогает?
Кто-нибудь пользовался? Доверять можно?
Ответ на пост «Если ваш оператор ограничивает скорость торрентов»
Сам долго мучался с торрентами на теле2, 100% работающего способа качать на нормальной скорости не нашел. Обычно врубаю несколько торрентов и с каким-то шансом скорость одного из них поднимается до нормальной. Иногда получается скачать за ночь, а когда и несколько недель ждать приходится.
Для тех у кого остро стоит данная проблема советую вот такой сайт:
Скидиваете туда торрент файл, он выкачивает торрент себе, после чего его можно скачать обычной загрузкой через браузер. До 2гб бесплатно.
PS Ну и предупреждая коменнтарии типа «Зачем так жить, меняй провайдера» — за пределами крупных городов начинается совсем другая Россия.
Если ваш оператор ограничивает скорость торрентов
Стоило только сделать пост с вопросом на Пикабу. Тут же попался на ютубе рандомный ролик рандомного школяра, который смог победить ограничения банальной настройкой uTorrent.
Во вкладке BitTorrent выпиливаем все галочки, кроме двух; Исходящие -> Принудительно.
Во вкладке Скорость поставить галочку Применить ограничения к служебному трафику; максимум соединений и присоединенных пиров на торрент поменять на 1000.
Перезагружаем роутер/модем (или устройство, которое им прикидывается). Я на всякий случай перезагрузил всё — и ноут и телефон, который выполнял функцию вайфай-модема. И, сцуко, это сработало! Скорость была 7 кб/с, теперь норма.
Дополнение от автора ролика — данный способ периодически отваливается, и тогда придется переустанавливать программу и повторять все это снова.
В любом случае, биг-зур респект пацану.
Роскомнадзор ограничил доступ к сайту Greenpeace
Доступ к сайту международной неправительственной некоммерческой организации Greenpeace International ограничен на территории РФ, как следует из данных сервиса Роскомнадзора . Сайт оказался заблокирован 3 июня, в субботу.
Причины ограничения доступа не указаны. Однако, 29 мая, Минюст РФ добавил организацию Greenpeace International (Нидерланды) в перечень иностранных и международных неправительственных организаций, деятельность которых признана нежелательной на территории РФ.
19 мая Генпрокуратура РФ признала организацию нежелательной.
Авито имеет разрешение на сбор биометрических данных(?)
Размышления НЕ юриста:
Сейчас многих возмущает добровольно-принудительная верификация пользователей авито по паспорту и видеозаписи лица.
Насколько правомерны эти требования?
В процессе разблокировки моего профиля на авито, выяснились некоторые интересные моменты.
Приведу цитату из переписки с техподдержкой:
Замечу, что "персональные данные" не равно "биометрические данные", это не одно и то же. Персональными данными являются ФИО, ИНН адрес, телефон и пр. Биометрические, — это часть персональных, к обработке которых применимы особые правовые требования. Так какие же данные относятся именно к биометрическим?
"Установить его личность", в моём понимании, — это "идентифицикация"
Авито намеренно открещивается от этого термина, предпочитая ему термин "верификация".
Но, позвольте, для какой цели тогда требуют фото паспорта? На мой взгляд ( я не юрист), это и есть самая что ни на есть " идентификация", а ни какая не "верификация".
Теперь следующий вопрос:
С какой целью авито идентифицирует наши с вами личности?
Первое, что приходит на ум, — это сбор данных о продажах конкретного лица для налоговых и прочих, заинтересованных госорганов. На эту мысль также наталкивает возможность привязки профиля к порталу госуслуг. Но.
. из этого скрина видно, что это не является значимой целью идентификации личности авит(ой).
Вы что-нибудь понимаете, дорогие личности? Я, — нет.
Поэтому я очень надеюсь получить, в комментариях ответы, или версии (желательно от юристов, можно и от представителя авито):
1. Относится ли к биометрическим данным то, что просит авито и имеет ли оно право на их сбор?
2. Какая реальная цель идентификации пользователей авито?
3. Как грамотно отказаться от данной идентификации и остаться зарегистрированным пользователем авито?
P.S. Логичные размышления НЕ юристов тоже приветствуются.
Как устроен поиск в моём Telegram-боте для поиска торрентов
Недавно я написал пост, в котором поделился своим Telegram-ботом для поиска торрентов с рутрекера. На удивление оказалось, что сотням людей это оказалось нужно и полезно, что вдохновило меня на дальнейшую работу над этим небольшим проектом и поддержку пользователей.
В этой статье я хочу рассказать о некоторых технических деталях реализации, о которых меня неоднократно спрашивали и в комментариях, и в личных сообщениях через /f.
Что нужно, чтобы найти торрент?
Разумеется, сначала нужен ваш поисковый запрос. Его вы пишите просто как сообщение боту, например, вот так:
Бот получает ваше сообщение и делает с ним несколько вещей. Во-первых, из сообщения удаляются некоторые специальные символы (например, знаки пунктуации и всякие $*^@). Во-вторых, запрос разбивается на отдельные слова.
На этом этапе может обнаружиться, что ваш запрос пустой. Тогда вам отправляется сообщение, указывающее на невозможность поиска.
Далее нужно собственно какое-то хранилище знаний о существующих торрентах, где можно этот самый поиск производить. В нашем случае это собственная база данных, содержащая относительно актуальную информацию о состоянии раздач на рутрекере. О том, почему было выбрано именно такое решение, я расскажу ниже. Пока что отметим, что информации о раздачах много, а полезной для нас среди неё маловато. Например, когда пользователь ищет что-то, как правило это часть названия раздачи (этому способствует бушевавшая в своё время на рутрекере модерация раздач, требовавшая строгих правил оформления), название раздела, имя файлов.
База для поиска устроена крайне примитивно: у нас есть keyword — ключевое слово, по которому будем искать соответствие, ну и адрес раздачи, которой этот keyword соответствует. Получается, что построив индекс базы данных по полю keyword, мы сможем быстро находить вхождения этого слова в базе. Сами keyword’ы мы будем брать из названия раздачи, названия раздела, и некоторых файлов из раздачи.
Теперь осталось соединить ваш запрос и базу. Для этого ещё нужно проследить, чтобы наши keyword были такого же вида, как и слова из запроса после предобработки (см. выше). Например, если мы удаляем какие-то спецсимволы из слов поискового запроса, они также должны удаляться из keyword, иначе чуда не произойдёт.
Ну и конечно же, базу желательно взять побыстрее, т.к. всем хочется, чтобы их запросы обрабатывались как можно быстрее. Поэтому выбор был сделан в пользу ClickHouse. Выглядит поиск подходящих под ваш набор ключевых слов топиков примерно вот так:
Помимо самого факта вхождений, здесь проверяется, чтобы все ключевые слова из запроса были найдены для данной раздачи (topic_id). Т.о. если хотя бы одного слова из вашего запроса в индексе не нашлось, такая раздача не будет вам показана.
Немного статистики: всего уникальных ключевых слов в индексе на сегодня содержится 1,144,565 — что не так много.
Описанная выше схема является довольно примитивной для того, чтобы называться полноценной системой поиска, однако она рабочая. Теперь ответы на другие вопросы, которые могли у вас возникнуть, либо уже были заданы в комментариях.
Почему нельзя просто использовать поиск рутрекера?
Можно, и более того: тогда вы точно найдёте то, что искали бы на рутрекере.
К сожалению, плюсы использования поисковой системы рутрекера на этом заканчиваются.
Обратите внимание, что на рутрекере используется приведение к некоторой базовой морфологической форме, поэтому черная = черный, весны = весна. Из-за этого в результатах могут появиться такие странные находки. У нас вы получите на тот же запрос такое:
Здесь же хочется отметить, что в отличие от поисковой системы рутрекера, на мою можно повлиять, оставляя пожелания и комментарии, которые помогут мне в дальнейшем развитии проекта и сделать поиск лучше.
Вторая и ещё более важна причина использовать свой поиск: независимость от состояния форума. Форум может быть отключён для профилактических работ именно тогда, когда вам нужно что-то поискать, либо может быть вообще удалён, не выдержать DDoS и упасть, да много по каким причинам быть недоступен. А сиды и magnet-ссылки работают и без форума, поэтому найти нужное будет возможно даже в условиях недоступности рутрекера. Ну а скачать найденное получится, конечно, только при наличии сидов.
Третья причина не использовать поиск форума заключается в том, что нужно будет отправлять и получать поисковые запросы на форум. Так как у форума нет API для поисковых запросов (напишите, если нашли, у меня не получилось), то придётся написать свою. Но всё станет медленнее, потому что вам придётся что-то отправлять и ждать ответа от другого ресурса в сети. Обратите внимание, насколько быстро вы получаете сообщение от бота! Даже в моменты, когда первый пост обрёл популярность и в первые сутки случится пикабу-эффект, пиковая нагрузка была далеко до предельной.
Откуда база данных для поиска, и как её самому сделать?
Здесь тоже никаких секретов быть не может, просто берём и парсим весь рутрекер =)
Для того, чтобы не положить форум, одна итерация обновления базы и индекса растягивается от пары до шести часов. А, ну ещё можно использовать «базы», выложенные на самом рутрекере (только обновляются они раз в месяц в лучшем случае).
Если хотите потренироваться, а парсингом не хочется заниматься — можно взять их. К слову, будьте готовы, что там вас в качестве базы будет ждать просто 3-х гиговый XML-файл. У нас же это выглядит как-то так (posts это база вообще всех постов рутрекера и не участвует пока что в процессе):
Обратите внимание, что места на жестком диске для подобной реализации вам понадобится менее 1 Гб, что делает проект относительно дешевым для размещения на каком-нибудь хостинге.
Спасибо, что дочитали до этого места! Я очень рад, что людям стал интересен и полезен этот проект. С момента первого поста на пикабу я внёс несколько ощутимых изменений в бота, подсказанных пользователями. Приглашаю всех, кому это актуально, воспользоваться моим ботом:
P.S.: Да, всё ещё «test».
Kачаем торренты с помощью Telegram без регистраций и SMS
Что делать, если я не могу попасть на rutracker.org , а качнуть чего-то конкретного хочется?
Когда-то давно, когда ещё это всё, связанное с Telegram-ботами было в новинку, существовало множество этих самых ботов, которые помогали справляться с блокировками от Роскомнадзора.
Теперь, при попытке найти рабочее решение, выясняется, что боты либо неактивны, либо просят «подтвердить» номер телефона и ведут на посторонние сайты, либо вообще «недоступен в связи с нарушением авторских прав». А ведь далеко не у всех есть возможность и желание предпринимать усилия для обхода бесконечных блокировок.
Тогда я сделал своего бота, который просто работает.
Находится бот по адресу в telegram @rutracker_org_test_bot
Просто пишем, что хочется найти. Регистрация, смс, подтверждение номера — всё это напрочь отсутствует. Потому что не нужно. Сразу можно искать, ограничений нет.
Выдаёт за раз до 15 результатов с сортировкой по убыванию количества скачиваний. В конце результатов поиска ссылка на следующие 15 раздач по вашему запросу, если они могут быть найдены.
При нажатии на ссылку после «скачать», бот отправляет вам уже непосредственно magnet-ссылку, по которой можно скачать контент (при наличии раздающих).
Полученную magnet-ссылку копируют в torrent-клиент (например, uTorrent, qBittorrent, Deluge, Transmission, BitTorrent, BitComet etc). Обычно при добавлении нового торрента есть возможность указать, например, «добавить по URL», или «по magnet-ссылке».
С помощью команды /h можно найти список раздач, у которых заданных infohash. Нужно в случае, например, когда вы знаете infohash раздачи, но не знаете, где посмотреть подробное описание раздачи и есть ли она на rutracker.org вообще. По большому счету данная ситуация — редкость, однако знайте, что подобная возможность тут имеется.
Стоит сказать, что поисковый движок у бота свой собственный, и находится в активной разработке (не зависит от rutracker.org ) — поэтому результаты поиска могут отличаться от «оригинального» поиска непосредственно на рутрекере.
Другие команды бота:
/allow_notifies добавляет вас в список рассылки оповещений сервиса от бота, а именно: обновления и смена адреса при блокировке бота со стороны правообладателей, что вполне вероятно.
/f позволяет вам отправить сообщение непосредственно разработчикам бота.
/help показывает подробную справку.
Бот делался для небольшого круга знакомых лиц, по мере готовности я решил распространять информацию о нём, возможно бот будет кому-то полезен. Бросать поддержку этого бота не собираюсь, т.к. всё равно есть хостинг для других проектов. Из ближайших планов: добавить отображение размера раздач, улучшение поисковой системы (чтобы можно было, например, при поиске фильма указать кодек или разрешение, при поиске книги — формат. Это можно сделать и сейчас, но работать будет только если эта информация есть в названии топика).
Какие могут быть дальнейшие пути развития этой далеко не новой идеи с telegram-ботами поиска? Например, до кучи можно ещё объединить раздачи с других трекеров, например, книжного. Насколько вообще востребованы такие сервисы? Ведь многие люди давно научились обходить блокировки с помощью VPN, и кому-то весьма ограниченный интерфейс Telegram-бота не так удобен, как первоисточник. Зато у бота нет рекламы.
А может всё это и вовсе не нужно уже, как вы считаете?
Не ставятся расширения браузера Chrome (Яндекс, EDGE)
Откуда не ждали.
Пользователю необходимо настроить доступ в личный кабинет СБИС (Тензор) . Для этого необходимо установить расширение из магазина Google. Как говорится: «Сто раз так делал». Но в этот раз что то пошло не так, и, при установке расширения, получаю ошибку:
— перепробовал разные браузеры: Chrome, Яндекс, EDGE. Но они все используют магазин гугла, и не работают тоже.
— в интернете есть способ про правку файла hosts — тоже не мой случай.
— чистки кэшей, сброс настроек не помогает.
Уже опустились руки, но нашел совсем свежую информацию
В итоге, чтобы установить расширение в любимом браузере, нужно установить VPN (я использовал iTop VPN — не требует никакой регистрации вообще), подключиться к VPN и только тогда установить расширение.
Если пользователь согласен работать в Mozilla Firefox — можно установить его, такой пляски в нем нет.
Надеюсь помог кому то сэкономить время. Сам пол дня убил сегодня на это.
Не путайте санкции и кассу
Вот это я понимаю креативный подход.
Вы из России вам санкции и бесплатную версию нельзя, но если купите, то можно.
GitHub, ну как же так?
GitHub начал блокировать российских разработчиков. А как же информация про то, что многие IT-шники перебираются из России на Запад? Вы, там на Западе, их будете считать своими или нет?
В России заблокировали Tor
В России началась блокировка Tor – сервиса, позволяющего россиянам посещать запрещенные в стране сайты. Блокировка осуществляется по решению суда от декабря 2017 г., и совершенно непонятно, почему Роскомнадзор решил обратить на него внимание спустя четыре года с момента вступления его в силу.
В реестр блокировки внесены все адреса IPv4 и IPv6 основного сайта проекта ( www.torproject.org ), однако ограничения пока не касаются зеркал и дополнительных сайтов.
Все случилось внезапно. За день до блокировки Tor Роскомнадзор направил разработчикам письмо с весьма недвусмысленным «намеком» на готовящиеся ограничительные меры. При этом всего сутки назад в реестре регулятора было лишь одно упоминание сайт Tor Project, связанное с решением Саратовского районного суда от декабря 2017 г. Суд признал незаконным распространение на сайте torproject.org браузера-анонимайзера Tor Browser. В решении подчеркивалось, что с помощью этого ПО россияне могут посещать сайты с запрещенным на территории России контентом.
Разработчики Tor уже опубликовали в своем официальном блоге ( blog.www.torproject.org ), до которого Роскомнадзор пока не добрался, статью, в которой рассказали, как можно обойти ограничение. Создатели Tor предлагают пользоваться официальными зеркалами сервиса. Они тоже пока не попали в «черный список» российского регулятора.
Также представители Tor Project обратились к всему интернет-сообществу с просьбой распространять информацию о Tor, его зеркалах и о его блокировке на территории России. Отдельно они обратились за помощью к русскоговорящим пользователям. Разработчики просят их присоединиться к сообществу по локализации и помочь ему с переводом различной документации, в том числе и документов поддержки.
Начало кампании РКН против VPN
Ну что, наступление дырявого синего квадрата РКН на свободный интернет продолжается. Вот буквально вчера было объявлено о том, что OperaVPN отправляется в бан. Дело каждого верить или нет этой информации выложенной не так давно (источник: https://habr.com/ru/news/t/563332/):
Думаю ни для кого не секрет, что в последнее время РКН все больше закручивает гайки. Пробует разные подходы, начиная от реального замедления определенных ресурсов или же ограничиваясь угрозами замедлить их (привет Twitter и YouTube). Конечно, абсолютное фиаско и унижение, полученное после неудачной попытки блокировать Telegram не прошло бесследно. РКН обиду не забыл, а поэтому методы становятся немного более избирательными, чтобы не рушить чудовищное количество важной инфраструктуры, действуя подобно пушке, стреляющей по воробьям (да, это отсылка про рухнувший Сбербанк и прочее при попытке заблокировать Telegram). Хотя и до сих пор каждую неделю звучат призывы огородить богомерзкие и внезапно ставшими неугодными углы интернета от неустоявшейся психики граждан.
Сейчас, пока изгнанные, но все же хоть как-то технически проинформированные пользователи, заново устанавливают OperaVPN в свой браузер, обычные пользователи остались ни с чем. Не особенно хочется выступать в роли проповедника судного дня, но все же, хотя бы в глубине души, все понимают, за каждым ныне популярным, но не особо продуманным в плане защиты от нападок сервисом, придут. Те, кто умудрился вернуть VPN в свой браузер Opera, просто продлевают агонию, вскоре адреса будут забанены и привет.
Хоть и РКН убеждает, что будет использоваться метод анализа траффика, для выявления pattern’ов (шаблонов) поведения VPN, но действия РКН никогда не отличались технической грамотностью или аккуратностью. Создание такой машины, анализирующей такой поток траффика.. это не про РКН. Слишком технически сложно, слишком ресурсоемко. Слишком много ненужных финансовых вложений. Поэтому моя ставка, что в результате, просто забанят неугодные IP адреса, принадлажащие неугодной проксе и на этом все. Если их станет больше — забанят и их. И, чем популярнее сервис, тем раньше он отправиться в бан.
Можно подумать так: «Ну что ж, значит возьму те, что с конца списка и буду пользоваться ими». Ну например Hola Free VPN Proxy — он есть в списке. Или хотя бы тот же АнтиЗапрет, что угодно, это все вопрос времени. Да, кроме того что придут и за ними, есть еще один нюанс. В конце концов, все эти решения, придумывались в качестве относительно простого обхода блокировок. Раньше, до определенного момента времени, было достаточно любого прокси, как например самый популярный NL (Голландия) прокси или DE (Германия). Сейчас ситуация еще сильнее ухудшилась. Теперь да же зайдя на некоторые заблокированные сайты, то они не откроется из NL и DE. На rezka.ag многие фильмы не откроются да же через UA (Украина).
Т.е. в данный момент не только нужно найти подходящий прокси сервер через который открывается большинство сайтов, но и для части сайтов держать дополнительные сервера. Думаю не нужно говорить что постоянное переключение между этими проксями и сопровождение этих правил, что-откуда надо открывать, не доставляет особого удовольствия. Хоть даже сейчас существуют бесплатные варианты типа той же Hola, но кто-нибудь пытался смотреть через них какое-нибудь потоковое видео? Нужно признать бесплатные варианты, подходят только для того чтобы почитать статеечки или посмотреть картинки. Но интернет давно уже не текст с картинками, это ролики по 150 а то и 1500 mb, YouTube шагает по планете. Обычные варианты такое уже не вывозят.
Все мы хотим пользоваться интернетом так, как этого заслуживаем в 2021 году, а не так как это существует в анально огороженном Китае. Список VPN-сервисов, которые заблокируют на территории России разослали ещё 18 марта среди сотрудников Сбера, а в публичном доступе письмо всплыло 15 апреля. Информация об этом появилась на форуме ntc.party , где сидят разработчики анти-цензурного софта.
И вот настало сегодня, когда зловещее предупреждение о бане исполнилось, решено, что нет лучше времени чем всем вам начать пользоваться тем, что я изначально создавал для себя и не особо пытался продвигать.
Для Google Chrome и Mozilla Firefox релиз уже есть.
Вот главные условия и приципы:
— База всегда максимально полная — обновление происходит ежедневно. Это очень важно.
— Проксировать только заблокированные сайты, все остальные сайты обязаны работать напрямую. Пропускная способность у меня нерезиновая.
— В век страха быть чипированным и получить Covid-19 от вышек 5G клянусь не собирать данных пользователей, не хранить никаких логов на серверах и не передавать ничего третьим лицам. (А нафиг оно мне надо, место у меня тоже ограничено).
Я решил, что в центре всей философии будет простая мысль — установил и забыл. Не надо ничего нажимать, ничего добавлять, ничего обновлять. Установил один раз, и более никаких проблем серии «зобанено» замечено не будет. В конце концов, именно такой уровень сервиса я бы хотел видеть сам. Распространяется бесплатно. Разумеется, для тех, кто хочет указать свой адрес прокси, функционал присутствует. Пользуйтесь.
Да, я жду резонный вопрос «И что же мешает им сделать тоже самое с тобой, что они сделали с Opera?»
Это решение изначально создавалось и планировалось из расчета на будущее. Естественно, я не буду вдаваться в подробности технического решения, но центр логики заключается в ранжированности доверия к пользователям.
Могу заверить, что изначально все создается так, чтобы не допустить остановки сервиса.
Чтобы просуммировать это все, скажу одно. Начал я это все на фоне постоянных угроз типа «Да мы вас, всех щас! @#% ^! и отсутствия комфорта лично для меня. А сейчас это уже принципиально. Создание системы, которая будет, что называется bullet proof, на будущее. Был бы очень благодарен конструктивной критике и предложениям. Именно благодаря изначальным предложениям в аддон я добавил функции добавить свой какой-то сайт или проксю.
Если навалитесь всем скопом и уроните мне сервис, ну тогда «F to pay respects».