Спасибо всем тем кто поставил потестить, оказалось что избирательнный метод обхода оказался крайне эффективным как в плане потребления трафика на сервере (сейчас используется максимум 1Mb из 350Mb) так и в плане обновления списка заблоченных сайтов.
Вчера на chrome релизнул версию 1.0. Как и просили в комментах, я добавил возможность указывать собственные сайты для проксирования, их можно указать в настройках, скрин ниже:
Так же добавил для параноиков и geek'ов возможность указать свою проксю, у многих есть свой сервак, почему бы его и не использовать. Потдерживаются HTTP, HTTPS, SOCKSv4 и SOCKSv5 прокси.
Рекомендую юзать SOCKSv5, это самый быстрый вариант.
Для тех у кого есть TOR то вы можете этим же способо перенаправить как заблоченные сайты так и свои через него, а остальное пускать напрямую. Просто укажите локальный TOR SOCKSv5 порт в настройках плагина, чаще всего это порт 9050 или 9100.
У РКН в последнее время фляжку совсем сорвало, только и успеваешь новости читать. Уже наверное все слышали про Twitter, а если кто не слышал то походу "пизда хомячку". Складывается впечатление что Twitter это подопытная крыса, они откатывают механизмы, развлекаются, смотрят как реагирует плебс и "зарубежные мать их партнеры"... Похоже что они там уже на Facebook, Инсту и Ютуб замахиваются. Сложно предсказать что "это" за манёвры, но лучше заранее подготовиться. Неясно пойдёт ли на уступки сам Твиттер, да и вообще заблочат ли его, но весь его пул ip адресов я добавил в обход замедления. Так что пусть делают что хотят.
В дальнейших планах плагин для Лисы, её тож некоторые просили. Потом буду писать под Android. Бесит когда на ПК сидишь как белый человек, а только берёшь в руки телефон, снова ГУЛАГ.
Если у кого-то есть предложения или вопросы, пишите в комментах я постараюсь ответить и если чего надо добавить.
«Депутатская дочка»: как девушки из Tinder обманывают мужчин на сотни тысяч рублей
Пару месяцев назад был пост о том, как чувака нагнули на 5К на свидании с девушкой из badoo. Как оказалось, за такими схемами стоит целая преступная группировка. Статью об этом, на днях написали в "Известиях".
Небольшие выдержки из статьи.
Мошенники начали обманывать россиян с помощью Tinder. Пользователи приложения знакомятся с девушками, которые представляются дочками богатых родителей или успешными бизнесвумен, а затем предлагают встретиться в «подставном» ресторане с завышенными ценами. Поужинав на десятки, а то и сотни тысяч рублей, они покидают спутника...
Пользователь Tinder раскрыл новый метод мошенничества с помощью приложения знакомств. По его словам, в Москве работает целая преступная группа, которая зазывает мужчин на свидания, а затем выманивает у них крупные суммы денег.
Схема обмана проста: после недолгой переписки девушки приглашают молодых людей в «подставные» заведения, просят заказать им дорогую еду и алкоголь, а затем уезжают под любым вымышленным предлогом.
Мужчина выяснил, что в махинациях задействованы не менее 15 человек. Среди них есть «хозяева» бизнеса, которые арендуют помещения, персонал, водителей автомобилей, на которых приезжают девушки, и, собственно, сами красавицы из Tinder.
Во время переписки собеседницы выясняют платежеспособность клиента, спрашивая, кем он работает и будет ли на автомобиле. Убедившись, что мужчина подходит, они выдают себя за «золотую молодежь» — дочек депутатов или владелиц заграничного бизнеса.
— Девушка приезжает на автомобиле бизнес-класса — в моем случае это был черный BMW с «мигалкой» и личным водителем, который якобы достался ей от папы-депутата. Затем она пытается завести тебя в заведение.
Само заведение, по его словам, выглядело подозрительно — внутри не было посетителей. Цены в меню казались стандартными для московских кафе, однако бокал шампанского, заказанный девушкой, стоил 7 тыс. рублей.
— Через некоторое время она заказала еще один бокал за 9 тыс., но его я оплачивать уже отказался. После того как стало ясно, что больше развести меня не получится, она уехала...
Мать из Южной Кореи встретила свою погибшую дочь в VR в рамках телешоу «Meeting You». Найон, которая умерла от болезни в 7 лет в 2016 году, воссоздали при помощи VR-а: голос, внешность и мимику. На работу ушло порядка 8 месяцев.
Встреча матери с дочерью произошла в парке, где они любили гулять в реальной жизни, воссоздав его так же детально. Авторы проекта использовали технологию Motion Capture, чтобы сделать всё максимально реалистично. Общалась дочь с матерью при помощи генерации голоса.
"Спустя четыре года, я думаю, что должна больше любить её, а не оплакивать. Надеюсь, что после этого проекта много людей запомнят Найон" - сказала мать.
Основательница сайта Sci-Hub Александра Элбакян заблокировала его для пользователей из РФ.
Уважаемые пользователи!
С сегодняшнего дня сервис Sci-Hub прекращает работу на территории Российской Федерации. Причинами для этого стало крайне неадекватное, оскорбительное поведение российских ученых в адрес создательницы сервиса.
Так, например, уже в течении двух лет продолжается травля Александры в русскоязычном Интернете со стороны людей, которых относят к так называемой российской "либеральной оппозиции". Например, ими распространяется информация о том, что Александра сумасшедшая и её личность всячески очерняется. В отличие от создательницы сервиса Sci-Hub, эти люди пользуются всеобщей поддержкой, некоторые даже занимают высокие посты в Российской Академии Наук и получают не только престижные научные премии, такие как "за верность науке" и "Просветитель", но и одобрительные похлопывания по плечу за оскорбления в адрес Александры. Аж создается впечатление, что это какое-то геройство (скоро орден Герой России им видимо давать начнут за это)
А недавно сотрудник Российской Академии Наук решил назвать в честь Александры паразитическое насекомое. Что я рассматриваю как крайнюю несправедливость: ведь если анализировать ситуацию с научными публикациями, то настоящими паразитами являются научные издательства, а Sci-Hub наоборот борется за равный доступ к научной информации и делает полезное дело.
В связи с такой народной любовью работу на территории данной страны разумно будет прекратить. Однако, российские ученые, которые любят Sci-Hub, все еще смогут заходить на сайт из другой страны, используя VPN сервисы или прокси, или бразуер TOR. Правда, и эти возможности в России хотят сделать незаконными. В таком случае ученые могут использовать, например, Либген, который хранит архив статей, скачанных за несколько лет через Sci-Hub, и его зеркала.
Еще одно решение - Российская Государственная Библиотека, которая получила в прошлом году ежегодную премию "Свободные знания" от Википедии, выиграв у Sci-Hub, который также был номинирован
Варитесь в своем дерьме сами, а мне это тоже надоело, российская наука с возу - кобыле легче. Высвободившиеся ресурсы я направлю на свои исследования. Как принято говорить в России: всего вам доброго, хорошего настроения, здоровья и главное Православия побольше. Проект скорее всего потом как-нибудь продолжит работу, но уже без вас.
С уважением, Александра, создатель сервиса Sci-Hub.
эм. Прочитал заявление - подумал пиздец какая-то истерика. Зашёл на гиктаймс - там в комментах то же самое недоумение. Если бы в честь меня жука-говноеда назвали kokus-ahuevatus - я бы радовался и веселился. Да и если бы после каждой попытки травли меня/Вождя мы бы так же реагировали - сервера реактора давно были бы сожжены и развеяны по ветру. Это интернет, детка, тут и нахуй послать могут.
Сравнение с Аароном Шварцщом на гиктаймс - вообще пипец. Его собирались приговорить (и похоже приговорили бы) к 150 годам тюрьмы - в его 25 лет. Её оскорбляли в твитере и ещё где-то. См. конец предыдущего абзаца.
Ну и её слова про "либеральную опозицию". Я так понимаю, что все, кто не размахивает флагами ЛДНР и георгиевскими ленточками в её глазах "либерасты". Она даже не видит разницы между "либералами" и "либертарианцами" - хотя относится к последним.
В общем, дура она.
(При этом я остаюсь приверженцем феминистических идей и считаю, что количество дураков и дур примерно одинаково =) ).
"Да и если бы после каждой попытки травли меня/Вождя мы бы так же реагировали - сервера реактора давно были бы сожжены и развеяны по ветру" Приятно слышать это от человека, после спора с которым у меня пропала возможность плюсовать/минусить.
Хотел пересмотреть престолы,в интернете не нашел ни 1го халявного сайта.Остались только платные ресурсы.Че блядь за хуйня?И это будущее за которое мы не боролись?
Я согласен, что ркн решил просто скинуть атомную и не спрашивать про последствия и т.д. Но почему у бугурта нет вопроса к Дурову? Мы же не его адуитория интереса, роиссия ему не интересна и ему пофиг на блокировку, сам же так и заявлял. Какого хрена он начал юзать проксивпны и все подобное, прекрасно зная, что у ркн есть свобода блочить зеркала и подобную шалупонь без суда и сразу? Или типо его команда не подозревала к чему все приведет? Ощущение, что он тупо через народные массы и негодования хочет развязать себе руки, либо план около того. Ну я не поверю, что он не предсказывал такой результат. (прошлый пост удалил, т.к. косянул с тегами)
Данные с сайта с фильмами REZKA, украдены, отфильтрованы, завернуты в телеграм и поданы в виде 3 фильмов в день случайным образом, рейтинг фильмов немножко перевернут, так как между 9.8 и 9.9 разница по сути в 2 раза ссылка на результат https://t.me/django_watch
Часть 0
Не знаю что посмотреть, а рейтинг IMDB уже надоел
Часть 1 – обнаружение проблемы
Вы тоже замечали что кинокритики часто недооценивают фильмы?
К примеру «Святые из Бундока» -
Фильм в основном получил негативные отзывы от критиков, получил 44 балла из 100 на сайте Metacritic
Зато народу нравится, и таких примеров много – тысячи их
Короче есть в интернете такой сайт как HDrezka, годный сайт – много фильмов, своя студия озвучки, куча зеркал и регистрация в аргентинской бухте прямо таки стандарт среди пиратов
При посещении данного сайта, можно заметить один интересный феномен, его рейтинг фильмов очень точный, ибо:
- Его ставят люди которые действительно смотрят это кино
- Сайт резка не настолько популярен (как ротен томатос или метакритик) и крупным студиям и маркетологам и в голову не приходит – накручивать рейтинг на резке
- Сайт достаточно крупный (крупнейший из пиратских) что бы там было огромное количество фильмов (как выяснилось больше 30-ти тысяч)
- И самое главное – по этому рейтингу нельзя отсортировать фильмы что исключает внесение искажений
+ Не возможность отсортировать и самому выбрать действительно годные фильмы – что и стало причиной дальнейших действий
(дракон со златом охраняет рейтинг резки)
Часть 2 Как «стырить» данные?
И так навыки персонажа которому все это пришло в голову:
- Понимание школьной математики
- Программирование на уровне хобби, из языков знает немного знает Python (но без всяких сложных штук типа миксинов/дескрипторов)
Первым делом стал исследование какие технологии «воровства» данных изобрело человечество
После недолгих поисков было обнаружено 3 основные технологии
- Selenium (что то вроде эмулятора браузера)
- BeautifulSoup (легковесная библиотечка для работы с HTML – ты ей текст – а она тебе облегчает поиск всяких штук в этом тексте)
- Scrapy (целый фреймворк, хоть я до сих пор и не понимаю это слово, но это как большая библиотека, настолько большая что когда ней пользуешься ты ей даешь команды – а она создает целый проект с кучей файлов и папок, всякими настройками), по ходу именно такими технологии пользуются в промышленном программировании всякие компании
Короче после недолгих раздумий решил попробовать использовать Scrapy
От Selenium отказался ибо он используется для сложных сайтов типа amazon linkedin, а у нас тут сайт очень простой
Ну и BeautifulSoup решил использовать в случае если какие то куски странички будут слишком неудобно парсить с помощью Scrapy
И так, закатываем рукава, едем в бой:
Часть 3 – учим Scrapy и воруем
Первым делом находим видео с объяснениями как им пользоваться (желательно что бы объяснял Индус – у них каким то магическим образом все влезает в 5 минут видео)
Может тоже кому надо будет –
– четко объясняет и быстро
+ на Хинглише :)
И так после нескольких часов получилось накидать несложный код что тырит интересующие нас данные, используя удобный инструмент что нам подсказал человек из Индии
Далее становится интересной секция «комментарии» - ведь некоторые шедевры народного искусства явно стоят того что бы их прочесть
Почитав исходный HTML оказалось что в нем нет комментариев
Хмм, возник вопрос как так, после небольшого чтения мануалов, оказалось что данные иногда находятся не в самом коде страницы, а подгружаются «динамически» используя javascript
Мда, плохи дела подумал я, еще с джаваскриптом разбираться, а судя по мемам, ждет меня увлекательное приключение
Но не так страшен черт как его малюют
Оказалось что нужно лишь отследить куда именно идет запрос на очередную пачку комментариев
Оказалось что у браузеров есть супер крутые инструменты разработчика (сколько же всего придумало человечество)
Там нужно нажать на вкладку Networking, далее отключить кеш что бы запросы заново шли каждый раз а не доставались из памяти браузера
Потом вкладка XHR что расшифровывается как XMLHttpRequest – короче тут отслеживаются все запросы что делает страничка куда то
Далее нажимая на запрос – видим куда он делается :
А перейдя на вкладку Response можно увидеть что ответил сервер
После не долгого ковыряния в полученом ответе оказалось что это JSON специальный такой формат данных для общения между сервером и браузером
Если еще проще то это просто текст, слегка отформатированный что бы его компу было легче читать
Почитав еще оказалось что этим JSONом возращается HTML то есть не сам текст комментариев, а сразу целые странички с древовидной структурой
Чисто с эстетической точки зрения конечно как то странно выглядит, но чисто с практической работает же – да и сервер наверное не сильно грузит, так что все окей
Тут нам и пригодится вторая библиотечка – BeautifulSoup – мы ей скормим HTML достаный из JSON а она нам вернет комментарии
Так и произшло, никаких эксцесов не возникло (что удивительно)
Разве что пришлось почитать немного туториалов как этим всем пользоваться
После небольших настроек, с VPN через Японию, что бы не забанили наш основной IP с которого мы смотрим пиратские фильмы
А так же прикрутки модуля модуля к Scrapy что генерирует фейковые личности (юзер агенты) для каждого запроса
Далее запускаем процесс «воровства» и ждем
72 часа спустя, процесс завершается, мы счастливы!
На выходе получается файл
Если 1 байт это 1 символ – то достаточно много данных
Если человек может читать примерно 1000 символов в минуту, то все это на неделю где то на неделю беспрерывного чтения
Выглядит все это как то так
Часть 4 – присобачиваем интерфейс к этим всем данным
Логичным решением было использовать телеграм, так как он позволяет хранить фото/видео/текст не на локальном компьютере, как пришлось бы делать в случае с сайтом, а в собственном облаке, что очень удобно
+ не нужно покупать доменное имя (адресс сайта), а просто ник в телеге
+ не нужно платить провайдеру что бы он удерживал у меня белый IP – который не менялся бы каждый день, что бы специальная служба DNS (превращает имя сайта в IP и наоборот) работала корректно
+ не надо парится за безопасность (если кого это интересует) ибо перед тем как взломать условно мой бот, нужно сначала взломать телеграм, а это сложно
Имя канала решил выбрать в честь моего любимого персонажа – Джанго освобожденного, который спасал свою любимую из лап злодея
В загашнике валяется Raspberry PI 4
Это такой по сути полноценный компьютер на Linux с 4 Гб оперативки, разве что без вентилятора и не гудит, немножко греется когда что то сложное делает
Пишем небольшой бот, прикручиваем к нему базу данных что бы он как то аккуратно хранил список фильмов что уже запостил, а так же те которые планирует постить, немножко причесываем вывод информации
Охапку дров и бот готов :)
В общем кто дочитал до конца – СПАСИБО!
Хотелось с кем-то поделится!
Вот ссылка на канал, может быть вам тоже понравится, и сможете выбрать что посмотреть в свободное время
Сравнение с Аароном Шварцщом на гиктаймс - вообще пипец. Его собирались приговорить (и похоже приговорили бы) к 150 годам тюрьмы - в его 25 лет. Её оскорбляли в твитере и ещё где-то. См. конец предыдущего абзаца.
Ну и её слова про "либеральную опозицию". Я так понимаю, что все, кто не размахивает флагами ЛДНР и георгиевскими ленточками в её глазах "либерасты". Она даже не видит разницы между "либералами" и "либертарианцами" - хотя относится к последним.
В общем, дура она.
(При этом я остаюсь приверженцем феминистических идей и считаю, что количество дураков и дур примерно одинаково =) ).