Всем привет.
На досуге, запарился давней задумкой - резать рекламу непосредственно роутером. Много гуглил, думал. Решил пока остановиться на фаерволле(там и DNS-сервером можно и хз еще как). Прописал все правила, под бдительным руководством Гугла, всё ок - режет.
Но, падлы что делают - пока не загрузишь их сраную рекламу - страница не загрузится вообще. Хитро. Те же яндекс.мапс. Очень просто - в CSS всё кидаем и всё, откуда стили тянутся - простенький вариант, знаю, там все хитрее и динамическое. Интересно посмотреть на человека, который подобной хней занимается - противостоит антирекламщикам. За тарелку супа, наверное.
И мне тут пришла в голову мысль. Нейронные сети, ИИ, уже довольно распространены, точнее - идет рост и развитие их.
Так вот. Значит берем комп. Садим туда ИИ и весь input-трафик пропускаем через него. Такой, некий "прокси". А ИИ, на то он и ИИ, "визуально" понимает где реклама, а где нет, и где есть - скидывает всё в топку, скажем в 127.0.0.1 Ну или честно скачивает и т.д. что бы создать видимость просмотров - а тут не докапаешься. Остальное пропускает к тебе в браузер. Ву-аля! И рекламисты нифига не поймут(мы же ему впарили рекламу, почему продаж нету?! В жопу просмотры! они же ради продаж а не сами по себе!) и все короче довольны.
Так вот. В общем делал по этой инструкции: https://mhelp.pro/ru/mikrotik-firewall-blokirovka-reklamy-na-saytakh/
Всё, повторяю, режет замечательно. Но, в чем вопрос. Если я в RAW, в Dst.Address, вписываю 127.0.0.1 - перестает резать!((( Поймите мою логику. Адрес назначения - заворачивает в сад! И всё. Почему не работает? Я хочу, что бы тот же яндекс понял, что я типа скачал рекламу.

(0) купи кинетик, поставь https://help.keenetic.com/hc/ru/articles/360000948719-OPKG и как на линуксе
можно и php и nodejs и go и еще куча всего

https://forum.keenetic.net/topic/11384-блокировка-рекламы-даже-на-youtube-и-устойчивый-dpi/
https://help.keenetic.com/hc/ru/articles/360000582119-Интернет-фильтр-AdGuard-DNS

Нет, спасибо. Понятно, что всегда есть куда развиваться. Но я влюблен в Микротик. Пока что.
Вы поймите меня правильно. Абсолютно согласен с "...Рекламные объявления, являются способом дохода вебмастеров, мотивируя на создание качественного контента..." Но. С этой рекламой уже остоебенили всякие мрази так, что нету сил. Вспомните Фидо, web 1.0. Хоумпаги, "Я и моя сраная кошка".
Нет, я не против товарно-денежных отношений, но млять меру то знать надо, не?

А что уже изобрели ИИ? Он же тупой как полено, откуда ему знать где реклама, а где нет? Он же без обучения гвоздь от стула не отличит

(3) "микротик говно"© дырявое

(4) Значит сажаем специально обученного негра за промежуточный комп. Он жрет всё, что дают(но ничего не покупает из того)))). А мне скидывает очищенную страничку.

(5) Нужно просто уметь его готовить ©

(4) не ИИ а ML запросто можно
для защиты от спама уже давно

для защиты от рекламы кстати еще легче
просто выделение признаков, вручную обучаем на примерах и с похожими признаками куски html начинают удаляться из DOM

(0) Не выйдет. Сейчас в основном все на https, а значит ты на проксе не сможешь парсить содержимое.
Можно конечно парсить и https, но тогда на проксе придется свой сертификат использовать, а значит страдает безопасность. Ты не будешь знать, на валидный сайт зашел или это зеркало левое.

(7) ви таки умеет готовить говно?

(8) Вот Вы наконец прониклись моей идеей.

А какая разница где резать?

(8) Что бы выделять признаки, ИИ и нужен

(12) А я не хочу рут смарту своему делать

(8) "выделение признаков, вручную обучаем на примерах" - это кто будет делать? Специально нанятый негр?

(9)К тебе пришла готовая страница. Так? Дальше сам догадаешься?

(11) это не твоя идея
она давно реализована на практике
есть готовые проекты на гитхабе

Я же не говорю НЕ ГРУЗИТЬ. Я говорю - ОТМЕТАТЬ в сад

(15) обучать сам юзер
выделение признаков разработчик

(13) ИИ без обучения не умеет выделять признаки

(17) Слабоватые пока

Короче ТС советую подучить теорию

Как подучит сам поймет и сделает или забьет

(20) Я понимаю как это работает и как будет работать в будущем.

(16) Что за бред

(19) Т.е. он должен посмотреть рекламу, определить какие признаки имеет это реклама, и указать в банеререзолки эти признаки? А причем тут роутер?

(22) Так и обратился же за помощью, т.к. сам понимаю свои пробелы в этом.

(23) с динамическими картинками ты ничего не сможешь сделать

(25) Это я про будущее. А пока, вопрос про роутер.

(25) он хочет не ставить баннерорезку на смартфон, а воткнуть ее на роутер

(27) Ты, вот лично, увидев - поймешь где что?

(27) Теперь возьми обученную нейронную сеть

(29) пользователя тоже в роутер засунет?

(30) с картинками это уже распознавание образов
ресурса роутера не хватит
нужен будет внешний мощный сервак

(33) input-"прокси". Говорил об этом. Вы не внимательно читаете

(33) видел? https://www.opennet.ru/opennews/art.shtml?num=55534

(35) не интересует более резка рекламы на клиенте.

(36) ты хочешь митм прокси на хттпс, но читаешь маны без уважения

В конце концов человек делает всё для себя в первую очередь. И равно как он может или не может отличить говно от конфетки - так же и его AD-модуль читай нейросеть будет настроена.
Всё просто.

(37) Я на самом деле о наболевшем. И чуть-чуть про не согласный микротик с моей логикой.

И еще. Когда посадят электронного негра в эту ипостась, торгаши своё тоже выкинут противоположно. Борьба говна и зла. Мир таков.

Тока пока не понимаю что тут можно противопоставить...

Я открыл сайт. "Посмотрел" всю рекламу. Что еще то?

А разве роутер сможет вмешаться в хттпс?

митм прокси - будут суровые проблемы с софтом который имеет свой список сертификатов, на одной из работ у нас был митм для работы ids и всяких сканеров...это охренеть какой гемор на самом то деле, траблы начинают вылезать в таких местак которые ты даже не ожидаешь, автообновлялки у софта дохнут например

(42) встроенные вставки рекламные в видео, такое вы вряд ли уберете. Не отображать контекст нужных страниц пока вы не отключите блокировку рекламы. В общем много способов есть.

(43) в микротике скорее всего можно так сделать, только выпустить свой серт надо и на клиентах поставить

(0) И приедет к тебе не реклама, а скрипт, который запросит кодированый блоб, раскодирует его у тебя на клиенте и покажет тебе сиськи. Так и не увидит твой искусственный интеллект сисек...

(46) Какое раздолье...
Делаем фишинговый сайт банка, подписываем самоподписанным и отдаем микротику. Который честно отдает клиенту свой сертификат.

(48) ну микротик будет же проверять корректность сертификата банка

(48) потом какое еще раздолье, дырка только на связке микротик-ваш-комп, а это уже ваша зона ответственности, кто туда внедрится то?

(50) Он скроет информацию о исходном сертификате. Этого достаточно.

(51) да, клиент не сможет проверить корректность
НО, корректность должен проверить сам микротик, он же не пропустит коннект к сертификату без доверия

(43) Layer 7 Protocols - регулярки. Но это типа RSL в 1С - бездумно можно уронить всё.
(45) Очень прекрасно режется не скажу чем(на клиенте браузером). Правда, иногда, пока база не обновилась - появляются прозрачные баннеры, наложенные на видео. А если реклама физически вмонтирована в видеоряд - ИИ наше всё! Проматывает пусть. Точнее сначала скачивает, постобработка видео и мне уже выдача.

(52) Хи. Летсенкриптовскому сертификату доверие есть? =)

Я скачал видео. Загрузка страницы - это вы не в китай попали на сервер. Это вы себе на комп скачали. Так WEB работает, если кто не знал)) И вот у меня негр - он СКАЧАЛ с рекламой и прочим говном. Как догадаетесь что он мой негр?)

(48) Это мыслепреступление. Вас посодют ©

(0)Перехватываешь запросы от устройств по 53 порту(DNS) и перенаправляешь на правильный DNS Сервер..
Когда я сидел на микротике год назад, у меня всё это работало..

Можно ещё вот это почитать

https://adguard.com/ru/adguard-dns/overview.html

Ну вот фаер: https://ibb.co/ym9byPV
Последнее правило лишнее. WAN - так и назвал порт, пока не сгорел - самим собой и есть.

53 порт, как видно, я нафиг режу из вне. Ибо нефиг. Пинг тоже.

(53) я именно встроенную в видеоряд и имел в виду. Но где гарантия что ваш ИИ не отрежет лишнего, вы ведь об этом уже не узнаете. Ведь каждый автор роликов может по разному интегрировать рекламу, может даже без вставок картинок с продуктом, а просто рассказывая о прелестях продукции и предлагая перейти по ссылке в описании.

(60) ПО голове электронной с ноги. И в окно. ))
А вообще (38)

(60) И ради резки 99% говна, я готов пожертвовать голой девушкой на странице ) Но после дообучу ИИ свой.

(61) у вас уже есть хоть зачатки такой сети, которая смогла бы хотя бы в 99% случаев правильно срезать и отфильтровать видеоряд с монтированной рекламой?

(63) при чем сейчас, модно уже не тупо запускать видеоряд от спонсора, а прям интеграция на тему канала.

(54) а чем тебе поможет такой фишинг открываешь сайт sberbank (где k - с другим charcode)..ну и он подписан летсэнкриптом, или ты каждый раз лезешь в свойства сертификата?

(63) У меня есть ИДЕЯ. Как бороться с мудаками. А это первостепенная важность будущих событий.

(65) Да что у вас со Сбербанком? Хамят?

(67) это мы про опасность mitm, иначе как вы будете резать рекламу внутри https которая не режется dns методами?

(66) а ну вы за поболтать, а не за конкретную реализацию тему создали? Если уж поболтать, то нужно еще определенные мощности, чтобы в реальном времени ИИ скачал, обработал и выплюнул нужный вам вариант, если время обработки будет значительным то серфинг в инете будет ппц каким не удобным.

(66) то что ты реализовал устарело 10 лет назад, а на то что ты хочешь у тебя нет денег и никогда не будет знаний)

(69) немного поздно конечно, но надо сделать крипту на базе анализа видео и выпустить токены, майнингом будет - анализ рекламы в роликах

(71) ахаха, как вариант)

(68) У вас вот сейчас Миста на экране в браузере как отображается? Кодировки там, стили, куки - всё загрузилось? Ок!
Теперь берем нашего пресловутого негра - у него на компе всё это загрузилось. негр что делает то далее, прежде чем вам "перекинуть" уже ЗАГРУЖЕННУЮ страницу?
Я не про вазломы, исключительно про отсеивание лишнего из HTTP. Хоть S, хоть хирес! У вас в клиенте-браузере НЕ ЗАШИФРОВАННАЯ страница!

(71) ты практически яндекс толоку изобрел. только на блокчейне

А кстати, подскажите, в чем отличие "hap" и "hex lite", кроме отсутствия wifi и usb-порта в "hex lite"? Для чего вообще может быть применен "hex lite", где не справляется более функциональный "hap"? Цена у них одинаковая, почему-то.

(71) Кому что...

(75) Не помню. Производительностью вроде. Где я сказал что Гуру Роутербоард?

+(73) пусть считают что мы жрем рекламу!

(73) <У вас в клиенте-браузере НЕ ЗАШИФРОВАННАЯ страница!>
но расшифровывает её браузер, а мы же про микротик?

(75) в лайт вроде не воткнуть пое вебку

(79) Хм... Да. А роутеру перехватить ключ можно?

(80) Тогда нафига оно нужно вообще, если есть hap? Только из-за разогнанного процессора на треть?

(82) хап просто новее)

(79) Вы опять меня запутали. Еще раз повторяю! Хер с ним с этим роутером уже! ПОсле роутера - комп. Негр в нем. Браузер что хотите! Эмуляция всего. Ну?

(81) можно, но для этого надо делать mitm и на всех клиентов ставить сертификат роутера, а это страшный геморрой, особенно на телефонах

(81) жираф)

(85) Не не. (84)

(87) ну тоесть ты очередную вариацию адблока придумываешь, только с ИИ

(88) ага, видимо роутер уже в пролете)

(88) Только с ИИ. И этим будет сказано ВСЁ.

(89) ПРосто развитие темы, что такого?

так эдблок уже есть, зачем его еще раз изобретать

кажется ТС изобретает брайзер по wayland) строим ДОМ на микротике а рендерим на компе)

(92) Нынешний не очень

(90) посмотрите влияние на быстродействие текущих блокировщиков, а теперь представьте что будет если туда еще ИИ азпихать, который в реальном времени будет анализировать страницу

(90) а я тебе скажу что дальше будет, т.к. мощности компа не хватит чтобы потянуть такое ИИ, и вы будете держать ферму на какомнить амазоне и гонять трафик туда, а это уже большой вопрос в безопасности и целесообразности

кстати помоему так делают мобильные браузеры некоторые, когда странички рендерятся на серверах гугла/оперы, и в ужатом виде на телефон передаются

(95) Скоро квантовые компы поступят. Не будьте консервативным.

(97) я про квантовые компы в комьютерре читал в 2001 году, двадцать лет прошло

(97) "кстати это вовсе и не табак" (С) гоблин

(98) + скоро это еще через 20-50-100?

(96) Угу. Вы еще WAP вспомните. Был у меня.. на Нокии

(97) они уже есть, даже в некоторых школах китая. Только толку то вам от них?

(101) то что я описал в современном хроме есть, там в настройках включить можно

(98) Пусть еще 120 пройдет.

(104) так гдеж 'скоро'?

(103) На смарте, без рута, как погань резать?

как вариант это какой то сервис глобальный замутить на супер компах и за абоненку предлагать услуги ИИ для устранения рекламы)

(105) Время - относительно. И субъективно.

(106) ставь мобильный файрфокс, там все есть

(109) Не, у меня спортивный интерес.

(107) мне кажется по этому пути когданить адблок придет

Адблок зашкварился. Все уже знают.

(110) гораздо выгоднее (по деньгам) сделать баннерный сервис который невозможно заблочить

(111) скорее гугл, они уже за подписку рекламу в ютубе режут)

(113) Тогда, когда меня спросят, мне останется сказать что мудаки таки меня победили

(114) только эти черти (видеоблохеры) стали рекламу в видеоряд встраивать

(116) Недавно один в ролике ляпнул "ходит поверье, что у тех, кто не проматывает рекламу, стойкий иммунитет к вирусу" ))))

(116) Берешь и проматываешь. Пока руками и сам.

(113) выгоднее и то и то, одним рекламу, другим блокировку) Со всех денег собрать

Kassern всё сказал (

(116) если "видеоблохер" интересный то можно и посмотреть, если же частит с рекламой неуместно то и нафиг такой блогер.

(121) это уже другой вопрос
главное то что я вроде как плачУ чтобы без рекламы, а она всёравно есть

(121) На ютубе не блохеры виноваты, а гугл.

(122) - это реклама - месяц без рекламы? Чуть не повелся..

(122) реклама разная бывает, вот вы смотрите кино в кинотеатре, а там девушка в кросовках найк бежит в кафешку старбакс, а там все продавцы оснащены моноблоками от яблока на кассе)

(124) на самом деле я долго мучился, её резал, прокручивал, пропускал, альтернативные клиенты ставил...оказалось проще заплатить и вообще не парится

(125) и вроде бы за кино тоже заплатил, а тут такое)

(127) ну тут грань есть, люди реально бегают в кроссовках найк и ходят в старбакс
а есть еще российский фильм типа 'С легким паром 3', где прям куски из настоящей рекламы камри вставлены...вот это реально 100% днище

(126) Тебя таки достали капиталисты. Поимели своё.

(128) Я даже вторую поебень часть побрезговал смотреть. А у вас третья... даже не знал что сняли. Ну что мне сказать?

(128) да прост где-то на этом не акцентируют вариант, а где-то прям крупным планом значок мерседеса, или колы)

(130) ой, да, вторая часть конечно, современная которая

(132) В топку. Есть первая и последняя часть, снятая Рязановым, с хорошими актерами. А последующее уг - расстрелять! И ведь народ жрет!!! И реклама там им. В кинотеатре - как вырежешь? Ох ((((

1 раз на новый год вполне для разнообразия. не все же оригинал смотреть

(133) < с хорошими актерами>
в этой современной идиотской части, кстати теже самые актеры по большей части

они даже Брыльску привезли специально для этого фильма из Польши

(134) Зачем оригинал? Других фильмов нет не связанных?
(135) И их откровенно жаль. Теперь за бабло люди и не на такое идут...

(107) мобильные операторы предлагают такую услугу, есть сервисы типа SkyDNS

Не быть мне тем же Мягковым никогда, но будь я на его месте - никогда бы не пошел извращать старый добрый фильм, тем более с Безруковым

(138) это немного не то, тут нет ИИ который бы что-то резал, обычная облачная защита.

Вот посмотрите кто не смотрел: https://www.kinopoisk.ru/film/7640/
Я не проидеологию фильма, а лишь о факте существования такого робота. Ох бы он мне рекламу резал сидел на параллельном компе!
Нет, ну право, ну не Терминатора же мне нужно было вам предложить? ))