[Jaguar77]

Всем привет, в связи с ростом http2 трафика DPI перестал нормально определять тип трафика.

Поделитесь идеями, какие типы очередей делаете ? 

Нужно для улучшения Quality of Experience в ЧНН.

[Ivan_83]

DPI это устаревшая технология :)

Ввиду частых злоупотреблений на местах решили лавочку прикрыть.

Можно по старинке выдать высокий приоритет для хттп2 на первые 10-100 мегабайт.

[murano]

6 часов назад, Ivan_83 сказал:

DPI это устаревшая технология :)

Обоснуйте :)

Изменено 21 декабря, 2019 пользователем murano

[vop]

10 minutes ago, murano said:

Обоснуйте.

После слова "обоснуйте" надо ставить специальный квалификационный знак - двоеточие и закрывающаяся скобка. Иначе никто ничего объяснять не будет. :)

[murano]

2 часа назад, vop сказал:

После слова "обоснуйте" надо ставить специальный квалификационный знак - двоеточие и закрывающаяся скобка. Иначе никто ничего объяснять не будет. :)

Поправил :)

[Ivan_83]

В 21.12.2019 в 04:49, murano сказал:

Обоснуйте :)

 

В 21.12.2019 в 00:56, Ivan_83 сказал:

Ввиду частых злоупотреблений на местах решили лавочку прикрыть.

Поясняю: заепали "умники" думающие что они могут приоритезировать трафик и так экономить на аплинке делая оверсубскрайбинг больше возможного, в добавок ещё пихая тонные своей левой рекламы на чужие сайты, трекая что делает юзер, подменять трафик юзера (вставка рекламы - была модификация, а тут речь про совсем замену всего контента) и заниматься цензурой.

 

DPI это для белых людей живущих в демократии, где можно придти и сказать: "какого хера ты делаешь тут за мои деньги!? пшёл вон скатина! и заплати компенсацию!"

И вот когда DPI докатился до дикарей и от этого начали страдать интересы белых людей, они его решили и превратили обратно в тыкву.

Всё потому что они себе это позволить могут:

- оверсубскрайбинг их не сильно интересует

- за вставку и подмену их поругают

- за фильтрацию без спросу - сильно поругают

- анб хватает чёрных ходов в огрызок, гуглаг, мордоркнигу, трёпер и пр социалки, и у них импланты где надо стоят, им дпи и так не очень нужен был

- ну и корпораты просто прочтут новую методичку как по новому настраивать DPI для СВОИХ сетей со СВОИМИ устройвами для СВОИХ юзеров которые добровольно ПОДПИСАЛИСЬ на это устраиваясь на работу.

 

Сколько ещё нужно криптографии чтобы до провайдеров и местных дебилов дошло простое: дело провайдера - труба. Так же как и дело водопроводчика и канализации - труба, а дело электрика - провод.

Не можете работать как белые люди - вас заставят.

[Tosha]

Провайдер это труба. Но только у большого провайдера это такие дорогие трубы что они начинают спорить друг с другом и контентом за чей счет расширять. И вообще кто кому клиент.

И тогда начинают приводить "последний довод" - DPI. Но тут провайдер знает кого "шейпит". И за что.

Понять то можно - платный netflix генерирует терабиты трафика, собирает за это миллиарды бабла. А провайдер за копейки ищи способ это все доставить?  Нет уж - пусть оплачивает со своей стороны хотя бы часть трубы! Иди сервер ставит как-то кэширующий...

Это вопрос совести и возможностей. Иногда даже мелкому провайдеру реально не добыть в нужном месте достаточную полосу для текущих толстых сайтов.

[Ivan_83]

8 минут назад, Tosha сказал:

Понять то можно - платный netflix генерирует терабиты трафика, собирает за это миллиарды бабла. А провайдер за копейки ищи способ это все доставить?  Нет уж - пусть оплачивает со своей стороны хотя бы часть трубы! Иди сервер ставит как-то кэширующий...

Провайдер уже получил деньги от клиента за доставку пакетиков, теперь ещё с другой стороны хочет срубить?

Аргумент "нетфликс богатый пусть делится" - это плохой аргумент.

Вот вам гугль, с нетфликсом, амазоном и прочими щас объясняет кто тут труба.

[Tosha]

1 час назад, Ivan_83 сказал:

Провайдер уже получил деньги от клиента за доставку пакетиков, теперь ещё с другой стороны хочет срубить?

Ну как бы абонент не у провайдера фильм заказывает а у Netflix.  

Это как с МГ связью.   Абонент платит оператору МГ связи за звонок.  А уже оператор МГ связи платит оператору местной связи что его сети были использованы для оказания платной услуги.  Т.н. плата за "инициирование".  Все справедливо.

Кто деньги за услугу получил (например показ фильма) тот отвечает за доставку. Хотя бы частично.

Вопрос конечно дискуссионный... Но вот когда L3 с Кодгентом бодался как раз по поводу Netflix (вроде бы)  по вопросу за чей счет расширять каналы между ними т.е. одному как бы платят абоненты другому сам Netflix.  Тут дело принципа. Хотя бы частично возместил... На пару расширить...

Но когда один встает в позу - не дам ни копейки, то второй достает "DPI".   И вроде бы они там как-то это разрулили. За счет Netflix.

Но конечно если кто-то из относительно мелких попробует повоевать с L3 то у него ничего не выгорит.

Вот Гугл правильно политику ведет. Достаточно крупным операторам есть возможность поставить гуглокэшь и решить проблемы качества.

Если есть возможность недорогого расширения каналов и ты мелкий (например 30т абонентов) лучше запас полосы и никаких DPI. Но иногда вот хотел бы купить полосу - а никак. Или нет магистралей или сильно дорого. Монополия чья-то. И как хочешь - так и крутись. Ну нет 100Г, допустим, условно, на Мурманск, а надо! У тебя может быть 100т абонентов и каждый кушает 1 Мбит. Такие нынче толстые ресурсы. В Мурманск может быть и есть достаточно каналов, но вот в сибири нашей явно полно мест где вообще ничего...

Но когда ты вполне мог бы купить а тебя жаба душит - то тут DPI-чить конечно уже просто бессовестно.
Имхо. Но с этим я думаю большинство согласится :)


А если полосы достаточно - то DPI что-то приоретизировать смысла нет. Отсюда когда спрашивают про DPI сразу у специалистов мысли - "хроническая полка", бессовестный экономист. И т.п. :) 


Возвращаясь к топику - а вообще есть смысл так уж различать сайты по доменам?  Популярные ресурсы можно вырулить просто по IP. А остальное - как выйдет.

[Ivan_83]

1 час назад, Tosha сказал:

Ну как бы абонент не у провайдера фильм заказывает а у Netflix.

Вот они без вас расчитаться смогут.

Я вот вообще всякие видосики у себя бесплатно раздаю с домашнего сервера, и что?

 

1 час назад, Tosha сказал:

Это как с МГ связью.   Абонент платит оператору МГ связи за звонок.  А уже оператор МГ связи платит оператору местной связи что его сети были использованы для оказания платной услуги.  Т.н. плата за "инициирование".  Все справедливо.

Какое нахер инициирование?!

Я вообще могу udp/icmp рассылать 0.0.0.0-255.255.255.255.

OSI семироувневая от фуфлофонистов не взлетела, там как раз был справедливый делёж баблища на всех 7 уровнях, влзлетела tcp/ip = dod4 от халявщиков.

 

1 час назад, Tosha сказал:

Вот Гугл правильно политику ведет. Достаточно крупным операторам есть возможность поставить гуглокэшь и решить проблемы качества.

Вообще то не только гугль, но и всякие иви вроде тоже и рутубы и хз кто ещё. Я краем уха слышал, за рюмкой пицы :)

 

1 час назад, Tosha сказал:

Возвращаясь к топику - а вообще есть смысл так уж различать сайты по доменам?  Популярные ресурсы можно вырулить просто по IP. А остальное - как выйдет.

Вот я тоже думаю что проще по IP было бы многое разрулить.

[andryas]

3 hours ago, Ivan_83 said:

Провайдер уже получил деньги от клиента за доставку пакетиков, теперь ещё с другой стороны хочет срубить?

 

Не совсем. Абонент платит денег, достаточных лишь за небольшую (например, 1 мегабит) полосу. Для удобства клиента, учитывая небольшое среднее потребление, оператор даёт ему возможность попользоваться гораздо более широкой полосой без пропорционального повышения абонплаты. Но такая модель работы возможна лишь до того момента, пока не появляются всякие нетфликсы, нашедшие возможность заработать на этой доброй воле оператора.

 

С ростом количества пользователей,  естественно, нагрузка на сеть растёт и, вместе с ней, растут издержки оператора.

В какой-то момент у оператора возникает резонный вопрос: а кто же заплатит за это?

 

Возможные варианты решения:

 

1. Наиболее логичный. Генератор контента устанавливает свои кеширующие серверы в серверную оператора, оплачивая, как минимум, стойкоместо и электричество. Так делает, например, Гугль.

Для генератора контента особых неудобств и расходов в таком решении нет.

Расходы оператора на внешние каналы уменьшаются (но внутренний трафик всё-же растёт). 

 

2. Генератор контента делится прибылью с оператором, позволяющей оператору оплачивать расширение внешних каналов. Либо оплачивает полосу (стык), либо делегирует оператору сбор абонентской платы, часть которой оператор оставляет себе.

 

3. Оператор увеличивает абонентскую плату для своих абонентов, соотвественно увеличению своих расходов. Либо всем, либо только пользователям "тяжелого" сервиса.

 

4. Генератор контента  блокируется или шейпится до принятия оным одного из выше перечисленных решений.

Альтернативно, оператор может предложить своим пользователям собственный, либо партнёрский сервис аналогичного содержания за определённую абонплату.

[TriKS]

Да все просто, йопсель.

Почему отмер диалап? Потому как не смог дать ютупчик и интерактивный инет. Все остальные рассуждения - масло масленное. На самом деле с течением времени растут и скоростя. Раньше вот на кобылах и каретах гоняли, сейчас на тойотах и хондах. Потому как комфорт, время, деньги. Это обычный треугольник. Его можно перенести на провайдеров. Если ты не делаешь жизнь клиента комфортной, не экономить его время или деньги - ты теряешь клиента. Он идёт туда, кто это даст.

Ты подрезал ОТТ, абон свалит к тому, кто не подрежет. Ты даёшь малую скорость - абон свалит к тому, кто даёт бОльшую за тот же ценник. Рынок, йоптить.

теперь собсно с чего вдруг вы собрались резать нетфликс, а не ютуп? Не торрент? Не онлайнкинотеатры? Почему вы решили не резать пиратку в виде Эдема, ХДбоксов, зато решили потягаться с ОТТ? Откуда это ущербное мышление?

Абон дал тебе денег за доступ к тырнету? Дал. То что ты поставил соточкц за чирик - твои сугубо половые проблемы. Ставь по чесноку. Но тут же соседи и маркетинг... Все куда сложнее....

Вот именно поэтому в итоге мелкие провайдеры не выдердат в ближайшие 3-6 лет. И будут либо поглащены, либо убиты конкуренцией тех, кто сможет удовлетворить хотелки клиента.

Когда у тебя с крана ржавчина течет, ты же не идёшь к насосу, что стоит за тридевять земель и не говоришь водохранилищу - Ану переместить ко мне под дом. Ты греешь уши обслуживающей компании. И так во всем мире.

 

Изменено 24 декабря, 2019 пользователем TriKS

[alibek]

1 час назад, TriKS сказал:

Почему отмер диалап? Потому как не смог дать ютупчик и интерактивный инет.

Диалап умер намного раньше, чем появился YT.

[TriKS]

Это было образное выражение. По сути - он не смог покрыть хотелки пользователей.

[alibek]

Ну тогда причина вовсе не в этом. Точнее это следствие, а не причина.

Причина в том, что на тех же телефонных линиях появился ADSL, который по всем параметрам был лучше. И уже после этого стал возможным интерактивный веб и начался рост объема и сложности страниц.

Это как с флоппи-дисками. Кого только убийцей floppy не называли (в том числе и достаточно технологичные решения), но реальным убийцей floppy оказались только флешки — потому что сохраняя их основные удобства оказались по всем параметрам лучше.

 

3 часа назад, TriKS сказал:

Вот именно поэтому в итоге мелкие провайдеры не выдердат в ближайшие 3-6 лет.

Скорее всего да, вместо сотен и тысяч провайдеров будут единицы мегателекомов.

Правда для поставщиков контента это будет скорее негативным моментом, потому что при отсутствии других путей доставки контента диктовать правила снова будет "труба".

[Tosha]

20 часов назад, andryas сказал:

Не совсем. Абонент платит денег, достаточных лишь за небольшую (например, 1 мегабит) полосу. Для удобства клиента, учитывая небольшое среднее потребление, оператор даёт ему возможность попользоваться гораздо более широкой полосой без пропорционального повышения абонплаты

Генераторы контента не могут сильно пока что поднять среднее потребление тут проблем особо нет. Проблема в другом...
Проблема в возможных перекосах трафика на аплинках. Абонент смотрит новый Netflix но не смотрит ютуб. Т.е. в среднем то же но трафик на одном направлении может скакнуть внезапно и сильно... А на другом просесть.

Оператор А имеет абонентов и имеет достаточную полосу. Оператор Б тоже.  Но вот оператор Б подключает Netflix на скорости 100Г и соответственно для этого клиента он должен достаточно расширить каналы. Причем это "юрик" тем более генератор трафика. Оператор Б должен был расширить на те же 100Г канал между А и Б. Что в принципе как бы логично...

Но оператор Б не хочет и встает в "позу" - "Пусть оператор А за свой счет расширяет полосу между нами, ведь именно он должен обеспечивать полосу своим абонентам..." В принципе это тоже логично... А оператор А справедливо возмущен - а чего это Б подключил абонента а платить должен я?!

И понеслось...  Ситуация симметричная (если операторы одной весовой категории) и выиграет тот кто сможет дольше продержаться. А тот кто лучше умеет делать DPI у того преимущество. Но тот у кого генерирующая сторона обычно в выигрышной позиции. Даже если ему придется платить он все равно в прибыли. т.е. А или проигрывает или при своих. Б или выигрывает или при своих.

Потому то операторы верхнего уровня стараются привлечь побольше ресурсов и сервисов :)

Но все это игры для крупных операторов. В России таких всего пяток...  Остальные у них покупают и будут покупать.

P.S. один из аплинков как-то удачно для себя поставил гуглокэш. Наш трафик наверх так перекосило что с трудом выровняли. А то пришлось бы платить за расширение. Вряд ли мы смогли бы убедить его расширять за свой счет :)

[Ivan_83]

20 часов назад, andryas сказал:

Не совсем. Абонент платит денег, достаточных лишь за небольшую (например, 1 мегабит) полосу. Для удобства клиента, учитывая небольшое среднее потребление, оператор даёт ему возможность попользоваться гораздо более широкой полосой без пропорционального повышения абонплаты. Но такая модель работы возможна лишь до того момента, пока не появляются всякие нетфликсы, нашедшие возможность заработать на этой доброй воле оператора.

Ещё раз: абонент заплатил и его не епёт. У абонента договор с провайдером, провайдер должен абоненту за то что он заплатил.

Ютуб/нетфликс ничо не знает про провайдеров из зажопинска, он платит своим аплинкам/стыкам или они платят ему, у них есть с ними договорные отношения.

Если лично у тебя какие то там проблемы - то поднимай ценник или закрывай бизнес, контент тебе платить не будет, по крайней мере пока ты не станешь совсем большим и не получишь прямой стык с ютубом/нетфликсом и пр.

И 100000500000 других сайтов тебе тоже платить не будут.

И 100000000000000000005000000000000000000000 пиров из торрента подавно, за исключением тех что уже твои абоненты.

 

20 часов назад, andryas сказал:

С ростом количества пользователей,  естественно, нагрузка на сеть растёт и, вместе с ней, растут издержки оператора.

В какой-то момент у оператора возникает резонный вопрос: а кто же заплатит за это?

А вместе с тем растёт и КМ, чё ты тут прибедняешься то.

 

 

19 часов назад, TriKS сказал:

Почему отмер диалап? Потому как не смог дать ютупчик и интерактивный инет.

Потому что:

- телефон занят а он тогда бывал нужен ибо мобил особо не было

- связь рвалась постоянно

- скорость говно, зависела от погоды

- дорого

"Интерактивный инет" появился сильно позже.

 

 

15 часов назад, alibek сказал:

Причина в том, что на тех же телефонных линиях появился ADSL, который по всем параметрам был лучше. И уже после этого стал возможным интерактивный веб и начался рост объема и сложности страниц.

Это всё произошло по двум причинам:

1. Накопился стёк технологий на базе которого это стало возможно

2. Пришло много хомяков которым только это и было надо

 

Так то я чатился в вебчатике ещё в 2000 году, в аське в 2001, а каконить ixbt появился ещё в 90х и до сих пор не сильно изменился.