[Opium38]

Добрый день. Спец знаний нет, все строилось по небольшим статьям и практике, полученной в результате работы с сетью. Ситуация следующая: Имеется поселок частных домов. В центре находится вышка, на которой размещены базы 5Ггц. Вокруг частные дома, подключаются Powerbeam  и Airgrid. Периодически появлялись проблемы со скоростью у некоторых клиентов, в основ при простоте ТВ и фильмов. В какой то момент, вероятно совпадение, но много клиентов начало звонить с жалобой на скорость и большие тормоза. Все с разных баз, поэтому отсекаем какую то одну локальную проблему с базой. Проблема заключалась в низком % ccq либо ОЧЕНЬ высоким пингом. 

Данные по базам: 2 ubnt Prism, 3 Rocket M5. На Prism 35-40ч, на Rocket 20-30. Тарифы инета у клиентов в среднем 4мб, но есть трафик в виде телека. Пинги до клиентов по вечерам высокие, 200-600мс с провалами при размере пакета 10к. На 32 байта пинг 10-30 мс. Смена частот и тп не особо помогает. Ниже скрины с баз.

 

 

 

 

 

Скрин одного из клиента

 

 

 

скрин второго

 

 

Вот пинги этого клиента 

 

 

 

На некоторых точках появляются ошибки вот такие

 

 

Смущает сильно одна спектрограмма с антенны, причем со стороны клиентов такого не наблюдается. На других базах тоже. Только на одной

 

 

Изменено 11 ноября, 2019 пользователем Opium38

[slv700]

2 часа назад, Opium38 сказал:

Пинги до клиентов по вечерам высокие, 

Проблема   в перегрузе  секторов БС трафиком в часы пик ( в вечернее время).

Выложите графики суточной загрузки  базовых станций ( клиенты которых жалуются), снятые с порта свича ( типа Cacti, MRTG).  И много ли  у вас клиентов  Airgrid? Это одночейновые девайсы, сильно сьедают емкость секторов  по  пропускной способности.  Гриды нужно заменить  на повербимы М5, наносы М5. Лайтбимы не подойдут, они тоже одночейновые.

PS

ТВ/видео на UBNT можно смотреть при небольшом ( до 15) количестве клиентов на сектор. У вас   на всех базах количество клиентов на сектор ubnt -   на пределе, да еще есть и одночейновые гриды. Про ТВ/видео клиентам на ubnt БС при такой нагрузке забудьте.  

 

[Opium38]

Ну по нагрузке да, это мы поняли уже. Поэтому и стоят Ac Prism. Вопрос интересует почему упал CCQ? Графики загрузки сейчас выложу, мониторинг ведется

Изменено 12 ноября, 2019 пользователем Opium38

[Opium38]

Вот 5 баз, данные 2х дней

 

По поводу загрузки баз 

[Opium38]

 

10 hours ago, Opium38 said:



 

а тут все нормально?  На других спектрограммах такого нет, жуткий шум, волновой, как при глушилке

[slv700]

8 часов назад, Opium38 сказал:

Поэтому и стоят Ac Prism.

Rocket 5AC Prism с клиентами М5 не даст отноcительно Rocket M5 существенной  прибавки в пропускной способностью сектора ( плюс 5-10Mbps ) и  max количества клиентов на сектор ( +5-10 клиентов).

На 4-й базе у вас однозначно перегруз. На остальных  базах - как бы есть еще небольшой запас, но при условии , что  если все клиенты М5. Но у вас там присутсвуют  гриды и если их хотя бы 20--30%, то  это также уже есть перегруз.

[Opium38]

5 minutes ago, slv700 said:

Rocket 5AC Prism с клиентами М5 не даст отноcительно Rocket M5 существенной  прибавки в пропускной способностью сектора ( плюс 5-10Mbps ) и  max количества клиентов на сектор ( +5-10 клиентов).

На 4 и 5 базах у вас однозначно перегруз. На 1-3 базах -типа есть еще небольшрй запас, но при условии , что  если все клиенты М5. Но у вас там есть гриды и если их хотя бы 30%, то тоже есть перегруз.

а что если поставить несколько Airprism, по 3 бошки 30град и разделить сектор большим кол-вом призм? К перегрузке мы тоже уже склоняемся, просто началось все как то разом, будто кто то глушит связь, но вероятно совпадение и стечение обстоятельств

Изменено 12 ноября, 2019 пользователем Opium38

[slv700]

9 часов назад, Opium38 сказал:

Вопрос интересует почему упал CCQ?

ССQ - это производная от  потери пакетов  в каких то % погугаях. Потери пакетов могут быть 1) от помех 2) от перегруза  3) плохой совместимости софта 5AC c клиентами М5 и тем более с гридами.

1) помехи у вас есть, но у вас очень высокие сигналы благодаря клиентам с мощными антеннами и короткой дальности. По идее сигналы в -45дБм должны побороть любые помехи.

Тем более проблема у вас на всех БС и смена частот не помогает. Никаких глушилок у вас нет,  обычный зашумленный эфир .

За перегруз я сказал. Дело скорее всего  в нем, по большей части  из за гридов.  Какой %  гридов на сектор?

3) Насчет совместимости AC с M5 - пробуйте разные комбинации прошивок и режимов mixed. У вас видимо что то изменилось в эфире и то что раньше работало, -перестало.

 

45 минут назад, Opium38 сказал:

а что если поставить несколько Airprism, по 3 бошки 30град и разделить сектор большим кол-вом призм?

Ставьте призмы с 30-60 град антеннами типа хорн и до 30 клиентов на сектор ( до 15 если сервис ТВ-видео, если клиент хочет HD - то ему нужно CPE AC ) . Но, главное, снимайте гриды. Хорны и фильтры  призм  повысят вам ЭМС на базах  и снизят помехи.

[slv700]

Это  как то снимет остроту проблемы, но не надолго.   Вы исчерпали ресурсы UBNT по многим параметрам , в том числе  уровень зашумленности эфира превысил возможности по помехоустойчивости  UBNT.  И UBNT - не масштабируется, для модернизации сети вам понадобится много частот, баз и антенн. 

Принципиальное решение проблемы - замена баз на Камбиум ( хватит 3-х БС) и апргейд клиентов ubnt софтом Elevate. Но опять же - если будут присутствовать одночейновые девайсы,  то и Камбиум вам не поможет.

[NewUse]

Проверяйте нет ли флуда в сети, какой pps на базах?

[Opium38]

4 hours ago, slv700 said:

Какой %  гридов на сектор?

ну,  к сожалению, получается 95%

[slv700]

5 минут назад, Opium38 сказал:

ну,  к сожалению, получается 95%

Скупой платит дважды.

[Opium38]

1 hour ago, NewUse said:

Проверяйте нет ли флуда в сети, какой pps на базах?

Снифером снимал логи со свитча в узле и с каждой антенны с лан порта. Все чисто.  данные pps скажу позже

 

3 minutes ago, slv700 said:

Скупой платит дважды.

да, это уж точно. Никто не подумал о подобном, теперь конечно взгляд на строение сети поменяется)))

[SOFTOLAB]

7 hours ago, slv700 said:

Это  как то снимет остроту проблемы, но не надолго.   Вы исчерпали ресурсы UBNT по многим параметрам , в том числе  уровень зашумленности эфира превысил возможности по помехоустойчивости  UBNT.  И UBNT - не масштабируется, для модернизации сети вам понадобится много частот, баз и антенн. 

Принципиальное решение проблемы - замена баз на Камбиум ( хватит 3-х БС) и апргейд клиентов ubnt софтом Elevate. Но опять же - если будут присутствовать одночейновые девайсы,  то и Камбиум вам не поможет.

Вот сразу бы так начать впаривать свой камбиум...

А то я читаю, и все жду, жду, когда реклама пойдет, а вы все выжидали, выжидали...

[NewUse]

17 часов назад, Opium38 сказал:

а тут все нормально?  На других спектрограммах такого нет, жуткий шум, волновой, как при глушилке

На спектре что-то непонятное, возможно точка сломана, попробуйте заменить/отключить.

 

с базы покажите вкладку вайрлесс-стейшенс

уменьшайте мощности, так чтоб на базе уровень от всех клиентов был -55дБм +-3дБ
а на базе, так, чтоб на самом дальнем клиенте уровень был хотяб -60

[Opium38]

 

6 hours ago, NewUse said:

с базы покажите вкладку вайрлесс-стейшенс

уменьшайте мощности, так чтоб на базе уровень от всех клиентов был -55дБм +-3дБ
а на базе, так, чтоб на самом дальнем клиенте уровень был хотяб -60

Вот пример одной базы. На них мощность в районе 20 стоит у всех, у клиентов, в зависимости от дальности, от 2 до 18

 

Изменено 13 ноября, 2019 пользователем Opium38

[Timurka]

21 час назад, slv700 сказал:

Но, главное, снимайте гриды

Однозначно, с этого начинать! Профит увидите сразу

[Opium38]

Хорошо, подумаем как это исправить. Менять гриды очень накладно получится) Какая критичная масса гридов на базе, чтобы работало более менее стабильно?

 

Попутный вопрос. Вот при изменении конфигана точке, не важно какого параметра, после реконектка вот такие пинги. Почему такой резкий обвал мб?

[NewUse]

клиенты у которых сигнал слабый и ccq просидает, попробуйте их отключить от базы. смена гридов Вам скорее всего не поможет, Вам нужно больше баз и строить секторную структуру(сейчас у Вас же омни?).

[slv700]

6 часов назад, Opium38 сказал:

Какая критичная масса гридов на базе, чтобы работало более менее стабильно?

Вопрос не в стабильности, а в пропускной способности сектора. Скорость в SISO в точка-точка в 2 раза меньше, чем MIMO 2x2.

        В малтипойнт  теоретически то же самое, но не в случае UBNT.  Максимальная скорость UBNT в 20 Мгц MIMO 2x2  в точка-точка   примерно   равна 100 Mbps  и она падает в малтипойнт  ( 20-30 клиентов) примерно в три раза до   max 35 Mbps . Одна из  причин  ( примерно IMHO 30-40% )  такого падения -низкая ( недостаточная) кроссполяризационная изоляция чейнов H и V  в малтипойнт  Airmax.  И хотя data rate  и модуляция может показывать работу  MIMO 2x2, но есть кроссполяризационные помехи ( то есть клиенты мешают сами себе) , и как следствие  имеются большие потери пакетов и падение  реальной скорости. В одночейновых гридах нет кроссполяризационных помех .  Поэтому навскидку емкость сектора UBNT в малтипойнт в одном чейне  можно посчитать так. Скорость в 20 Мгц  точка-точка  50 Mbps    в одном чейне   делим  не на 3,  а на 2  (поскольку убирается составляющая кроссполяризационых помех) = 25 Mbps.    

           Поэтому считайте, если поменяете все гриды на бимы (не лайт) получите максимальную емкость сектора 35 MBps. Половину - 30 Mbps.  Текущую загрузку ваших секторов вы видите сами. Тем самым,  смысл замены гридов  есть,  и это даст некоторый прирост пропускной способности и снизит остроту проблемы . Но хватит ли вам этого прироста? Думаю как придет зима ( а возможно к вам она уже пришла ),  клиенты будут сидеть  дома в Интернет и смотреть ТВ,   и тогда  ваша сеть опять упрется в полку по пропускной способности.  И если не этой зимой, то  через год  или раньше-точно.

           Вариант замены баз UBNT на Камбиум ePMP 1000/2000  без замены гридов  даст незначительный эффект . При 100% замене гридов  вы могли бы увеличить емкость в 3 раза -до 90 Mbps,  без замены при 95% клиентов SISO , вы получите на Камбиум SISO не более 40-50 Mbps в малтипойнт- чуть меньше чем на Камбиум  SISO в точка-точка.  Если поменяете половину гридов - то  порядка 60+ Mbps на сектор Камбиум ePMP 1000/2000 получите.

           По другому обстоят дела при замене Рокетов на ePMP 3000 MU-MIMO 4x4.   Для М5 клиентов будет тоже самое, а вот для гридов -лучше.   Почему?  Если коротко SISO  клиент, работая на сектор MIMO 2x2 ест ресурс двух чейнов MIMO 2x2.   В   MU-MIMO  такому клиенту отдается  один чейн, а остальные три остаются доступны другим клиентам.  Кроме того,  на ePMP 3000   проблемным и новым клиентам можно ставить родные CPE 802.11ac wave2, которым можно дать в миксе  ( в том числе со старыми клиентами  UBNT )  сервис в 20 Мгц  50-100Мbps  (общая емкость 20 Мгц сектора в малтипойнт 200+ Mbps), в 40 МГц - 100 Mbps (  емкость сектора 400+ Mbps)

     Если не можете заменить гриды,  и/или делать апгрейд сети  на Камбиум , то единственный путь- ставить дополнительные сектора UBNT ( если у вас есть достаточно частот) и делить между ними своих клиентов. Не факт, что это ( с учетом всех затрат, в том числе частотного ресурса )  будет дешевле, и по любому  -это неэффективный и тупиковый путь.

[slv700]

6 часов назад, Opium38 сказал:

Хорошо, подумаем как это исправить. Менять гриды очень накладно получится) Какая критичная масса гридов на базе, чтобы работало более менее стабильно?

 

Попутный вопрос. Вот при изменении конфигана точке, не важно какого параметра, после реконектка вот такие пинги. Почему такой резкий обвал мб?

При дисконекте после изменения конфигурации  базы  накапливается  очередь запросов, которая при восстановлении связи дает кратковременный взрывной рост трафика, что еще больше загружает  и без того перегруженный сектор.

[Constantin]

1 час назад, slv700 сказал:

По другому обстоят дела при замене Рокетов на ePMP 3000 MU-MIMO 4x4.

да посмотрим теперь коммерческую составляющую это дела:

 

база  59к рублей  + 2,9к за каждую лицензию элевейт.

это для того чтоб посчитать рентабельность сего действа.

 

а вот как будет это дело работать в реальном полете с гридами никто не знает, ну кроме доблестного продавана,

 

рентабельность данного предложения  в глубокой жоппе

 

 

 

[slv700]

2 часа назад, Constantin сказал:

база  59к рублей  + 2,9к за каждую лицензию элевейт.

Уж не знаю где ты берешь $45 одну лицензию Elevate. Помнится когда то ты показывал где есть такие цены, но х.з откуда эти люди берут такие цены,но если просят эту цену, значит есть спрос за эту цену. 

 Я могу рассказать  про наши цены  ( что сам знаю)   в Украине , продается без НДС .

Одна база  ePMP идет c 15 бесплатными лицензиями. Плюс нужно еще 15 лицух по $15-всего  $225 за 30 лицензий, тем самым по  $7.5  что есть 500 рублей за одну лицензию.

База ePMP 3000L  ( вместе с 15 лицензиями) стоит $399 -  25 тыс. р.  Например  здесь.

Эта база  802.11ac wave 2  MU-MIMO 2x2 и  она точно также  работает с одночейновыми девайсами как и ePMP 3000 , то есть отдает им один чейн, а не два  как это делают базы 802.11n и ac , что разгружает базу.

Так что ТС , не меняя гриды и   заменив 5 рокетов на 2-3 базы ePMP 3000L или ePMP 3000 может  решить свою проблему повысив в разы емкость сети по пропускной способности.

А как работает 802.11 ac wave 2 c одночейновыми девайсами  и в теории и на практике уже известно.  Емкость сектора ePMP 3000  также известна и расчетно и на практике.

ТС уже находится в жопе, глубже некуда. И любой вариант выхода из нее  стоит денег.  Насколько эффективны и рентабельны  варианты выхода -  дробления секторов UBNT   vs  апгрейд сети на Камбиум - считайте, но по адекватным ценам  и с учетом всех расходов, в том числе расходы за дополнительный частотный ресурс,   который если все делать  легально, еще нужно получить, и не факт что  дадут.  

 

[Constantin]

9 минут назад, slv700 сказал:

Я могу рассказать  про наши цены  ( что сам знаю)   в Украине , продается без НДС .

господин "неразсоврамши" !  повальному большенству тут  глубоко все равно что там у вас на Украине.......

 

названы реальные цены по России, и кстати это самые дешевые цены......поэтому раз вы тут на Российском форуме, среди Российских потребителей ведете пропаганду в сторону данного вендора то и оперируйте  ценами данного региона.

14 минут назад, slv700 сказал:

А как работает 802.11 ac wave 2 c одночейновыми девайсами  и в теории и на практике уже известно.  Емкость сектора ePMP 3000  также известна и расчетно и на практике.

кому известно?  ценовая политика вендора  держит объемы продаж на уровне плинтуса..... как минимум в России и тд и тп,

 

и заметте я не слова не сказал про то что кабыла это говно и вы все врете,  но 100% не на столько лучше насколько дороже ))))) 

[slv700]

Вот работа базы ePMP 3000  c  секторной антенной MIMO 4x4, ширина канала 20 МГц, TDD UL/DL=25/75.

К базе  на дальности 5-10 км подключены 19 клиентов  -13 шт Force 300-25 ( 802.11ac wave 2) и  6  шт Force 200 ( 802.11n).  Тариф - 25 Mbps. Средняя максимальная  загрузка сектора реальным трафиком до  60 Mbps.

Дополнительно к  загрузке БС живым трафиком на  одновременно   4-х CPE  Force 300-25   запустили  DL TCP Mikrotik bandwidth test. Получили среднюю максимальную загрузку 20 МГц сектора Download 120 Mbps. На графике   кривые  синего  и зеленого цвета показывает загрузку сектора в   разных потоках  MIMO 2x2   

Далее с этих 4-х СПЕ было снято ограничение  по  скорости и при дополнительной догрузки сектора  синтетическим  TCP трафиком   Микротик   BT  получена пропускная способность сектора в канале 20 МГц - Download 194 Mbps. 

Если бы вместо Force 200 были PB M5 -400 - то картина бы не поменялась, перепрошитые бимы работают точно также как  форсы 200.

Если вместо Force 200 или PB M5 были бы одночейновые  AirGrid M5, то  суммарная емкость   сектора не поменялось бы. Стала бы меньше доступная скорость для 802.11n  девайсов - порядка 40Mbps  в 20 Мгц , но зато остальная емкость 150+ Mbps была бы доступна девайсам 802.11 ac wave 2.  

Для решения проблемы ТС доступные  гридам  40Mbps снимут проблему перегруза сектора, а новым клиентам   этого же сектора на родных Cambium Force 300-13/16/19/25 будет доступны  эти 150 Mbps.  В случае использования  базы ePMP 3000L -  новым клиентам ( дополнительно сверх  20-30 уже существующих на гридах) будет доступно порядка 70-80 Mbps.