[SashaGub]

Здравствуйте, уважаемые пользователи!

 

Вводные данные:

Есть сеть построенная на оборудовании компании Ubiquiti в частном секторе (маленький населенный пункт).

Имеется в наличии несколько секторов на Rocket M2, абоненты используют NanoStation Loco M2. Проблема проявляется на одном из секторов, может есть и на других, но пока никто не жаловался. Абонентов на этом секторе 16 чел. в час пик и 10-11 в обычное время.

Так вот наступает какое то время (может быть утром, а может быть вечером – когда час-пик, а может быть раз в неделю) начинает валиться интернет – от абонента до антенны увеличиваются пинги и работать в интернете не возможно. Это может произойти само по себе, не зависит не от каких факторов, по крайне мере мы их не нашли.

- нормальный интернет.

- плохой интернет.

А искали зависимость от:

1.Напряжение сети – не влияло, когда валился было 220в., и когда хороший «инет» также 220, передергивание базы абонента не помогает, на антеннах установлены стабилизаторы с фильтрами, перегрузка антенны не помогает.

2.Зашумленность эфира – сканировали, показания что при хорошем, что плохом одинаковы, скрины выкладываю.

- показания при плохом пинге.

- показания при отличном пинге.

 

3.Загруженность антенны - не зависит от количества абонентов на антенне, не от прокачки, не от торентщиков.

Было замечено, что во время когда ухудшается сеть, ухудшается Transmit CCQ 60 – 70% и от клиента занижается скорость отдачи (модуляция) RX до MCS-0 6,5. Такое происходит не со всеми абонентами, часть работают, а часть не могут нормально пропингать антенну.

 

Теперь тех данные:

AirMax – включен,

Ширина канала – 20Мhz,

Точки клиентов в режиме роутера

На клиентах задействованы шейпера по 1124k (чтобы торентами не перегружали канал)

На точках ограничено количество подключений до 512.

Клиентам раздаются пакеты 512k и 1024k.

Используется AirMax Priority (Medium, Low)

На точках которые ближе к антене зажат Output Power (используется от 12 – 20dBm)

Антена сейчас использует частоту 2402 MHz (255-й канал).

В 2416 MHz (1-й канал) и 2451 MHz (9-й канал) имеются соседи (чьи то базы) с антенны их не видно, видно только со стороны клиента в AirVeiw (на скринах видно) ну и сигналы как видите у них не очень серьезные.

 

Скрины настройки точки и антенны выкладываю:

 

- антенна сектор.

 

Точка клиента:

 

[Saab95]

Ну так у вас интерференция, вот скорость и падает. Модуляция у клиентов опускается до самой низкой - следовательно если он в этот момент что-то качает или отдает в интернет, скорость всего сектора очень сильно падает, от этого растут пинги и появляются жалобы от клиентов. Вы написали что у вас несколько секторов. А какой разнос по частотам между ними? Видят ли базы друг друга на скане сети? Пробовали ездить к клиенту, у которого падает модуляция, чтобы посмотреть не сдуло ли антенну у него?

 

Ну и на вкладке ADVANCED в агрегации нужно поставить 8 и 8000 взамен того, что сейчас стоит.

[SashaGub]

Ну так у вас интерференция, вот скорость и падает.

Как от неё избавится? И почему она себя проявляет не систематически?

 

Модуляция у клиентов опускается до самой низкой...

Так в том то и дело, что клиент в этот момент ничего не качает, но принцип я понял, что падение модуляции у одного приводит к ухудшению качества сети других абонентов, верно?

 

Было такое что на этой антенне качало два клиента, у одного все ок, а другой страдает. Вырубание качающего клиента ничего не давало.

 

Секторов 4 , первый работает в 2402 MHz, второй в 2436 MHz, третий в 2352 MHz, четвертый в 2477 MHz. Разнос по расстоянию между секторными антеннами больше метра.

Сканирование между баз не делал.

У клиента все нормально, сеть же потом у него сама восстанавливается, например вчера вечером с 19:00 до 20:00, а потом все нормально.

 

Ну и на вкладке ADVANCED в агрегации нужно поставить 8 и 8000 взамен того, что сейчас стоит.

 

Это я знаю с Ваших постов, спасибо исправлю.

[Saab95]

Как от неё избавится? И почему она себя проявляет не систематически?

 

Секторов 4 , первый работает в 2402 MHz, второй в 2436 MHz, третий в 2352 MHz, четвертый в 2477 MHz. Разнос по расстоянию между секторными антеннами больше метра.

 

Вот из-за этого и проблемы. Если она снова будет, зайдите на все 4 базы и посмотрите, на какой проблемы. Потом запустите 3 остальных разом в перезагрузку и проверьте пропала ли она. Базы будут перезагружатся где-то около 20-30 секунд. Или отключите питание от нее, чтобы иметь больше времени для проверки.

 

Если вы на клиентах жестко не указывали частоты (а делать это никогда не надо). Включите у них страну Compliance test, на одной из баз поставьте частоту 2312, на второй 2372, на третьей 2412 на четвертой 2477. Ну или что-то вроде этого. Антенны, если есть возможность, загородите друг от друга подручными предметами, или опустите ниже уровня крыши.

[SashaGub]

Вот из-за этого и проблемы.

Не понял причины, расстояние или частоты?

Если она снова будет, зайдите на все 4 базы и посмотрите, на какой проблемы...

Это понятно, методом исключения...

Если вы на клиентах жестко не указывали частоты ...

Ничего такого не делал, понимая, что клиенты не потянутся за базой.

на одной из баз поставьте частоту 2312, на второй 2372, на третьей 2412 на четвертой 2477...

Между первой частотой и второй разнос в 60MHz, второй и третей 40MHz, третей и четвертой 65MHz.

А зачем, что это даст?

Когда у меня сейчас между первой и второй 50MHz, второй и третей 34MHz, третей и четвертой 41 MHz(2352, 2402, 2436, 2477)

Перед тем как выбирать частоты я сканировал эфир и рисовал карту частот. Кроме того как видите по скрину AirView у меня в 2412 MHz сидит сосед, правда не знаю на сколько это критично.

Антенны, если есть возможность, загородите друг от друга подручными предметами, или опустите ниже уровня крыши.

Антенны находятся на 30 метровой мачте где есть техническая площадка (1,5м. на 1,5м.) по углам которой приварены трубы и соответственно прикреплены сектора, металлические листы (экраны) если их приварить между антеннами подойдут?

[Saab95]

Вот из-за этого и проблемы.

Не понял причины, расстояние или частоты?

Если она снова будет, зайдите на все 4 базы и посмотрите, на какой проблемы...

Это понятно, методом исключения...

 

Антенны находятся на 30 метровой мачте где есть техническая площадка (1,5м. на 1,5м.) по углам которой приварены трубы и соответственно прикреплены сектора, металлические листы (экраны) если их приварить между антеннами подойдут?

 

Вы немного не поняли. Допустим смотрите вы 3-ю базу, на ней проблемы у клиентов. Выключаете все другие базы и смотрите исчезла ли проблема. Если проблема исчезла - значит соседние сектора влияют на работу этого.

 

Тут надо либо перевешивать антенны, либо уменьшать мощность устройств, либо использовать другие качественные антенны. Антенны от рокетов имеют очень плохие характеристики, то, что заявлено на сайте и красивые картинки с лепестками излучения - все не правда.

 

Причины тут и расстояние, и частоты. Если вы установили частоту работы на одной базе к примеру 2462, то устройство займет диапазон в интервале частот 2452-2472, но это еще не все, есть внеполосное излучение, которое у wi-fi довольно большое, поэтому к полученным частотам надо добавить еще по 20мгц в каждую сторону. В конечном итоге будет занято 2432-2492 и на этих частотах не должны работать другие точки. Но у других точек так же есть внеполосное излучение, поэтому нормальной работы достичь на 4-х точках на одной вышки сложно. Уменьшайте мощность тогда еще меньше на рокетах, до уровня 16-18дб, а то и меньше. Ограничивайте скорость на базе и клиентах до MCS-7, тогда антенны будут работать не в МИМО, а в режиме разнесенного приема/передачи, это позволит увеличить устойчивость к интерференции, повысить энергетические параметры линков.

 

Загораживать антенны листами металла можно, но это может исказить диаграмму направленности. Если вы к примеру возьмете гнутый швеллер 100, отпилите от него кусок по высоте антенны и приделаете его к ней, хорошо заземлите на мачту, это может внести затухание между антеннами, и они будут мешать друг другу уже в меньшей степени.

 

Но в конечном итоге, после всех мероприятий качество работы может улучшится не сильно и ваша затея обеспечить всем быстрый и дешевый интернет потерпит фиаско.

[kosmich7]

В 2416 MHz (1-й канал) и 2451 MHz (9-й канал) имеются соседи (чьи то базы) с антенны их не видно, видно только со стороны клиента в AirVeiw (на скринах видно) ну и сигналы как видите у них не очень серьезные.

По ходу вот кто вам мешает ! поверьте опыту ;)

Если вы не видите их базой а видите клиентами то 100% эти соседи ваших клиентов и прибивают когда там у соседей начинает гнаться трафа больше.

+ посты Saab95

[SashaGub]

Так теперь отчет о проделанной работе... :)

Сегодня был пойман зависон как прежде, отключение боковых и задней антенны не принесло результата! Так, что возможно, интерференцию нужно исключить из списка, хотя посмотрим дальше...

Сигналы на антеннах понизил до 20dB, если ниже уже наблюдается падение уровней у клиентов.

[Saab95]

База в каком режиме работает? бридж или роутер?

[SashaGub]

База в каком режиме работает? бридж или роутер?

 

Бридж, за ней MT RB450G

[Saab95]

Сетевые порты как я думаю в бридж объединены? Если это так, то создайте правило на бридже такого вида:

 

Chain - forward.

 

Bridges:

In Bridge - ваш бридж

Out Bridge - ваш бридж

 

Вкладка Action - drop.

 

Далее создаете правила маршрутизации:

 

1 chain=forward action=drop protocol=tcp dst-port=137-139

 

2 chain=forward action=drop protocol=tcp dst-port=445

 

3 chain=forward action=drop protocol=udp dst-port=137-138

 

4 chain=forward action=add-dst-to-address-list protocol=udp

dst-address=192.168.2.5-192.168.2.254 address-list=dst_list

address-list-timeout=0s

 

5 chain=forward action=accept src-address=!192.168.2.0/24

dst-address-list=dst_list dst-limit=250,250,dst-address/1m40s

 

6 chain=forward action=reject reject-with=icmp-admin-prohibited

dst-address-list=dst_list

 

Вот как-то так. Заместо адресов 192.168.2.х ставите свою подсеть. 250 это тут количество пакетов в секунду. Больше этого клиенты прокачать не смогут.

 

Этим вы ограничите максимальное количество пакетов для каждого клиента.

[SashaGub]

В MT порты настроены не бриджом, а слейвами на второй.

 

По дропированию портов (137-139, 445) понятно, спасибо, сделал.

Обясните 4-е правило, по количеству сессий тоже понятно, у меня сейчас 120 , 5-е что-то по поводу ICMP протокола также разжуйте.

4-е и 5-е правило в фаервол не вставлял.

 

Еще пару моментов по секторам:

1. Занизил модуляцию на клиентах и базе до MCS-7, особо улучшения не заметил кроме как увеличения на некоторых клиентах Transmit CCQ, но при плохом интернете (когда увеличиваются пинги, на некоторых клиентах) все равно так как и до уменьшения модуляции становится Transmit CCQ 70%.

2. Хочу напомнить, что ухудшения происходит не у всех клиентов которые сидят на одном и том же секторе, а у нескольких, например клиентов на базе 12, а падает интернет у 2-их, оборудование у все одинаково.

3. Понизил Агрегатион на клиентах от 8 - 8000, вопрос на базе тоже понизить, уже сделал, результата не заметил.

4. Вчера в момент еще одного такого падения (не у всех клиентов) было замечено, что соседи о которых я говорил в 2-ом и 9-ом канале, это ни что иное как чья то база в 5 канале с шириной в 40МHz (от умники блин). Скрин чуть позже выложу. Видно когда создается среда для лучшего прохождения радиосигнала он мешает моим клиентам.

5. Ну и еще для полноты информации интернет у этих клиентов сам восстанавливается, проявляется по времени например утром все нормально, а ухудшения например с 15:00 до 16:00, потом нормально, с 18:00 до 21:00, потом стабилизируется, вчера например с 19:00 до 23:30 потом все нормально, потому сначала думали, что зависимость от электричества когда народ включает обогреватели и.д. - от скачков, но это не подтвердилось.

 

- анализ всего спектра от 2347 - 2702(видны чужие антены)

- синим отмечен мой канал на котором проблемы с клиентами и показаны соседи.

Изменено 1 декабря, 2011 пользователем SashaGub

[Saab95]

По дропированию портов (137-139, 445) понятно, спасибо, сделал.

Обясните 4-е правило, по количеству сессий тоже понятно, у меня сейчас 120 , 5-е что-то по поводу ICMP протокола также разжуйте.

4-е и 5-е правило в фаервол не вставлял.

 

4-5-6 это одно правило как бы. Которое разрешает только 250 пакетов от клиента в секунду. Одно добавляет соединения в connect-list, второе разрешает прохождение только 250 пакетов, третье дропает весь трафик сверху.

 

Если вы думаете что помеха от этого сектора, попробуйте поменять частоты на ваших базах местами - возможно поможет уйти от помехи. На тех двух клиентах просканируйте сети, видят они эту точку или нет?

[kosmich7]

1. Занизил модуляцию на клиентах и базе до MCS-7, особо улучшения не заметил кроме как увеличения на некоторых клиентах Transmit CCQ, но при плохом интернете (когда увеличиваются пинги, на некоторых клиентах) все равно так как и до уменьшения модуляции становится Transmit CCQ 70%.

 

что зависимость от электричества когда народ включает обогреватели и.д. - от скачков, но это не подтвердилось.

1) Вот это 100% показатель помехи.

 

До чего только не додумаешся))))

У меня был случай когда БП подключили несовсем правильно, в итоге 30вольт ему хватало чтоб нанос работал, зависал иногда, поэтому и стали копать, у клиента стоит AVR, и БП наноса включили между фазой на входе и выходе AVR, что в итоге и пулучал БП 30-45вольт.

Так что от 120вольт ему за глаза))

[SashaGub]

1) Вот это 100% показатель помехи.

Буду искать,пока решил снять показания шума со всех антен (баз), и разложить на карте частот все сигналы, чтобы видеть что творится вокруг.

Подскажите еще такой момент какие шумы (с каким уровнем) считать критическими или допустимыми.

 

Еще провел эксперимент на одном секторе, перевел клиентов и базу в 10MHz, да шумы стали меньше -97dBm... - 100dBm, но и время пингов увеличилось с 2мс. до 5-7мс. Вернул все назад, но не думал что в глухой деревне может быть так загажен эфир, мало того и рельеф такой, что она в яме (со всех сторон леса дубовые и возвышения).

 

До чего только не додумаешся))))

У меня был случай когда БП подключили несовсем правильно, в итоге 30вольт ему хватало чтоб нанос работал, зависал иногда, поэтому и стали копать, у клиента стоит AVR, и БП наноса включили между фазой на входе и выходе AVR, что в итоге и пулучал БП 30-45вольт.

Так что от 120вольт ему за глаза))

 

120 вольт, ему за глаза, это верно, но и еще проверено что продукция Ubnt со своими импульсными БП боится кратковременных скачков напряжения, что может выражается в подвисании точек, а в частном секторе это обычное явление - сварочные аппараты, трехфазные двигателя, включенные через ёмкостя на одну фазу и т.д.

Изменено 3 декабря, 2011 пользователем SashaGub

[-кабельщик-]

120 вольт, ему за глаза, это верно, но и еще проверено что продукция Ubnt со своими импульсными БП боится кратковременных скачков напряжения, что может выражается в подвисании точек, а в частном секторе это обычное явление - сварочные аппараты, трехфазные двигателя, включенные через ёмкостя на одну фазу и т.д.

Скачков выходного напряжения питания от этого не будет, могут быть только скачки относительного потенциала выхода к земле (при неиспользовании заземления - трехпроводной линии электропитания 220V - выход болтается в районе половины входного переменного 220 и никто его за штаны не держит).

Притяните в бокс заземление на панель трехконтактных розеток, проблема должна исчезнуть.

[SashaGub]

Сегодня наблюдая сеть заметил такую штуку клиент у которого самый низкий Transmit CCQ, хотя другие показатели в норме даже в идеале, имеет плохой пинг 12-30мс., при закачке даже не значительной садит сетку (200-300k) и самое интересное что у него LAN видится как 10Мb, а иногда 100Mb.

Есть еще несколько таких клиентов с LAN 10Мb, хотя кабель и БП в норме, проверено.

Что это брак?

[kosmich7]

Сегодня наблюдая сеть заметил такую штуку клиент у которого самый низкий Transmit CCQ, хотя другие показатели в норме даже в идеале, имеет плохой пинг 12-30мс., при закачке даже не значительной садит сетку (200-300k) и самое интересное что у него LAN видится как 10Мb, а иногда 100Mb.

Есть еще несколько таких клиентов с LAN 10Мb, хотя кабель и БП в норме, проверено.

Что это брак?

Какой у него насос ? Loco

А проверте, нет ли неприятного запаха у него из коннектора который вставляеться в POE от насоса, и какой либо жидкости там же.

Падение на нем CCQ говорит что именно ему кто-то мешает ! и соответственно он вам ложит весь сегмент.

Прошейте его в 5.4.3 или в бету 5.5.4

Поменяйте ему Loco на нелоко

Сканте с него эфир, сделайте с него AirWiev. Незабудте про сдвиг канала при скане.

Ставте ему грид и выбирайте в какой поляризации менее чувствительна к помехе.

 

Скачков выходного напряжения питания от этого не будет, могут быть только скачки относительного потенциала выхода к земле (при неиспользовании заземления - трехпроводной линии электропитания 220V - выход болтается в районе половины входного переменного 220 и никто его за штаны не держит).

Притяните в бокс заземление на панель трехконтактных розеток, проблема должна исчезнуть.

Какое заземление в ЧС ? просто переподключили правильно 220 и забыли.

Изменено 3 декабря, 2011 пользователем kosmich7

[SashaGub]

Такой вопрос, кто подскажет на какой версии прошивки, Rocket M2 лучше работает в 10MHz, а то перевел в десятку все показатели улучшились кроме пингов которые ушли с 2мс к 5мс. но зато стабильные?

Изменено 4 декабря, 2011 пользователем SashaGub

[SashaGub]

Отвечаю сам себе ... вчера тестировал многие прошивки (кроме 5.3.2) на 10Мгц. , прошивалась база и клиент.

 

1. 5.2.1 (база) - 5.2.1 (клиент) - хорошие пинги 1.8 - 2 мс. (но скачет CCQ)

2. 5.3.3 (база) - 5.3.3 (клиент) - средние пинги 4 - 6 мс.

3. 5.5 beta 4 (база) - 5.5 beta 4 (клиент) - большие пинги 10 - 20мс.

4. 5.5 beta 6 (база) - 5.5 beta 6 (клиент) - большие пинги 20 - 30мс.

5. 5.5 beta 6 (база) - 5.5 beta 4 (клиент) - большие пинги 20 - 30мс.

6. 5.5 beta 7 (база) - 5.5 beta 7 (клиент) - большие пинги 20 - 30мс.

[-кабельщик-]

Какое заземление в ЧС ?

Ах ну да, я про свою колокольню - меня заботит то, что происходит на АР. Клиентам при монтаже показывается трехполюсная вилка БП от Loco, дальше их проблема, есть заземление у них в розетке или нет, зависает клиентская точка или нет.

просто переподключили правильно 220 и забыли.

Правильно - как?

[SashaGub]

А я все о своём... :)

 

Нашел версию прошивки RocketM2 на которой стабильный и хороший пинг в 10Мгц, это 5.3.2.

[kosmich7]

Правильно - как?

вместо 30-45вольт ;) 220 - без заземления :)

Нашел версию прошивки RocketM2 на которой стабильный и хороший пинг в 10Мгц, это 5.3.2.

С чем вас и поздравляю ;) Долго искал ? :)

Но сам факт очень интересен.

[SashaGub]

С чем вас и поздравляю ;) Долго искал ? :)

Но сам факт очень интересен.

 

Ну как сказать, учитывая, что делалось это удаленно и в эксперименте участвовала точка NSM2 и RM2.

При том всем что из 6 шести прошивок все прошивалось в поочередной и попеременной (в сочетании предыдущих и последних прошивок)последовательности и проверялись пинги на разных пакетах то это не быстро.

И самое интересное что намучившись и прошив до 5.5 beta 7 точку и базу, а потом обратно в 5.3.3 и сделав сброс все стало идеально пинги стали отличными (так что и на прошивке 5.3.3 тоже в 10Мгц все нормально)но не могу найти зависимость... толи сброс помог, толи что-то по линуксу обновилось в 5.5 beta 7, так как на других рокетах при переводе в 10 тоже имею проблему с пингами.

[slv700]

С чем вас и поздравляю ;) Долго искал ? :)

Но сам факт очень интересен.

 

Ну как сказать, учитывая, что делалось это удаленно и в эксперименте участвовала точка NSM2 и RM2.

При том всем что из 6 шести прошивок все прошивалось в поочередной и попеременной (в сочетании предыдущих и последних прошивок)последовательности и проверялись пинги на разных пакетах то это не быстро.

И самое интересное что намучившись и прошив до 5.5 beta 7 точку и базу, а потом обратно в 5.3.3 и сделав сброс все стало идеально пинги стали отличными (так что и на прошивке 5.3.3 тоже в 10Мгц все нормально)но не могу найти зависимость... толи сброс помог, толи что-то по линуксу обновилось в 5.5 beta 7, так как на других рокетах при переводе в 10 тоже имею проблему с пингами.

Проблема в помехах , которые Вы создаете сами себе неправильным частотно-территориальным планированием сети и в коллизионном доступе вайфай. Где то есть у Вас "плохие" клиенты ( работающие в плохих условиях), которые валят всю сеть. Когда все нормально то или эти клиенты не активны или не активен тот кто им мешает.