FreeBSD + MPD + PPPOE - отвал сессий

[Bear_UA]

Стали появляться жалобы от клиентов на обрыв пппое сессий. Проверили - действительно присутствует у некоторых абонентов такая проблема - несколько раз в день обрывается пппое сессия. Вот что в логах

 

Dec 15 11:55:14 nas mpd: [vlan2-153] LCP: no reply to 1 echo request(s)
Dec 15 11:55:34 nas mpd: [vlan2-153] LCP: no reply to 1 echo request(s)
Dec 15 11:56:29 nas mpd: [vlan2-153] LCP: no reply to 1 echo request(s)
Dec 15 11:56:34 nas mpd: [vlan2-153] LCP: no reply to 2 echo request(s)
Dec 15 11:56:39 nas mpd: [vlan2-153] LCP: no reply to 3 echo request(s)
Dec 15 11:56:44 nas mpd: [vlan2-153] LCP: no reply to 4 echo request(s)
Dec 15 11:56:49 nas mpd: [vlan2-153] LCP: no reply to 5 echo request(s)
Dec 15 11:56:54 nas mpd: [vlan2-153] LCP: no reply to 6 echo request(s)
Dec 15 11:56:59 nas mpd: [vlan2-153] LCP: no reply to 7 echo request(s)
Dec 15 11:56:59 nas mpd: [vlan2-153] LCP: peer not responding to echo requests

 

Вся сеть построена на ПОН, у клиентов которые жалуются уже поменяли все - роутер/ону/патчкорды/переварили оптику. Количество жалоб потихоньку увеличивается. По магистралям и на сервере также все проверили на предмет ошибок на портах и так далее. Проблема возникает у разных клиентов в разных частях сети, линки к разным частям сети бегут разными маршрутами что исключает глючный коммутатор. Проблема возникает не только в ЧНН а в любое время суток. Начал задумываться возможно что-то в конфиге мпд надо подкрутить или еще в чем-то. Если не сложно - поделитесь рабочим (без подобных глюков) конфигом для мпд ну и возможно у кого-то было подобное и как-то решали данную проблему :(

[Bear_UA]

Ночью добавили в конфиг строчку ( думали что дело в этом)

set link keep-alive 60 180

ситуация не поменялась.

Дальше присутствуют обрывы правда количество LCP соотв. уменьшилось

 

Dec 16 10:22:45 nas mpd: [vlan17-869] LCP: no reply to 1 echo request(s)
Dec 16 10:23:45 nas mpd: [vlan17-869] LCP: no reply to 2 echo request(s)
Dec 16 10:23:45 nas mpd: [vlan17-869] LCP: peer not responding to echo requests

 

Не знаем уже в какую сторону копать :((

[aleks_lebedev]

На тазике стевки гребут PPS ?.  Юзаите RPS  Тип при поднятии PPPoE Session /sys/class/net/$PPP_IFACE/queues/rx-0/rps_cpus ???. На фрях не пришлось ,  тазики x64 deb9 +Inell 520, имхо ~8K seesion. 

Edited December 16, 2021 by aleks_lebedev

[Bear_UA]

В 16.12.2021 в 16:09, aleks_lebedev сказал:

На тазике стевки гребут PPS ?.  Юзаите RPS  Тип при поднятии PPPoE Session /sys/class/net/$PPP_IFACE/queues/rx-0/rps_cpus ???. На фрях не пришлось ,  тазики x64 deb9 +Inell 520, имхо ~8K seesion. 

 

У нас фрибсд, причем тут деб9? Проблема возникает в любое время суток а не только в ЧНН :(

[Sacrament]

В 17.12.2021 в 04:07, Bear_UA сказал:

У нас фрибсд, причем тут деб9? Проблема возникает в любое время суток а не только в ЧНН :(

Переходите на accel-ppp и linux

Под пппое он вылизан шикарно и нет проблем с распределением прерываний если заюзать RPS

А по вашей проблеме - пробовали дамп посмотреть вообще есть ли от клиентов lcp?

[Bear_UA]

В 17.12.2021 в 04:24, Sacrament сказал:

Переходите на accel-ppp и linux

Под пппое он вылизан шикарно и нет проблем с распределением прерываний если заюзать RPS

А по вашей проблеме - пробовали дамп посмотреть вообще есть ли от клиентов lcp?

 

У нас билинг итп все заточено под фрибсд, надо много переделывать и переучиваться (это пока не вариант)

Проблема не у всех абонентов и не имеет закономерности по времени, просто почему-то появляется. по tcpdump - ничего эдакого не видно что могло бы влияет на работу, ошибок на портах нет, потерь на клиентов нет. Пропадания случаются не только в ЧНН а и когда нагрузки совсем нет. Причину понять никак не можем :(

[No_name]

Подобная проблема но на bsd 9.3 + pptp.

Решалась на большинстве абонентских роутерах выставленим интервалом lcp эхо запорсов до 60 сек, если есть такая возможность.

На сервере set link keep-alive 10 180

 

Еще момент, на некоторых моделях роутеров, где постоянно присутствовал трафик, соединения не рвались, если трафика не было, то переподключаются почти каждые 20-30 сек. При этом как ни меняй настройки на сервере, толку никакого.

[Ivan_83]

Уже давно было, помню у меня на ростелеке был один конфиг пппое клиента на мпд5, потом я его перетащил на другого провайдера и у меня тоже с LCP были проблемы пока я его не включил где то в конфиге отдельно.

Может ну его, этот LCP?

[paradox_]

проблема на vlan

добавьте в мониторинг статистику icmp на каждом vlan

и через недельку посмотрите на графики, тогда станет понятно с чем и как она связанна

 

из пушки по воробьям скорее всего если vlan на stp/rstp - проблема в петлях

[Bear_UA]

В 18.12.2021 в 01:04, paradox_ сказал:

проблема на vlan

добавьте в мониторинг статистику icmp на каждом vlan

и через недельку посмотрите на графики, тогда станет понятно с чем и как она связанна

 

из пушки по воробьям скорее всего если vlan на stp/rstp - проблема в петлях

 

stp / rstp - везде отфильтрован. У нас была когда-то проблема в одном из влан из-за этого - но там рвались ВСЕ пппое подключения каждые 2-3 минуты. А тут - как-то ситуационно, в разных вланах, и не все клиенты а некоторые.

[paradox_]

Сделайте статистику по vlan интерфейсам для пинга с выводом на какой нибудь mrtg

И тогда сравнивая ее и другую стату по каналам загрузкам cpu mem итд что у вас там есть

сможете понять что у вас там происходит

 

Edited December 20, 2021 by paradox_