nixx Posted April 8, 2025 Posted April 8, 2025 (edited) В 04.04.2025 в 00:20, Easy88 сказал: На днях запустили в продакшен на трафике около 30 гиг в ЧНН. Сервак HP DL360 gen9 с 2мя процами 2697Av4 нагрузку имеет около 40%. а этот сервер у вас только натом занимается, или есть утилизация cpu и на другие задачи? мне интересно со своим сравнить, который обычный линуксовый нат юзает на сопоставимом трафике. Edited April 8, 2025 by nixx Вставить ник Quote
Easy88 Posted April 9, 2025 Posted April 9, 2025 18 hours ago, nixx said: а этот сервер у вас только натом занимается, или есть утилизация cpu и на другие задачи? мне интересно со своим сравнить, который обычный линуксовый нат юзает на сопоставимом трафике. Да. На этом только ANAT. Предполагаем что гиг 60-70 должен он прожевать. Вставить ник Quote
Technologia Posted April 9, 2025 Posted April 9, 2025 (edited) 11 часов назад, Easy88 сказал: Да. На этом только ANAT. Предполагаем что гиг 60-70 должен он прожевать. Скорее всего не пережует столько, в районе 40-50 гигов начнутся дропы, при том, что cpu ещё не уйдет в полку. Edited April 9, 2025 by Morty Вставить ник Quote
Easy88 Posted April 10, 2025 Posted April 10, 2025 8 hours ago, Morty said: Скорее всего не пережует столько, в районе 40-50 гигов начнутся дропы, при том, что cpu ещё не уйдет в полку. А в чём причина? pci-e хватает, проца хватает... Вставить ник Quote
Easy88 Posted April 22, 2025 Posted April 22, 2025 (edited) Для решения задачи с поиском какие абоненты сидели за внешним адресов без сбора netflow сделал калькулятор, что бы отвечать на запросы правоохранителей. В нём прописываются ваши серые пулы в public пулы и на запрос внешнего адреса выдает в какие адреса оно могло конвертироваться. Пример использования: python calc.py 178.110.1.20 Найдено в пуле 10.0.192.0 - 10.0.255.255: LAN IP: 10.0.197.0 LAN IP: 10.0.197.1 LAN IP: 10.0.197.2 Протестировал. Вроде работает правильно. https://github.com/Phoenix1833/anat_calc Edited April 24, 2025 by Easy88 Change to github Вставить ник Quote
sdy_moscow Posted April 23, 2025 Author Posted April 23, 2025 @Easy88 Только осторожнее с опциями &1, &2, &3 и *H в настройках пулов. Я не уверен, что Вы их учли в скрипте (код не смотрел). Вставить ник Quote
vurd Posted April 23, 2025 Posted April 23, 2025 Посмотреть код и не получится 🙂 @Easy88 выложите куда-нибудь в нормальное место. С форума уже несколько лет ничего не качается и никто это не чинит. Вставить ник Quote
Easy88 Posted April 24, 2025 Posted April 24, 2025 @vurd это печально 😞 Оформил на github: https://github.com/Phoenix1833/anat_calc Вставить ник Quote
acutus Posted July 10, 2025 Posted July 10, 2025 А возможна работа вместе с ipt_ratelimit? Вставить ник Quote
sdy_moscow Posted July 10, 2025 Author Posted July 10, 2025 7 часов назад, acutus сказал: А возможна работа вместе с ipt_ratelimit? конечно, это же другая библиотека, настраивайте правила файрвола и всё Вставить ник Quote
sdy_moscow Posted April 21 Author Posted April 21 Задали тут вопрос - думаю стоит его продублировать с ответом в теме. ================================================= Тут бага/не бага вылезла как-то. Менял диапазон ip для ната и tсp сессии со старыми адресами протухли, а вот udp сессии от l2tp каналов остались висеть со старыми адресами и пришлось их уже сбрасывать через CMD_KILL_NAT. Судя по всему keep-alive пакеты l2tp держали эти сессии. ================================================= Добрый день. Это не баг, а фича. Механизм изначально сделан так, что при смене диапазонов старые сессии не сбрасываются, поэтому ДА - пока сессия не "умрет" (не истечет её киип элайв), она будет "жить". Надо было или переконнектиться самим клиентам ну или прибить их руками (как это сделали вы). Это так и задумывалось - для плавного перехода с диапазона на диапазон. --------------- Если что задавайте вопросы прямо в ветке проекта. Это может быть полезно и для других. Вставить ник Quote
Mihbenz Posted July 8 Posted July 8 доброго дня мы пробуем использовать ANAT вопрос по пробросу внешников... ================================== ^E +01 &0 *L !0x01 : 10.255.251.21 - 10.255.251.21 : 10.23.2.50 - 10.23.2.50 Мы написали вот так. Ожидаем, что если ломиться по адресу 10.23.2.50 то будем попадать на адрес 10.255.251.21 Но этого почему-то не происходит. При этом хост с адресом 10.255.251.21 без проблем ходит в интернет из под NAT адреса 10.23.2.50 Как надо написать, чтобы можно было "снаружи" попасть на 10.255.251.21 ? Вставить ник Quote
sdy_moscow Posted July 8 Author Posted July 8 @Mihbenz Добрый день. Это всё-таки НАТ, а не файрвол с маскарадингом. Чтобы попасть извне, надо сперва установить соединение изнутри. Т.е., сперва 10.23.2.50 должен установить внешнее соединение, и только потом трафик пришедший ТОЛЬКО на те порты которые были использованы при внешнем соединении будет перенаправлен на 10.23.2.50 (на порты, которые использовались при первичном соединении). Там была еще функция настройки проброски портов (порт форвардинг), не помню её название - посмотрите в документации! Попробуйте её использовать, если надо пробросить отдельные порты. Но обратите внимание на её ограничения! Необходимо хотя-бы одно первичное соединение с 10.23.2.50 на момент настройки и возможен сброс при определенных действиях - точно не помню. Но вроде в документации было описано всё :-). Вставить ник Quote
sdy_moscow Posted July 8 Author Posted July 8 @myth Как выясняется скорее про выделенные прямые IP. Для это рекомендую просто выделить подсети и их не запускать в NAT. Вставить ник Quote
myth Posted July 8 Posted July 8 ну и я про них. Обращаемся к 1.2.3.4, а попадаем в 10.11.11.2 Вставить ник Quote
sdy_moscow Posted July 9 Author Posted July 9 9 часов назад, myth сказал: ну и я про них. Обращаемся к 1.2.3.4, а попадаем в 10.11.11.2 NAT всё-таки предполагает динамическое выделение портов, 1:1 - это скорее классический маскарадинг, впрочем, нет разницы как называть. Вставить ник Quote
MrNv Posted July 21 Posted July 21 а на AMD Epyc кто то ставил? у нас сейчас E5-2660*2, mem 64Gb, net XL710 в чнн загрузка: цпу 83%, память 5gb, при трафике 34гб Вставить ник Quote
sdy_moscow Posted July 21 Author Posted July 21 @MrNv для ANAT двух процессорность КРАЙНЕ вредна! Как, впрочем, для любой задачи работающей интенсивно с общей память из разных потоков! Если потоки обработки трафика NAT разложатся то на 1-ый то на 2-ой ЦПУ - будет резкое падение производительности! I7-12700K на 32Гб спокойно 40Гбит "жуёт" и "не потеет". Советую попробовать просто вытащить 1 проц!!! Только смотрите, чтобы сетёвка была в ПРАВИЛЬНОМ слоту связанном с оставшимся процессором. Скорее всего увидите рост производительности в текущей конфигурации! Вставить ник Quote
nixx Posted July 21 Posted July 21 i7-12700k - это, по попугаям, примерно как пять-шесть штук E5-2660 у спрашивающего... еще б он не жевал. Вставить ник Quote
Умник Posted July 21 Posted July 21 7 часов назад, MrNv сказал: при трафике 34гб Какой PPS при этом? Это же IMIX-трафик, да? Тогда должно быть в районе 11-12 MPPS. Даже не дотягивает до wire-speed 10G-интерфейса. Интересно, сколько прожует, если брать самый плохой случай - все пакеты по 64 байта. Вставить ник Quote
sdy_moscow Posted July 21 Author Posted July 21 @nixx @Умник @MrNv Товарищи! Если вы не понимаете архитектуру ANAT и двухпроцессорных платформ INTEL - просьба тему не засорять! То что я написал - это ФАКТ. Кому что-то хочется промерять - велкам, дистрибутивы есть, железо тоже вовсе не 1 млн стоит. Я знаю, что многие пользуются ANAT, снимают netflow (в том числе мы сами) - жалоб не было еще на скорость, скорее наоборот! P.S. Для особо непонятливых - в ANAT есть структуры в памяти постоянно используемые для всех потоков обработки сетевых пакетов ОДНОВРЕМЕННО в случайном месте выборки, с их постоянным изменением. Однопроцессорные (многоядерные) системы прекрасно справляются с предсказанием доступа к памяти, её изменением и кэшированием. Более того, программный подход в ANAT оптимизирован для работы с кэшстроками процессоров в 64 байта. В двухпроцессорных системах при одновременном доступе потоками на обоих процессорах к одним и тем-же страницам памяти возникают проблемы связанные с синхронизацией кэшей L1,L2,L3 процессоров между собой, что КРАЙНЕ негативно влияет на скорость обработки пакетов и приводит к сверхнагрузке на процессоры и деградации системы в целом, из-за больших задержек чтения данных в памяти. Поэтому! Использовать ДВУХПРОЦЕССОРНЫЕ системы (без запирания всей обработки трафика исключительно на одном процессоре, что само по себе не так просто на Линухе) - Я КАТЕГОРИЧЕСКИ НЕ РЕКОМЕНДУЮ! Вставить ник Quote
MrNv Posted July 22 Posted July 22 так то у меня вопрос был про AMD Epyc, а то что ниже это так - статистика для информации. p.s. снял один цпу, стало 70% на 30гб трафика Вставить ник Quote
sdy_moscow Posted July 22 Author Posted July 22 @MrNv Скажем так, Epyc'ов столько же видов стало, как Xeon. Рекомендую ориентироваться на то, что I7-12700K это примерно 1*40Гб на 40-60% цпу, дальше можно прогнозировать исходя из размера кэшей, числа ядер и их частоты. Но больше 32-64 ядер может ставить уже бессмысленно, т.к. обработчики пакетов завязаны на количество очередей в сетевых платах. Больше чем число этих очередей увеличение числа ядер существенного результата для NAT скорее всего не даст. А дальше встанут вопросы насколько драйвера и ядро будут поддерживать многопоточность. Следующий вопрос уже будет производительность шины между сетевой и памятью и возможность их параллельной работы (если несколько сетёвок будет) - тут надо аккуратно считать. Теоретически 1*100Гб на PCIe 4.0-5.0 и на проце с 16-32 ядрами может и переварится. А дальше я бы уже смотрел на распараллеливание по нескольким серверам, благо для NAT это легко делается. Но в целом эксперимент с Epyc будет интересный, если сделаете - отпишитесь по итогам. 17 часов назад, MrNv сказал: p.s. снял один цпу, стало 70% на 30гб трафика Для этого ЦПУ и XL710 я думаю это близко к переделу производительности. Всё-таки PCIe 3.0 8x. Надо бы попробовать с 2-мя сетёвками такими, что будет. А сколько планок памяти на стороне этого проца и с какой частотой? Вставить ник Quote
MrNv Posted July 23 Posted July 23 12 часов назад, sdy_moscow сказал: А сколько планок памяти на стороне этого проца и с какой частотой? 16GB DDR4 2133MHz*4 шт это временный сервер, уже заказали Epyc 7763 Вставить ник Quote
Recommended Posts
Join the conversation
You can post now and register later. If you have an account, sign in now to post with your account.