Leap second

[nuclearcat]

Кто как пережил добавление секунды с субботы на воскресенье?

Говорят массово падала джава и старые дистрибутивы Linux.

[Alex/AT]

Ох, печалька. Ну... у нас ничего не произошло. Абсолютно ничего.

Гипервизоры и не такое периодически устраивают (вплоть до прыжков "назад" на пару секунд).

Edited July 1, 2012 by Alex/AT

[Alex/AT]

По утреннему постанализу: кое-где MySQL'у после слегка впилило так, что он начал жрать 100% одного ядра (правда, функционирует при этом нормально, даже производительность систем почти не страдает, т.е. время другим процессам при надобности отдает, болтается где-то в спинлоках). Мониторинг на такую "мелочь" внимания не обратил, поскольку сервис не нарушен, и отклик в норме. Рестарт MySQL при этом не помогает - грабля лежит в ядре. Тем не менее, ничего фатального, всё остальное как-то пережило.

 

Помогает от происков Leap Second с MySQL (RHEL/CentOS 6) следующее: service ntpd stop ; service ntpdate start ; service ntpd start. При этом ядро CentOS прочёсывается, и система приходит в норму.

 

Автору треда огромное спасибо за то, что сподвигнул на полный проход по серверам.

Edited July 1, 2012 by Alex/AT

[nuclearcat]

Советую на такую засаду натравить monit, чтоб орал, если кто-то жрет проц слишком долго.

[NiTr0]

Просмотрел по факту графики. В основном эдак с 4-4.30 (GMT+2) кто-то на серверах с присутствующим мускулем некисло кушал ресурсы, причем - время ядра, загружая одно из ядер под 100%. Часа 3 в сумме. На сервере с древней федорой - этот кто-то кушал дважды, второй раз - с 9.30 до 12.00. Устаканилось само собой, побочных эффектов вроде не замечаено.

[Abram]

Залип один Debian Squeeze с мусклем. Все аналогично Alex/AT, полечилось так же.

Плюс 1 числа наглухо завис FreeBSD с mpd5, про который я уже год вообще даже не вспоминал - не знаю, связано ли.

[st_re]

Java машины и такая хрень как каучбейз на 5/6 рхеле пожрали ЦПУ. но их немного и в целом работало. В остальном все хорошо прекрасная маркиза. на других платформах у нас яв не водится, посему неизвестно как оно там. mysqlи проблем не вызвали нигде.

 

зы

service ntpdate start может не помочь, ntpdate должно зваться с -b (Force the time to be stepped using the settimeofday) чтобы время дернуло. Если время точное и явно -b не указано, то прыжка не будет и ничего не поменяется. А -b может быть, а может не быть указано в стартап скрипте в разных сборках/версиях.

[voron]

Хетцнер вон жалуется

During the night of 30.06.2012 to 01.07.2012 our internal monitoring systems registered an increase in the level of IT power usage by approximately one megawatt.