drvs Опубликовано 26 июля, 2016 · Жалоба Коллеги, подскажите: Есть 2 сервера с accel-ppp 1.10.2 Настроен pppoe+radius Раз в 7-10 дней выпадают в панику. То один, то другой, так что железо отпадает. Система : # uname -a Linux pppoe4 3.16.0-4-amd64 #1 SMP Debian 3.16.7-ckt25-2 (2016-04-08) x86_64 GNU/Linux # cat /etc/debian_version 8.4 В sysctl.conf выставлено kernel.panic=5 - но в ребут по чему то не пошли ни один ни второй. Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
Dimka88 Опубликовано 26 июля, 2016 · Жалоба То один, то другой, так что железо отпадает. Сетевые карты какие? Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
drvs Опубликовано 26 июля, 2016 · Жалоба То один, то другой, так что железо отпадает. Сетевые карты какие? NetXtreme BCM5722 Gigabit Ethernet PCI Express Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
sanyasi Опубликовано 28 июля, 2016 (изменено) · Жалоба 3.16.0-4-amd64 #1 SMP Debian 3.16.7-ckt25-2 (2016-04-08) x86_64 GNU/Linux Стабильной работы ppp удалось добиться только с ядрами 3.2. Во всех остальных случаях - паника. Изменено 28 июля, 2016 пользователем sanyasi Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
drvs Опубликовано 28 июля, 2016 · Жалоба 3.16.0-4-amd64 #1 SMP Debian 3.16.7-ckt25-2 (2016-04-08) x86_64 GNU/Linux Стабильной работы ppp удалось добиться только с ядрами 3.2. Во всех остальных случаях - паника. спасибо Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
AlKov Опубликовано 28 июля, 2016 · Жалоба Стабильной работы ppp удалось добиться только с ядрами 3.2. Во всех остальных случаях - паника. Т.е., я понимаю так, что на 2.6.32 (CentOS 6.7) можно и не заморачиваться? P.S. Кстати, на нём он и не собирается.. cmake -DKDIR=/usr/src/kernels/2.6.32-642.3.1.el6.x86_64/ -DBUILD_PPTP_DRIVER=FALSE -DBUILD_IPOE_DRIVER=TRUE -DRADIUS=TRUE -DLUA=TRUE .. .... make ..... Scanning dependencies of target ipoe_drv [100%] Generating driver/ipoe.ko make[3]: *** Нет правила для сборки цели `modules'. Останов. make[2]: *** [drivers/ipoe/driver/ipoe.ko] Ошибка 2 make[1]: *** [drivers/ipoe/CMakeFiles/ipoe_drv.dir/all] Ошибка 2 make: *** [all] Ошибка 2 Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
roysbike Опубликовано 28 июля, 2016 · Жалоба Стабильной работы ppp удалось добиться только с ядрами 3.2. Во всех остальных случаях - паника. Т.е., я понимаю так, что на 2.6.32 (CentOS 6.7) можно и не заморачиваться? P.S. Кстати, на нём он и не собирается.. cmake -DKDIR=/usr/src/kernels/2.6.32-642.3.1.el6.x86_64/ -DBUILD_PPTP_DRIVER=FALSE -DBUILD_IPOE_DRIVER=TRUE -DRADIUS=TRUE -DLUA=TRUE .. .... make ..... Scanning dependencies of target ipoe_drv [100%] Generating driver/ipoe.ko make[3]: *** Нет правила для сборки цели `modules'. Останов. make[2]: *** [drivers/ipoe/driver/ipoe.ko] Ошибка 2 make[1]: *** [drivers/ipoe/CMakeFiles/ipoe_drv.dir/all] Ошибка 2 make: *** [all] Ошибка 2 Если вы говорите о PPP, то модуль ipoe вам не нужно собирать -DBUILD_IPOE_DRIVER=FALSE Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
AlKov Опубликовано 28 июля, 2016 (изменено) · Жалоба Если вы говорите о PPP, то модуль ipoe вам не нужно собирать -DBUILD_IPOE_DRIVER=FALSE Ровно наоборот - все ррр НЕ нужны, надо именно IPoE. Кстати, ррр ругается тем же матом.. Scanning dependencies of target pptp_drv [100%] Generating driver/pptp.ko make[3]: *** Нет правила для сборки цели `modules'. Останов. make[2]: *** [drivers/pptp/driver/pptp.ko] Ошибка 2 make[1]: *** [drivers/pptp/CMakeFiles/pptp_drv.dir/all] Ошибка 2 make: *** [all] Ошибка 2 Есть подозрение, что исходники ядра, поставленные yum-ом, "неполные". Сейчас пытаюсь поставить с сырцов... P.S. Поставил "полные" исходники из сырцов, практически те же яйца.. [100%] Generating driver/ipoe.ko /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c: В функции ‘ipoe_process_queue’: /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:579: ошибка: ‘struct sk_buff’ не содержит элемента с именем ‘skb_iif’ /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c: В функции ‘ipoe_lookup_rt’: /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:673: ошибка: размер ‘fl4’ в памяти неизвестен /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:679: ошибка: слишком мало аргументов в вызове функции ‘ip_route_output_key’ /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:683: ошибка: ‘struct rtable’ не содержит элемента с именем ‘dst’ /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:673: предупреждение: неиспользуемая переменная ‘fl4’ /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c: В функции ‘ipoe_recv’: /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:702: ошибка: ‘struct net_device’ не содержит элемента с именем ‘rx_handler_data’ /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:702: предупреждение: в декларации ‘_________p1’ по умолчанию установлен тип ‘int’ /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:702: ошибка: ‘struct net_device’ не содержит элемента с именем ‘rx_handler_data’ /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:702: ошибка: ‘struct net_device’ не содержит элемента с именем ‘rx_handler_data’ /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:702: предупреждение: в декларации ‘type name’ по умолчанию установлен тип ‘int’ /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:702: предупреждение: при инициализации целое преобразуется в указатель без приведения типа /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:795: ошибка: ‘struct sk_buff’ не содержит элемента с именем ‘skb_iif’ /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c: В функции ‘ipoe_stats64’: /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:885: ошибка: неявная декларация функции ‘u64_stats_fetch_begin_bh’ /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:888: ошибка: неявная декларация функции ‘u64_stats_fetch_retry_bh’ /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c: В функции ‘ipoe_nl_cmd_delete’: /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1194: ошибка: неявная декларация функции ‘dev_get_by_index_rcu’ /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1194: предупреждение: в присваивании целое преобразуется в указатель без приведения типа /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c: В функции ‘ipoe_nl_cmd_modify’: /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1246: предупреждение: в присваивании целое преобразуется в указатель без приведения типа /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c: В функции ‘ipoe_nl_cmd_del_interface’: /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1526: ошибка: ‘struct net_device’ не содержит элемента с именем ‘rx_handler’ /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1526: предупреждение: в декларации ‘_________p1’ по умолчанию установлен тип ‘int’ /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1526: ошибка: ‘struct net_device’ не содержит элемента с именем ‘rx_handler’ /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1526: ошибка: ‘struct net_device’ не содержит элемента с именем ‘rx_handler’ /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1526: предупреждение: в декларации ‘type name’ по умолчанию установлен тип ‘int’ /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1526: предупреждение: сравнение указателя и целого /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c: На верхнем уровне: /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1690: ошибка: неизвестное поле ‘ndo_get_stats64’ в инициализаторе /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1690: предупреждение: несовместимый тип указателя в инициализации /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c: В функции ‘ipoe_fini’: /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1762: ошибка: ‘struct net_device’ не содержит элемента с именем ‘rx_handler’ /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1762: предупреждение: в декларации ‘_________p1’ по умолчанию установлен тип ‘int’ /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1762: ошибка: ‘struct net_device’ не содержит элемента с именем ‘rx_handler’ /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1762: ошибка: ‘struct net_device’ не содержит элемента с именем ‘rx_handler’ /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1762: предупреждение: в декларации ‘type name’ по умолчанию установлен тип ‘int’ /opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1762: предупреждение: сравнение указателя и целого make[4]: *** [/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.o] Ошибка 1 make[3]: *** [_module_/opt/accel-ppp-code/build/drivers/ipoe/driver] Ошибка 2 make[2]: *** [drivers/ipoe/driver/ipoe.ko] Ошибка 2 make[1]: *** [drivers/ipoe/CMakeFiles/ipoe_drv.dir/all] Ошибка 2 make: *** [all] Ошибка 2 Изменено 28 июля, 2016 пользователем AlKov Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
kayot Опубликовано 28 июля, 2016 · Жалоба А зачем его вообще пытаться собрать на 2.6.32? Это ж окаменелая кака, которой не место в роутерах. Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
AlKov Опубликовано 28 июля, 2016 · Жалоба А зачем его вообще пытаться собрать на 2.6.32? Это ж окаменелая кака, которой не место в роутерах. А вот восхотелося так! :) Ну а если серъёзно, то это так называемый "продакшен" на CentOS 6.7, довольно "свежеустановленный". Который довольно неплохо освоен и вылизан. А yum update kernel не желает ставить 3.хх ядро.. Ставить "тройку" вручную нет никакого желания.. В своё время наигрался в эти игры до блевоты.. :( На 7-м CentOS-е пробовал взлететь со "старыми настройками" - истратил кучу нервов, плюнул и вернулся к 6.7 (до этого всё неплохо жужжало на 5.5). Вот такое я вот г... старого мамонта. ;) P.S. Кстати... Нахрена тогда было писать на "оф-сайте", что... Требования: Современный дистрибутив Linux Ядро версии 2.6.25 или старше cmake не младше версии 2.6 libcrypto-0.9.8 или старше (openssl-0.9.8) libpcre net-snmp-5.x (Для snmp) liblua5.1 (для IPoE c DHCP option 82) Не написали, я бы и не "вякал". ;) Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
s.lobanov Опубликовано 28 июля, 2016 · Жалоба AlKov Хорош прикалываться, подключаете EPEL, ставите оттуда только ядро и всё прекрасно работает на нём Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
telecom Опубликовано 29 июля, 2016 · Жалоба А yum update kernel не желает ставить 3.хх ядро.. За пиво дам несколько файлов, которые поставятся командой rpm -Uv *.rpm Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
AlKov Опубликовано 29 июля, 2016 · Жалоба AlKov Хорош прикалываться, подключаете EPEL, ставите оттуда только ядро Ну это я просто "скромно позабыл".. ;) А вот в это - и всё прекрасно работает на нём дерзну не поверить, особенно после секса с CentOS 7. Что конкретно, уже не могу вспомнить, но вроде как на нём тогда не взлетела сеть (Bonding+vlan). То ли дрова на сетевые (Intel 82576) кривые были, то ли ещё что-то в ядре. Возможно, на сегодня это уже не актуально на последних 3.хх, но "кошечки" для этих "исследований" у меня нет. Поэтому, предпочитаю работать на проверенном, подпиленным всеми напильниками. P.S. Кстати, после "напильника" по исходникам ядра и небольшого подпиливания в исходниках accel, последний всё же собрался на 6.32. Но ещё не запускал, пока вкуриваю конфиги и способы привязки к конкретным реалиям. Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
ichthyandr Опубликовано 4 августа, 2016 · Жалоба Коллеги, подскажите: Есть 2 сервера с accel-ppp 1.10.2 Настроен pppoe+radius Раз в 7-10 дней выпадают в панику. То один, то другой, так что железо отпадает. Система : # uname -a Linux pppoe4 3.16.0-4-amd64 #1 SMP Debian 3.16.7-ckt25-2 (2016-04-08) x86_64 GNU/Linux # cat /etc/debian_version 8.4 В sysctl.conf выставлено kernel.panic=5 - но в ребут по чему то не пошли ни один ни второй. шейпер как настроен? у нас тоже валился, пока шейпер не перенастроили. Что в kern.log? Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
Korvin Опубликовано 23 августа, 2016 · Жалоба есть проблема при переходе на новое ядра пробовал с 3.14.14 на 3.14.53, 4.4.19 поднимаются только pppoe сессии pptp нет accel 1.10.3 модули загружены в логах error: : pptp: read: Connection reset by peer кто сталкивался куда копать? Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
NiTr0 Опубликовано 24 августа, 2016 · Жалоба кто сталкивался куда копать? diff по pptp и gre mux (или как там он зовется), посмотреть чего накоммитили туда... или отписать в netdev. как вариант - сразу бисекцию сделать, найти кривой коммит и отписаться в нетдев. быстре будет (там скорее всего потребуют провести git bisect). Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
dtcom Опубликовано 25 августа, 2016 (изменено) · Жалоба кто сталкивался куда копать? Ядро 4.4.16 accel-ppp 1.11.0 pptp сессии работают у меня. Изменено 25 августа, 2016 пользователем dtcom Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
dtcom Опубликовано 25 августа, 2016 · Жалоба Коллеги, подскажите: Есть 2 сервера с accel-ppp 1.10.2 Настроен pppoe+radius Раз в 7-10 дней выпадают в панику. То один, то другой, так что железо отпадает. Система : # uname -a Linux pppoe4 3.16.0-4-amd64 #1 SMP Debian 3.16.7-ckt25-2 (2016-04-08) x86_64 GNU/Linux # cat /etc/debian_version 8.4 В sysctl.conf выставлено kernel.panic=5 - но в ребут по чему то не пошли ни один ни второй. Почти один в один как у меня тоже самое, только pptp+radius Также установлен bird 1.6.0 Ядро 4.4.16. accel-ppp 1.11.0 Впрочем accel-ppp 1.10.2 тоже стоял, такжe висло. И ядра были 4.4.13-15. Раз в десять дней примерно намертво зависает система. В логах ничего подозрительного. На другом железе пробовал тоже самое. Единственно, что понял виснет только на этом участке сети. Короче отличие только в месте установке и в наборе софта. То есть если установлен accel-ppp pptp+radius, +bird и стоит в конкретном месте, то в течение недели гарантированно зависнет. Как отловить не пойму Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
sanyasi Опубликовано 25 августа, 2016 · Жалоба Ядро 4.4.16. accel-ppp 1.11.0 Ловили уже, дампы ядра есть, по моему даже в этой ветке. ppp работает только на ядрах 3.2. Видимо что-то несовместимое появилось в новых ядрах. Вот что собралось с консоли. Если кто получил стабильную работу ppp на ядрах > 3.2 сообщите, пожалуйста. 36466.013424] INFO: rcu_sched self-detected stall on CPU[36466.017430] INFO: rcu_sched detected stalls on CPUs/tasks: { 2} (detected by 3,) [36466.017433] sending NMI to all CPUs: [36466.017435] NMI backtrace for cpu 2 [36466.017437] CPU: 2 PID: 0 Comm: swapper/2 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36466.017437] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013 [36466.017438] task: ffff88021328e000 ti: ffff88021329c000 task.ti: ffff88021329c000 [36466.017439] RIP: 0010:[<ffffffff8146ea55>] [<ffffffff8146ea55>] io_serial_in+0x15/0x20 [36466.017442] RSP: 0018:ffff88021ed03798 EFLAGS: 00000002 [36466.017443] RAX: 0000000000000c00 RBX: ffffffff81fc6740 RCX: 0000000000000000 [36466.017443] RDX: 00000000000003fd RSI: 00000000000003fd RDI: ffffffff81fc6740 [36466.017444] RBP: ffff88021ed03798 R08: ffffffff81d144e8 R09: 0000000000000001 [36466.017444] R10: 0000000000000000 R11: ffff88021ed0373e R12: 000000000000270e [36466.017445] R13: 0000000000000020 R14: ffffffff81ebf979 R15: 0000000000000039 [36466.017445] FS: 0000000000000000(0000) GS:ffff88021ed00000(0000) knlGS:0000000000000000 [36466.017446] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033 [36466.017446] CR2: 00007f9dd812c800 CR3: 00000000359b0000 CR4: 00000000001407e0 [36466.017447] Stack: [36466.017447] ffff88021ed037c0 ffffffff8146f5fb ffffffff81fc6740 0000000000000061 [36466.017449] ffffffff81fc6740 ffff88021ed037e0 ffffffff8146f7bc ffffffff81ebf970 [36466.017450] ffffffff8146f7a0 ffff88021ed03810 ffffffff8146a3ba 0000000000000000 [36466.017451] Call Trace: [36466.017452] <IRQ> [<ffffffff8146f5fb>] wait_for_xmitr+0x3b/0xa0 [36466.017454] [<ffffffff8146f7bc>] serial8250_console_putchar+0x1c/0x30 [36466.017455] [<ffffffff8146f7a0>] ? serial8250_console_write+0x140/0x140 [36466.017457] [<ffffffff8146a3ba>] uart_console_write+0x3a/0x80 [36466.017459] [<ffffffff8146f70e>] serial8250_console_write+0xae/0x140 [36466.017460] [<ffffffff810bc823>] call_console_drivers.constprop.18+0x93/0xf0 [36466.017461] [<ffffffff810bd87e>] console_unlock+0x2ae/0x400 [36466.017463] [<ffffffff810bdc8e>] vprintk_emit+0x2be/0x530 [36466.017464] [<ffffffff81365540>] ? cpumask_next_and+0x30/0x50 [36466.017466] [<ffffffff8171da3e>] printk+0x67/0x69 [36466.017468] [<ffffffff810cb1de>] rcu_check_callbacks+0x34e/0x650 [36466.017470] [<ffffffff8109dfa2>] ? account_process_tick+0x62/0x1c0 [36466.017472] [<ffffffff810764e7>] update_process_times+0x47/0x70 [36466.017474] [<ffffffff810d66a5>] tick_sched_handle.isra.17+0x25/0x60 [36466.017476] [<ffffffff810d6721>] tick_sched_timer+0x41/0x60 [36466.017477] [<ffffffff8108e9e7>] __run_hrtimer+0x77/0x1d0 [36466.017480] [<ffffffff810d66e0>] ? tick_sched_handle.isra.17+0x60/0x60 [36466.017481] [<ffffffff8108f1af>] hrtimer_interrupt+0xef/0x230 [36466.017482] [<ffffffff81043727>] local_apic_timer_interrupt+0x37/0x60 [36466.017485] [<ffffffff8173700f>] smp_apic_timer_interrupt+0x3f/0x60 [36466.017488] [<ffffffff8173599d>] apic_timer_interrupt+0x6d/0x80 [36466.017492] [<ffffffffa0457c2a>] ? ____nf_conntrack_find+0x5a/0x160 [nf_conntrack] [36466.017497] [<ffffffffa0457c01>] ? ____nf_conntrack_find+0x31/0x160 [nf_conntrack] [36466.017500] [<ffffffffa04585f1>] __nf_conntrack_find_get+0x31/0x160 [nf_conntrack] [36466.017503] [<ffffffffa0459489>] nf_conntrack_in+0x2a9/0xb60 [nf_conntrack] [36466.017507] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40 [36466.017510] [<ffffffffa04862e2>] ipv4_conntrack_in+0x22/0x30 [nf_conntrack_ipv4] [36466.017512] [<ffffffff8165732a>] nf_iterate+0x9a/0xb0 [36466.017514] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40 [36466.017515] [<ffffffff816573b4>] nf_hook_slow+0x74/0x130 [36466.017516] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40 [36466.017518] [<ffffffff8165e2c8>] ip_rcv+0x2f8/0x3d0 [36466.017519] [<ffffffff81627a96>] __netif_receive_skb_core+0x676/0x850 [36466.017521] [<ffffffff81627c88>] __netif_receive_skb+0x18/0x60 [36466.017522] [<ffffffff8162881e>] process_backlog+0xae/0x1a0 [36466.017523] [<ffffffff81628072>] net_rx_action+0x152/0x250 [36466.017524] [<ffffffff8106cccc>] __do_softirq+0xec/0x2c0 [36466.017526] [<ffffffff8106d215>] irq_exit+0x105/0x110 [36466.017528] [<ffffffff81736f66>] do_IRQ+0x56/0xc0 [36466.017529] [<ffffffff8172c56d>] common_interrupt+0x6d/0x6d [36466.017531] <EOI> [<ffffffff815d5de2>] ? cpuidle_enter_state+0x52/0xc0 [36466.017534] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0 [36466.017535] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30 [36466.017537] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290 [36466.017539] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0 [36466.017541] Code: 48 89 e5 d3 e6 48 63 f6 48 03 77 10 8b 06 5d c3 66 0f 1f 44 00 00 0f 1f 44 00 00 0f b6 4f 61 55 48 89 e5 d3 e6 03 77 0 [36466.017554] NMI backtrace for cpu 3 [36466.017555] CPU: 3 PID: 0 Comm: swapper/3 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36466.017555] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013 [36466.017556] task: ffff8802132a8000 ti: ffff88021329e000 task.ti: ffff88021329e000 [36466.017557] RIP: 0010:[<ffffffff81374f83>] [<ffffffff81374f83>] __bitmap_andnot+0x13/0x50 [36466.017560] RSP: 0018:ffff88021ed83d80 EFLAGS: 00000002 [36466.017560] RAX: 0000000000000000 RBX: 0000000000000055 RCX: 0000000000000004 [36466.017561] RDX: ffff88021ec0ce20 RSI: ffff88021ed8ce00 RDI: ffff88021ed8ce00 [36466.017561] RBP: ffff88021ed83d80 R08: ffff88021ed8ce08 R09: ffffffff81edd49c [36466.017562] R10: 00000000000231a8 R11: 0000000000040000 R12: ffff88021ed8ce00 [36466.017562] R13: 000000000000ce40 R14: ffff88021ec0ce20 R15: 0000000000080000 [36466.017563] FS: 0000000000000000(0000) GS:ffff88021ed80000(0000) knlGS:0000000000000000 [36466.017563] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033 [36466.017564] CR2: 00007f9de82b7f98 CR3: 0000000001c0e000 CR4: 00000000001407e0 [36466.017564] Stack: [36466.017565] ffff88021ed83de0 ffffffff81049515 0000000000000086 000000021ed83df0 [36466.017566] 000000000000ce20 0000000000000003 0000000000000003 0000000000002710 [36466.017567] ffffffff81c4e1c0 ffffffff81d14520 ffffffff81c4e1c0 0000000000000003 [36466.017568] Call Trace: [36466.017569] <IRQ> [<ffffffff81049515>] __x2apic_send_IPI_mask+0x155/0x180 [36466.017573] [<ffffffff8104955c>] x2apic_send_IPI_all+0x1c/0x20 [36466.017574] [<ffffffff81045310>] arch_trigger_all_cpu_backtrace+0x70/0xb0 [36466.017575] [<ffffffff810cb4c1>] rcu_check_callbacks+0x631/0x650 [36466.017577] [<ffffffff810764e7>] update_process_times+0x47/0x70 [36466.017578] [<ffffffff810d66a5>] tick_sched_handle.isra.17+0x25/0x60 [36466.017580] [<ffffffff810d6721>] tick_sched_timer+0x41/0x60 [36466.017581] [<ffffffff8108e9e7>] __run_hrtimer+0x77/0x1d0 [36466.017582] [<ffffffff810d66e0>] ? tick_sched_handle.isra.17+0x60/0x60 [36466.017583] [<ffffffff8108f1af>] hrtimer_interrupt+0xef/0x230 [36466.017585] [<ffffffff81043727>] local_apic_timer_interrupt+0x37/0x60 [36466.017587] [<ffffffff8173700f>] smp_apic_timer_interrupt+0x3f/0x60 [36466.017588] [<ffffffff8173599d>] apic_timer_interrupt+0x6d/0x80 [36466.017590] <EOI> [<ffffffff815d5de2>] ? cpuidle_enter_state+0x52/0xc0 [36466.017592] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0 [36466.017593] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30 [36466.017595] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290 [36466.017596] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0 [36466.017598] Code: 48 89 0c c7 48 83 c0 01 41 39 c0 7f eb 5d c3 66 0f 1f 84 00 00 00 00 00 48 63 c9 55 48 83 c1 3f 48 c1 e9 06 48 89 e5 8 [36466.017611] NMI backtrace for cpu 1 [36466.017613] CPU: 1 PID: 0 Comm: swapper/1 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36466.017613] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013 [36466.017614] task: ffff88021328c800 ti: ffff88021329a000 task.ti: ffff88021329a000 [36466.017615] RIP: 0010:[<ffffffff8109ef7e>] [<ffffffff8109ef7e>] update_cfs_rq_blocked_load+0xce/0x140 [36466.017617] RSP: 0018:ffff88021ec83c78 EFLAGS: 00000002 [36466.017618] RAX: 0000000000000001 RBX: ffff8800d752e068 RCX: 0000000000000000 [36466.017618] RDX: ffffffff81ebcc80 RSI: 0000000000000001 RDI: ffff88021ec93200 [36466.017618] RBP: ffff88021ec83c78 R08: 0000000000000000 R09: 0000000000000000 [36466.017619] R10: 0000000000000000 R11: 0000000000000005 R12: ffff88021ec93200 [36466.017619] R13: 0000000000000000 R14: 000000000000012f R15: 0000000000000000 [36466.017620] FS: 0000000000000000(0000) GS:ffff88021ec80000(0000) knlGS:0000000000000000 [36466.017620] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033 [36466.017621] CR2: 00007f9d94147a38 CR3: 0000000001c0e000 CR4: 00000000001407e0 [36466.017621] Stack: [36466.017622] ffff88021ec83cc0 ffffffff810a547d 0000000000000000 0000000000000000 [36466.017623] ffff8800d752e068 ffff88021ec93200 ffff88021ec93180 0000000000000000 [36466.017624] 0000000000000001 ffff88021ec83d10 ffffffff810a5d9c ffff88021ec83cf8 [36466.017625] Call Trace: [36466.017626] <IRQ> [<ffffffff810a547d>] enqueue_entity+0x2ed/0xbb0 [36466.017628] [<ffffffff810a5d9c>] enqueue_task_fair+0x5c/0x6c0 [36466.017630] [<ffffffff8109d7d5>] ? sched_clock_cpu+0xb5/0x100 [36466.017631] [<ffffffff8109527a>] enqueue_task+0x3a/0x60 [36466.017632] [<ffffffff810982e3>] activate_task+0x23/0x30 [36466.017634] [<ffffffff810985c3>] ttwu_do_activate.constprop.74+0x33/0x70 [36466.017636] [<ffffffff8109ab42>] try_to_wake_up+0x1d2/0x2c0 [36466.017637] [<ffffffff810a75d5>] ? load_balance+0x185/0x890 [36466.017639] [<ffffffff8109ac53>] wake_up_process+0x23/0x40 [36466.017640] [<ffffffff81081054>] wake_up_worker+0x24/0x30 [36466.017642] [<ffffffff81081afb>] insert_work+0x6b/0xb0 [36466.017644] [<ffffffff810a83f1>] ? trigger_load_balance+0x61/0x1e0 [36466.017645] [<ffffffff81081c6e>] __queue_work+0x12e/0x320 [36466.017646] [<ffffffff81081e60>] ? __queue_work+0x320/0x320 [36466.017648] [<ffffffff81081e78>] delayed_work_timer_fn+0x18/0x20 [36466.017649] [<ffffffff810744f6>] call_timer_fn+0x36/0x100 [36466.017650] [<ffffffff81081e60>] ? __queue_work+0x320/0x320 [36466.017651] [<ffffffff810753f5>] run_timer_softirq+0x155/0x2f0 [36466.017653] [<ffffffff8106cccc>] __do_softirq+0xec/0x2c0 [36466.017655] [<ffffffff8106d215>] irq_exit+0x105/0x110 [36466.017656] [<ffffffff81737015>] smp_apic_timer_interrupt+0x45/0x60 [36466.017657] [<ffffffff8173599d>] apic_timer_interrupt+0x6d/0x80 [36466.017659] <EOI> [<ffffffff815d5de2>] ? cpuidle_enter_state+0x52/0xc0 [36466.017661] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0 [36466.017662] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30 [36466.017664] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290 [36466.017665] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0 [36466.017667] Code: 29 c8 48 03 47 60 85 f6 75 19 49 89 c0 48 c1 e9 03 49 c1 f8 3f 4c 89 c6 48 31 c6 4c 29 c6 48 39 ce 76 0f f0 48 01 82 a [36466.017680] NMI backtrace for cpu 0 [36466.017682] CPU: 0 PID: 0 Comm: swapper/0 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36466.017682] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013 [36466.017683] task: ffffffff81c15480 ti: ffffffff81c00000 task.ti: ffffffff81c00000 [36466.017683] RIP: 0010:[<ffffffff813e9b98>] [<ffffffff813e9b98>] intel_idle+0xd8/0x140 [36466.017686] RSP: 0018:ffffffff81c01e38 EFLAGS: 00000046 [36466.017686] RAX: 0000000000000020 RBX: 0000000000000008 RCX: 0000000000000001 [36466.017687] RDX: 0000000000000000 RSI: ffffffff81c93e80 RDI: 0000000000000000 [36466.017687] RBP: ffffffff81c01e60 R08: ffff88021ec10324 R09: 0000000000000018 [36466.017688] R10: 0000000000001f3f R11: 0000000000007c50 R12: 0000000000000004 [36466.017688] R13: 0000000000000020 R14: 0000000000000003 R15: ffffffff81c93ff8 [36466.017689] FS: 0000000000000000(0000) GS:ffff88021ec00000(0000) knlGS:0000000000000000 [36466.017689] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033 [36466.017690] CR2: 00007f905fef2000 CR3: 0000000001c0e000 CR4: 00000000001407f0 [36466.017690] Stack: [36466.017690] 0000000081c01e60 ffff88021ec1a300 ffffffff81c93e80 000021232982dcbf [36466.017692] 0000000000000004 ffffffff81c01e98 ffffffff815d5dd0 ffffffffffffffff [36466.017693] ffff88021ec1a300 0000000000000004 0000000000000000 ffffffff81c93e80 [36466.017694] Call Trace: [36466.017695] [<ffffffff815d5dd0>] cpuidle_enter_state+0x40/0xc0 [36466.017697] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0 [36466.017698] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30 [36466.017700] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290 [36466.017701] [<ffffffff81712297>] rest_init+0x77/0x80 [36466.017703] [<ffffffff81d34f70>] start_kernel+0x438/0x443 [36466.017705] [<ffffffff81d34941>] ? repair_env_string+0x5c/0x5c [36466.017707] [<ffffffff81d34120>] ? early_idt_handler_array+0x120/0x120 [36466.017708] [<ffffffff81d345ee>] x86_64_start_reservations+0x2a/0x2c [36466.017710] [<ffffffff81d34733>] x86_64_start_kernel+0x143/0x152 [36466.017711] Code: 48 89 d1 48 2d c8 1f 00 00 0f 01 c8 0f ae f0 65 48 8b 04 25 30 b8 00 00 48 8b 80 38 e0 ff ff a8 08 75 08 b1 01 4c 89 e [36467.659354] { 2} (t=15413 jiffies g=5345479 c=5345478 q=0) [36467.670241] sending NMI to all CPUs: [36467.676306] NMI backtrace for cpu 2 [36467.682269] CPU: 2 PID: 0 Comm: swapper/2 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36467.693476] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013 [36467.705861] task: ffff88021328e000 ti: ffff88021329c000 task.ti: ffff88021329c000 [36467.715924] RIP: 0010:[<ffffffff813779bd>] [<ffffffff813779bd>] find_next_bit+0x3d/0xe0 [36467.726625] RSP: 0018:ffff88021ed038f8 EFLAGS: 00000006 [36467.734520] RAX: 0000000000000000 RBX: 0000000000000055 RCX: 0000000000000001 [36467.744254] RDX: 0000000000000001 RSI: 00000000000000c0 RDI: 0000000000000040 [36467.753979] RBP: ffff88021ed038f8 R08: ffff88021ed0ce08 R09: 0000000000000004 [36467.763706] R10: 00000000000000f0 R11: ffffc90008d59ff8 R12: ffff88021ed0ce00 [36467.773453] R13: 000000000000ce40 R14: ffff88021ec0ce20 R15: 0000000000080000 [36467.783189] FS: 0000000000000000(0000) GS:ffff88021ed00000(0000) knlGS:0000000000000000 [36467.793902] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033 [36467.802284] CR2: 00007f9dd812c800 CR3: 00000000359b0000 CR4: 00000000001407e0 [36467.812079] Stack: [36467.816750] ffff88021ed03958 ffffffff81049466 0000000000000092 000000021ed03968 [36467.826923] 000000000000ce20 0000000000000002 0000000000000002 0000000000002710 [36467.837114] ffffffff81c4e1c0 ffffffff81d14520 ffffffff81c4e1c0 0000000000000002 [36467.847306] Call Trace: [36467.852493] <IRQ> [36467.854436] [<ffffffff81049466>] __x2apic_send_IPI_mask+0xa6/0x180 [36467.866381] [<ffffffff8104955c>] x2apic_send_IPI_all+0x1c/0x20 [36467.875067] [<ffffffff81045310>] arch_trigger_all_cpu_backtrace+0x70/0xb0 [36467.884724] [<ffffffff810cb28e>] rcu_check_callbacks+0x3fe/0x650 [36467.893610] [<ffffffff810764e7>] update_process_times+0x47/0x70 [36467.902418] [<ffffffff810d66a5>] tick_sched_handle.isra.17+0x25/0x60 [36467.911656] [<ffffffff810d6721>] tick_sched_timer+0x41/0x60 [36467.920107] [<ffffffff8108e9e7>] __run_hrtimer+0x77/0x1d0 [36467.928370] [<ffffffff810d66e0>] ? tick_sched_handle.isra.17+0x60/0x60 [36467.937756] [<ffffffff8108f1af>] hrtimer_interrupt+0xef/0x230 [36467.946361] [<ffffffff81043727>] local_apic_timer_interrupt+0x37/0x60 [36467.955673] [<ffffffff8173700f>] smp_apic_timer_interrupt+0x3f/0x60 [36467.964822] [<ffffffff8173599d>] apic_timer_interrupt+0x6d/0x80 [36467.973546] [<ffffffffa0457c2a>] ? ____nf_conntrack_find+0x5a/0x160 [nf_conntrack] [36467.983867] [<ffffffffa0457c01>] ? ____nf_conntrack_find+0x31/0x160 [nf_conntrack] [36467.994139] [<ffffffffa04585f1>] __nf_conntrack_find_get+0x31/0x160 [nf_conntrack] [36468.004380] [<ffffffffa0459489>] nf_conntrack_in+0x2a9/0xb60 [nf_conntrack] [36468.013974] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40 [36468.022332] [<ffffffffa04862e2>] ipv4_conntrack_in+0x22/0x30 [nf_conntrack_ipv4] [36468.032353] [<ffffffff8165732a>] nf_iterate+0x9a/0xb0 [36468.040017] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40 [36468.048391] [<ffffffff816573b4>] nf_hook_slow+0x74/0x130 [36468.056324] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40 [36468.064698] [<ffffffff8165e2c8>] ip_rcv+0x2f8/0x3d0 [36468.072201] [<ffffffff81627a96>] __netif_receive_skb_core+0x676/0x850 [36468.081266] [<ffffffff81627c88>] __netif_receive_skb+0x18/0x60 [36468.089695] [<ffffffff8162881e>] process_backlog+0xae/0x1a0 [36468.097848] [<ffffffff81628072>] net_rx_action+0x152/0x250 [36468.105896] [<ffffffff8106cccc>] __do_softirq+0xec/0x2c0 [36468.113751] [<ffffffff8106d215>] irq_exit+0x105/0x110 [36468.121338] [<ffffffff81736f66>] do_IRQ+0x56/0xc0 [36468.128558] [<ffffffff8172c56d>] common_interrupt+0x6d/0x6d [36468.136625] <EOI> [36468.138569] [<ffffffff815d5de2>] ? cpuidle_enter_state+0x52/0xc0 [36468.149675] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0 [36468.157944] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30 [36468.165690] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290 [36468.173961] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0 [36468.182153] Code: d0 48 89 d1 48 c1 e8 06 4c 8d 04 c7 48 89 d7 48 83 e7 c0 48 29 fe 83 e1 3f 75 73 48 f7 c6 c0 ff ff ff 0f 84 9c 00 00 0 [36468.204670] NMI backtrace for cpu 0 [36468.204672] INFO: NMI handler (arch_trigger_all_cpu_backtrace_handler) took too long to run: 528.363 msecs [36468.223098] CPU: 0 PID: 0 Comm: swapper/0 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36468.234519] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013 [36468.247027] task: ffffffff81c15480 ti: ffffffff81c00000 task.ti: ffffffff81c00000 [36468.257130] RIP: 0010:[<ffffffff813e9b98>] [<ffffffff813e9b98>] intel_idle+0xd8/0x140 [36468.267705] RSP: 0018:ffffffff81c01e38 EFLAGS: 00000046 [36468.275644] RAX: 0000000000000020 RBX: 0000000000000008 RCX: 0000000000000001 [36468.285447] RDX: 0000000000000000 RSI: ffffffff81c93e80 RDI: 0000000000000000 [36468.295215] RBP: ffffffff81c01e60 R08: ffff88021ec10328 R09: 0000000000000018 [36468.304943] R10: 0000000000005dac R11: 0000000000015752 R12: 0000000000000004 [36468.314627] R13: 0000000000000020 R14: 0000000000000003 R15: ffffffff81c93ff8 [36468.324285] FS: 0000000000000000(0000) GS:ffff88021ec00000(0000) knlGS:0000000000000000 [36468.334898] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033 [36468.343157] CR2: 00007f905fef2000 CR3: 0000000001c0e000 CR4: 00000000001407f0 [36468.352850] Stack: [36468.357398] 0000000081c01e60 ffff88021ec1a300 ffffffff81c93e80 000021238bfa753d [36468.367444] 0000000000000004 ffffffff81c01e98 ffffffff815d5dd0 ffffffffffffffff [36468.377494] ffff88021ec1a300 0000000000000004 0000000000000000 ffffffff81c93e80 [36468.387548] Call Trace: [36468.392560] [<ffffffff815d5dd0>] cpuidle_enter_state+0x40/0xc0 [36468.401067] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0 [36468.409454] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30 [36468.417293] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290 [36468.425655] [<ffffffff81712297>] rest_init+0x77/0x80 [36468.433216] [<ffffffff81d34f70>] start_kernel+0x438/0x443 [36468.441193] [<ffffffff81d34941>] ? repair_env_string+0x5c/0x5c [36468.449615] [<ffffffff81d34120>] ? early_idt_handler_array+0x120/0x120 [36468.458728] [<ffffffff81d345ee>] x86_64_start_reservations+0x2a/0x2c [36468.467671] [<ffffffff81d34733>] x86_64_start_kernel+0x143/0x152 [36468.476249] Code: 48 89 d1 48 2d c8 1f 00 00 0f 01 c8 0f ae f0 65 48 8b 04 25 30 b8 00 00 48 8b 80 38 e0 ff ff a8 08 75 08 b1 01 4c 89 e [36468.498851] NMI backtrace for cpu 1 [36468.498853] INFO: NMI handler (arch_trigger_all_cpu_backtrace_handler) took too long to run: 822.513 msecs [36468.517334] CPU: 1 PID: 0 Comm: swapper/1 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36468.528768] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013 [36468.541386] task: ffff88021328c800 ti: ffff88021329a000 task.ti: ffff88021329a000 [36468.551674] RIP: 0010:[<ffffffff813e9b98>] [<ffffffff813e9b98>] intel_idle+0xd8/0x140 [36468.562440] RSP: 0018:ffff88021329be28 EFLAGS: 00000046 [36468.570591] RAX: 0000000000000020 RBX: 0000000000000008 RCX: 0000000000000001 [36468.580573] RDX: 0000000000000000 RSI: ffffffff81c93e80 RDI: 0000000000000001 [36468.590546] RBP: ffff88021329be50 R08: ffff88021ec9030c R09: 0000000000000018 [36468.600506] R10: 0000000000001f2f R11: 0000000000009bd3 R12: 0000000000000004 [36468.610485] R13: 0000000000000020 R14: 0000000000000003 R15: ffffffff81c93ff8 [36468.620478] FS: 0000000000000000(0000) GS:ffff88021ec80000(0000) knlGS:0000000000000000 [36468.631428] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033 [36468.640017] CR2: 00007f9d94147a38 CR3: 0000000001c0e000 CR4: 00000000001407e0 [36468.650004] Stack: [36468.654844] 000000011329be50 ffff88021ec9a300 ffffffff81c93e80 000021238c748a8b [36468.665188] 0000000000000004 ffff88021329be88 ffffffff815d5dd0 ffff88021329bf38 [36468.675534] ffff88021ec9a300 0000000000000004 0000000000000001 ffffffff81c93e80 [36468.685891] Call Trace: [36468.691235] [<ffffffff815d5dd0>] cpuidle_enter_state+0x40/0xc0 [36468.700079] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0 [36468.708845] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30 [36468.717081] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290 [36468.725848] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0 [36468.734521] Code: 48 89 d1 48 2d c8 1f 00 00 0f 01 c8 0f ae f0 65 48 8b 04 25 30 b8 00 00 48 8b 80 38 e0 ff ff a8 08 75 08 b1 01 4c 89 e [36468.757554] NMI backtrace for cpu 3 [36468.757557] INFO: NMI handler (arch_trigger_all_cpu_backtrace_handler) took too long to run: 1081.216 msecs [36468.777056] CPU: 3 PID: 0 Comm: swapper/3 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36468.788954] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013 [36468.802018] task: ffff8802132a8000 ti: ffff88021329e000 task.ti: ffff88021329e000 [36468.812762] RIP: 0010:[<ffffffff813e9b98>] [<ffffffff813e9b98>] intel_idle+0xd8/0x140 [36468.823983] RSP: 0018:ffff88021329fe28 EFLAGS: 00000046 [36468.832587] RAX: 0000000000000020 RBX: 0000000000000008 RCX: 0000000000000001 [36468.843040] RDX: 0000000000000000 RSI: ffffffff81c93e80 RDI: 0000000000000003 [36468.853399] RBP: ffff88021329fe50 R08: ffff88021ed9030c R09: 0000000000001f59 [36468.863675] R10: 00000000ffffffff R11: 0000000000007c83 R12: 0000000000000004 [36468.873922] R13: 0000000000000020 R14: 0000000000000003 R15: ffffffff81c93ff8 [36468.884134] FS: 0000000000000000(0000) GS:ffff88021ed80000(0000) knlGS:0000000000000000 [36468.895281] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033 [36468.904044] CR2: 00007f9de82b7f98 CR3: 0000000001c0e000 CR4: 00000000001407e0 [36468.914195] Stack: [36468.919184] 000000031329fe50 ffff88021ed9a300 ffffffff81c93e80 000021238c747bc9 [36468.929664] 0000000000000004 ffff88021329fe88 ffffffff815d5dd0 ffff88021329ff38 [36468.940160] ffff88021ed9a300 0000000000000004 0000000000000003 ffffffff81c93e80 [36468.950674] Call Trace: [36468.956157] [<ffffffff815d5dd0>] cpuidle_enter_state+0x40/0xc0 [36468.965151] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0 [36468.974035] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30 [36468.982375] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290 [36468.991227] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0 [36468.999967] Code: 48 89 d1 48 2d c8 1f 00 00 0f 01 c8 0f ae f0 65 48 8b 04 25 30 b8 00 00 48 8b 80 38 e0 ff ff a8 08 75 08 b1 01 4c 89 e [36469.023008] INFO: NMI handler (arch_trigger_all_cpu_backtrace_handler) took too long to run: 1346.668 msecs [36632.943125] INFO: task jbd2/dm-0-8:215 blocked for more than 120 seconds. [36632.950258] Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36632.957202] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message. [36632.965369] jbd2/dm-0-8 D ffff88021ec13180 0 215 2 0x00000000 [36632.972794] ffff88020dd5bbd8 0000000000000046 ffff88020e391800 ffff88020dd5bfd8 [36632.980593] 0000000000013180 0000000000013180 ffff88020e391800 ffff88021ec13a18 [36632.988391] ffff88021efd0140 0000000000000002 ffffffff811efd00 ffff88020dd5bc50 [36632.996193] Call Trace: [36632.998991] [<ffffffff811efd00>] ? generic_block_bmap+0x50/0x50 [36633.005364] [<ffffffff817287bd>] io_schedule+0x9d/0x140 [36633.011032] [<ffffffff811efd0e>] sleep_on_buffer+0xe/0x20 [36633.016878] [<ffffffff81728c42>] __wait_on_bit+0x62/0x90 [36633.022638] [<ffffffff811efd00>] ? generic_block_bmap+0x50/0x50 [36633.028979] [<ffffffff81728ce7>] out_of_line_wait_on_bit+0x77/0x90 [36633.035560] [<ffffffff810ab3d0>] ? autoremove_wake_function+0x40/0x40 [36633.042385] [<ffffffff811f103a>] __wait_on_buffer+0x2a/0x30 [36633.048330] [<ffffffff8128c23d>] jbd2_journal_commit_transaction+0x185d/0x1ab0 [36633.055915] [<ffffffff810756ff>] ? try_to_del_timer_sync+0x4f/0x70 [36633.062448] [<ffffffff812905fd>] kjournald2+0xbd/0x250 [36633.067932] [<ffffffff810ab390>] ? prepare_to_wait_event+0x100/0x100 [36633.074643] [<ffffffff81290540>] ? commit_timeout+0x10/0x10 [36633.080562] [<ffffffff8108b7d2>] kthread+0xd2/0xf0 [36633.085702] [<ffffffff8108b700>] ? kthread_create_on_node+0x1c0/0x1c0 [36633.092488] [<ffffffff81734ba8>] ret_from_fork+0x58/0x90 [36633.098143] [<ffffffff8108b700>] ? kthread_create_on_node+0x1c0/0x1c0 [36633.104923] INFO: task accel-pppd:26283 blocked for more than 120 seconds. [36633.112056] Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36633.118928] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message. [36633.127010] accel-pppd D ffff88021ec93180 0 26283 1 0x00000000 [36633.134357] ffff8801fbb4fad0 0000000000000086 ffff8802112d8000 ffff8801fbb4ffd8 [36633.142078] 0000000000013180 0000000000013180 ffff8802112d8000 ffff8801fbb4fc08 [36633.149797] ffff8801fbb4fc10 7fffffffffffffff ffff8802112d8000 0000000000000001 [36633.157531] Call Trace: [36633.160234] [<ffffffff81728499>] schedule+0x29/0x70 [36633.165449] [<ffffffff817276e9>] schedule_timeout+0x239/0x2d0 [36633.171541] [<ffffffff81728021>] ? __schedule+0x381/0x7d0 [36633.177315] [<ffffffff81728fb6>] wait_for_completion+0xa6/0x160 [36633.183572] [<ffffffff8109ac90>] ? wake_up_state+0x20/0x20 [36633.189399] [<ffffffff810c73f0>] ? rcu_is_watching+0x20/0x20 [36633.195391] [<ffffffff810f68cf>] __stop_cpus+0x4f/0x70 [36633.200847] [<ffffffff810c73f0>] ? rcu_is_watching+0x20/0x20 [36633.206822] [<ffffffff810f6c0a>] try_stop_cpus+0x3a/0x60 [36633.212447] [<ffffffff810c8c47>] synchronize_sched_expedited+0xd7/0x1c0 [36633.219372] [<ffffffff810c8d3e>] synchronize_rcu_expedited+0xe/0x10 [36633.225951] [<ffffffff816246dd>] synchronize_net+0x2d/0x40 [36633.231742] [<ffffffff81648ee5>] dev_deactivate_many+0x255/0x260 [36633.238068] [<ffffffff816234f6>] __dev_close_many+0x66/0xe0 [36633.243945] [<ffffffff816235bd>] __dev_close+0x4d/0x90 [36633.249389] [<ffffffff8162ae6d>] __dev_change_flags+0x9d/0x170 [36633.255532] [<ffffffff8162af69>] dev_change_flags+0x29/0x60 [36633.261404] [<ffffffff816946c3>] devinet_ioctl+0x693/0x790 [36633.267187] [<ffffffff8169569d>] inet_ioctl+0x6d/0xa0 [36633.272539] [<ffffffff8160be05>] sock_do_ioctl+0x25/0x50 [36633.278150] [<ffffffff8160c350>] sock_ioctl+0x1f0/0x2c0 [36633.283671] [<ffffffff811d16a0>] do_vfs_ioctl+0x2e0/0x4c0 [36633.289375] [<ffffffff81207580>] ? SyS_epoll_ctl+0xf0/0x9f0 [36633.295245] [<ffffffff811d1901>] SyS_ioctl+0x81/0xa0 [36633.300510] [<ffffffff81734c5d>] system_call_fastpath+0x1a/0x1f [36633.306724] INFO: task accel-pppd:26334 blocked for more than 120 seconds. [36633.313813] Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36633.320640] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message. [36633.328681] accel-pppd D ffff88021ec93180 0 26334 1 0x00000000 [36633.335979] ffff880211a95af0 0000000000000086 ffff8802112eb000 ffff880211a95fd8 [36633.343662] 0000000000013180 0000000000013180 ffff8802112eb000 ffffffff81cdc520 [36633.351335] ffffffff81cdc524 ffff8802112eb000 00000000ffffffff ffffffff81cdc528 [36633.359012] Call Trace: [36633.361648] [<ffffffff817289b9>] schedule_preempt_disabled+0x29/0x70 [36633.368285] [<ffffffff8172a825>] __mutex_lock_slowpath+0x135/0x1b0 [36633.374740] [<ffffffff8172a8bf>] mutex_lock+0x1f/0x2f [36633.380075] [<ffffffff81636909>] rtnetlink_rcv+0x19/0x30 [36633.385668] [<ffffffff816545a5>] netlink_unicast+0xd5/0x1b0 [36633.391511] [<ffffffff8165498e>] netlink_sendmsg+0x30e/0x680 [36633.397445] [<ffffffff8160ea2b>] sock_sendmsg+0x8b/0xc0 [36633.402942] [<ffffffff8101bc79>] ? sched_clock+0x9/0x10 [36633.408440] [<ffffffff8114fb23>] ? unlock_page+0x23/0x30 [36633.414027] [<ffffffff811782ba>] ? do_wp_page+0x39a/0x7c0 [36633.419699] [<ffffffff8160e71e>] ? move_addr_to_kernel.part.14+0x1e/0x60 [36633.426680] [<ffffffff8160f551>] ? move_addr_to_kernel+0x21/0x30 [36633.432961] [<ffffffff8160ee39>] ___sys_sendmsg+0x389/0x3a0 [36633.438812] [<ffffffff81730234>] ? __do_page_fault+0x204/0x570 [36633.444915] [<ffffffff8108efd4>] ? hrtimer_start_range_ns+0x14/0x20 [36633.451456] [<ffffffff8160fc22>] __sys_sendmsg+0x42/0x80 [36633.457042] [<ffffffff8160fc72>] SyS_sendmsg+0x12/0x20 [36633.462455] [<ffffffff81734c5d>] system_call_fastpath+0x1a/0x1f [36633.468644] INFO: task accel-pppd:26532 blocked for more than 120 seconds. [36633.475707] Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36633.482505] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message. [36633.490523] accel-pppd D ffff88021ec93180 0 26532 1 0x00000000 [36633.497805] ffff8800d430daf0 0000000000000086 ffff88020642e000 ffff8800d430dfd8 [36633.505460] 0000000000013180 0000000000013180 ffff88020642e000 ffffffff81cdc520 [36633.513125] ffffffff81cdc524 ffff88020642e000 00000000ffffffff ffffffff81cdc528 [36633.520778] Call Trace: [36633.523410] [<ffffffff817289b9>] schedule_preempt_disabled+0x29/0x70 [36633.530032] [<ffffffff8172a825>] __mutex_lock_slowpath+0x135/0x1b0 [36633.536491] [<ffffffff8172a8bf>] mutex_lock+0x1f/0x2f [36633.541814] [<ffffffff81636909>] rtnetlink_rcv+0x19/0x30 [36633.547401] [<ffffffff816545a5>] netlink_unicast+0xd5/0x1b0 [36633.553246] [<ffffffff8165498e>] netlink_sendmsg+0x30e/0x680 [36633.559177] [<ffffffff8160ea2b>] sock_sendmsg+0x8b/0xc0 [36633.564676] [<ffffffff8101bc79>] ? sched_clock+0x9/0x10 [36633.570178] [<ffffffff8160e71e>] ? move_addr_to_kernel.part.14+0x1e/0x60 [36633.577149] [<ffffffff8160f551>] ? move_addr_to_kernel+0x21/0x30 [36633.583429] [<ffffffff8160ee39>] ___sys_sendmsg+0x389/0x3a0 [36633.589282] [<ffffffff811a2695>] ? kmem_cache_free+0x1b5/0x1e0 [36633.595391] [<ffffffff8136de40>] ? timerqueue_add+0x60/0xb0 [36633.601237] [<ffffffff8108e505>] ? enqueue_hrtimer+0x25/0x80 [36633.607173] [<ffffffff8108edc2>] ? __hrtimer_start_range_ns+0x1a2/0x3a0 [36633.614056] [<ffffffff8108efd4>] ? hrtimer_start_range_ns+0x14/0x20 [36633.620599] [<ffffffff8160fc22>] __sys_sendmsg+0x42/0x80 [36633.626183] [<ffffffff8160fc72>] SyS_sendmsg+0x12/0x20 [36633.631594] [<ffffffff81734c5d>] system_call_fastpath+0x1a/0x1f [36633.637788] INFO: task accel-pppd:26707 blocked for more than 120 seconds. [36633.644853] Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36633.651649] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message. [36633.659665] accel-pppd D ffff88021ed93180 0 26707 1 0x00000000 [36633.666951] ffff88020fc35af0 0000000000000086 ffff88020dc2c800 ffff88020fc35fd8 [36633.674602] 0000000000013180 0000000000013180 ffff88020dc2c800 ffffffff81cdc520 [36633.682270] ffffffff81cdc524 ffff88020dc2c800 00000000ffffffff ffffffff81cdc528 [36633.689929] Call Trace: [36633.692567] [<ffffffff817289b9>] schedule_preempt_disabled+0x29/0x70 [36633.699199] [<ffffffff8172a825>] __mutex_lock_slowpath+0x135/0x1b0 [36633.705662] [<ffffffff8172a8bf>] mutex_lock+0x1f/0x2f [36633.710995] [<ffffffff81636909>] rtnetlink_rcv+0x19/0x30 [36633.716584] [<ffffffff816545a5>] netlink_unicast+0xd5/0x1b0 [36633.722437] [<ffffffff8165498e>] netlink_sendmsg+0x30e/0x680 [36633.728384] [<ffffffff8160ea2b>] sock_sendmsg+0x8b/0xc0 [36633.733884] [<ffffffff8101bc79>] ? sched_clock+0x9/0x10 [36633.739382] [<ffffffff8114fb23>] ? unlock_page+0x23/0x30 [36633.744969] [<ffffffff811782ba>] ? do_wp_page+0x39a/0x7c0 [36633.750639] [<ffffffff8160e71e>] ? move_addr_to_kernel.part.14+0x1e/0x60 [36633.757615] [<ffffffff8160f551>] ? move_addr_to_kernel+0x21/0x30 [36633.763891] [<ffffffff8160ee39>] ___sys_sendmsg+0x389/0x3a0 [36633.769737] [<ffffffff81730234>] ? __do_page_fault+0x204/0x570 [36633.775847] [<ffffffff8108efd4>] ? hrtimer_start_range_ns+0x14/0x20 [36633.782386] [<ffffffff8160fc22>] __sys_sendmsg+0x42/0x80 [36633.787969] [<ffffffff8160fc72>] SyS_sendmsg+0x12/0x20 [36633.793383] [<ffffffff81734c5d>] system_call_fastpath+0x1a/0x1f [36646.186352] INFO: rcu_sched self-detected stall on CPU[36646.190359] INFO: rcu_sched detected stalls on CPUs/tasks: { 2} (detected by 3,) [36646.190361] sending NMI to all CPUs: [36646.190363] NMI backtrace for cpu 2 [36646.190364] CPU: 2 PID: 0 Comm: swapper/2 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36646.190364] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013 [36646.190365] task: ffff88021328e000 ti: ffff88021329c000 task.ti: ffff88021329c000 [36646.190365] RIP: 0010:[<ffffffff8146ea55>] [<ffffffff8146ea55>] io_serial_in+0x15/0x20 [36646.190367] RSP: 0018:ffff88021ed03798 EFLAGS: 00000002 [36646.190368] RAX: 0000000000000c00 RBX: ffffffff81fc6740 RCX: 0000000000000000 [36646.190368] RDX: 00000000000003fd RSI: 00000000000003fd RDI: ffffffff81fc6740 [36646.190369] RBP: ffff88021ed03798 R08: ffffffff81d144e8 R09: 0000000000000000 [36646.190369] R10: 0000000000000000 R11: ffff88021ed0373e R12: 000000000000270b [36646.190369] R13: 0000000000000020 R14: ffffffff81ebf979 R15: 0000000000000039 [36646.190370] FS: 0000000000000000(0000) GS:ffff88021ed00000(0000) knlGS:0000000000000000 [36646.190371] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033 [36646.190371] CR2: 00007f9dd812c800 CR3: 00000000359b0000 CR4: 00000000001407e0 [36646.190371] Stack: [36646.190372] ffff88021ed037c0 ffffffff8146f5fb ffffffff81fc6740 0000000000000061 [36646.190373] ffffffff81fc6740 ffff88021ed037e0 ffffffff8146f7bc ffffffff81ebf970 [36646.190374] ffffffff8146f7a0 ffff88021ed03810 ffffffff8146a3ba 0000000000000000 [36646.190375] Call Trace: [36646.190375] <IRQ> [<ffffffff8146f5fb>] wait_for_xmitr+0x3b/0xa0 [36646.190377] [<ffffffff8146f7bc>] serial8250_console_putchar+0x1c/0x30 [36646.190378] [<ffffffff8146f7a0>] ? serial8250_console_write+0x140/0x140 [36646.190379] [<ffffffff8146a3ba>] uart_console_write+0x3a/0x80 [36646.190381] [<ffffffff8146f70e>] serial8250_console_write+0xae/0x140 [36646.190382] [<ffffffff810bc823>] call_console_drivers.constprop.18+0x93/0xf0 [36646.190383] [<ffffffff810bd87e>] console_unlock+0x2ae/0x400 [36646.190384] [<ffffffff810bdc8e>] vprintk_emit+0x2be/0x530 [36646.190385] [<ffffffff81365540>] ? cpumask_next_and+0x30/0x50 [36646.190388] [<ffffffff8171da3e>] printk+0x67/0x69 [36646.190390] [<ffffffff810cb1de>] rcu_check_callbacks+0x34e/0x650 [36646.190391] [<ffffffff8109dfa2>] ? account_process_tick+0x62/0x1c0 [36646.190392] [<ffffffff810764e7>] update_process_times+0x47/0x70 [36646.190394] [<ffffffff810d66a5>] tick_sched_handle.isra.17+0x25/0x60 [36646.190396] [<ffffffff810d6721>] tick_sched_timer+0x41/0x60 [36646.190397] [<ffffffff8108e9e7>] __run_hrtimer+0x77/0x1d0 [36646.190398] [<ffffffff810d66e0>] ? tick_sched_handle.isra.17+0x60/0x60 [36646.190399] [<ffffffff8108f1af>] hrtimer_interrupt+0xef/0x230 [36646.190401] [<ffffffff81043727>] local_apic_timer_interrupt+0x37/0x60 [36646.190403] [<ffffffff8173700f>] smp_apic_timer_interrupt+0x3f/0x60 [36646.190405] [<ffffffff8173599d>] apic_timer_interrupt+0x6d/0x80 [36646.190408] [<ffffffffa0457c2a>] ? ____nf_conntrack_find+0x5a/0x160 [nf_conntrack] [36646.190412] [<ffffffffa0457c01>] ? ____nf_conntrack_find+0x31/0x160 [nf_conntrack] [36646.190414] [<ffffffffa04585f1>] __nf_conntrack_find_get+0x31/0x160 [nf_conntrack] [36646.190417] [<ffffffffa0459489>] nf_conntrack_in+0x2a9/0xb60 [nf_conntrack] [36646.190420] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40 [36646.190422] [<ffffffffa04862e2>] ipv4_conntrack_in+0x22/0x30 [nf_conntrack_ipv4] [36646.190424] [<ffffffff8165732a>] nf_iterate+0x9a/0xb0 [36646.190425] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40 [36646.190427] [<ffffffff816573b4>] nf_hook_slow+0x74/0x130 [36646.190427] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40 [36646.190429] [<ffffffff8165e2c8>] ip_rcv+0x2f8/0x3d0 [36646.190430] [<ffffffff81627a96>] __netif_receive_skb_core+0x676/0x850 [36646.190432] [<ffffffff81627c88>] __netif_receive_skb+0x18/0x60 [36646.190432] [<ffffffff8162881e>] process_backlog+0xae/0x1a0 [36646.190433] [<ffffffff81628072>] net_rx_action+0x152/0x250 [36646.190434] [<ffffffff8106cccc>] __do_softirq+0xec/0x2c0 [36646.190436] [<ffffffff8106d215>] irq_exit+0x105/0x110 [36646.190438] [<ffffffff81736f66>] do_IRQ+0x56/0xc0 [36646.190439] [<ffffffff8172c56d>] common_interrupt+0x6d/0x6d [36646.190441] <EOI> [<ffffffff815d5de2>] ? cpuidle_enter_state+0x52/0xc0 [36646.190443] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0 [36646.190444] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30 [36646.190446] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290 [36646.190447] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0 [36646.190449] Code: 48 89 e5 d3 e6 48 63 f6 48 03 77 10 8b 06 5d c3 66 0f 1f 44 00 00 0f 1f 44 00 00 0f b6 4f 61 55 48 89 e5 d3 e6 03 77 0 [36646.190462] NMI backtrace for cpu 3 [36646.190463] CPU: 3 PID: 0 Comm: swapper/3 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36646.190463] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013 [36646.190464] task: ffff8802132a8000 ti: ffff88021329e000 task.ti: ffff88021329e000 [36646.190464] RIP: 0010:[<ffffffff81374f83>] [<ffffffff81374f83>] __bitmap_andnot+0x13/0x50 [36646.190467] RSP: 0018:ffff88021ed83d80 EFLAGS: 00000002 [36646.190468] RAX: 0000000000000000 RBX: 0000000000000055 RCX: 0000000000000004 [36646.190468] RDX: ffff88021ec0ce20 RSI: ffff88021ed8ce00 RDI: ffff88021ed8ce00 [36646.190469] RBP: ffff88021ed83d80 R08: ffff88021ed8ce08 R09: ffffffff81ee7810 [36646.190469] R10: 0000000000018e34 R11: 0000000000040000 R12: ffff88021ed8ce00 [36646.190469] R13: 000000000000ce40 R14: ffff88021ec0ce20 R15: 0000000000080000 [36646.190470] FS: 0000000000000000(0000) GS:ffff88021ed80000(0000) knlGS:0000000000000000 [36646.190471] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033 [36646.190471] CR2: 00007f905fef2000 CR3: 0000000001c0e000 CR4: 00000000001407e0 [36646.190472] Stack: [36646.190472] ffff88021ed83de0 ffffffff81049515 0000000000000086 000000021ed83df0 [36646.190473] 000000000000ce20 0000000000000003 0000000000000003 0000000000002710 [36646.190474] ffffffff81c4e1c0 ffffffff81d14520 ffffffff81c4e1c0 0000000000000003 [36646.190475] Call Trace: [36646.190476] <IRQ> [<ffffffff81049515>] __x2apic_send_IPI_mask+0x155/0x180 [36646.190479] [<ffffffff8104955c>] x2apic_send_IPI_all+0x1c/0x20 [36646.190480] [<ffffffff81045310>] arch_trigger_all_cpu_backtrace+0x70/0xb0 [36646.190482] [<ffffffff810cb4c1>] rcu_check_callbacks+0x631/0x650 [36646.190483] [<ffffffff810764e7>] update_process_times+0x47/0x70 [36646.190484] [<ffffffff810d66a5>] tick_sched_handle.isra.17+0x25/0x60 [36646.190486] [<ffffffff810d6721>] tick_sched_timer+0x41/0x60 [36646.190487] [<ffffffff8108e9e7>] __run_hrtimer+0x77/0x1d0 [36646.190488] [<ffffffff810d66e0>] ? tick_sched_handle.isra.17+0x60/0x60 [36646.190489] [<ffffffff8108f1af>] hrtimer_interrupt+0xef/0x230 [36646.190491] [<ffffffff81043727>] local_apic_timer_interrupt+0x37/0x60 [36646.190493] [<ffffffff8173700f>] smp_apic_timer_interrupt+0x3f/0x60 [36646.190494] [<ffffffff8173599d>] apic_timer_interrupt+0x6d/0x80 [36646.190496] <EOI> [<ffffffff815d5de2>] ? cpuidle_enter_state+0x52/0xc0 [36646.190498] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0 [36646.190499] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30 [36646.190500] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290 [36646.190502] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0 [36646.190503] Code: 48 89 0c c7 48 83 c0 01 41 39 c0 7f eb 5d c3 66 0f 1f 84 00 00 00 00 00 48 63 c9 55 48 83 c1 3f 48 c1 e9 06 48 89 e5 8 [36646.190517] NMI backtrace for cpu 1 [36646.190518] CPU: 1 PID: 0 Comm: swapper/1 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36646.190518] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013 [36646.190519] task: ffff88021328c800 ti: ffff88021329a000 task.ti: ffff88021329a000 [36646.190520] RIP: 0010:[<ffffffff810cb70a>] [<ffffffff810cb70a>] rcu_sysidle_exit+0x3a/0x110 [36646.190522] RSP: 0018:ffff88021329beb8 EFLAGS: 00000046 [36646.190522] RAX: 0000000000000000 RBX: ffff88021ec8d640 RCX: 0000000000001f2e [36646.190523] RDX: 7f00000000000000 RSI: 0000000000000000 RDI: ffff88021ec8d640 [36646.190523] RBP: ffff88021329bec0 R08: ffff88021ec9030c R09: 0000000000001fa8 [36646.190524] R10: 00000000ffffffff R11: 000000000000f976 R12: ffff88021329bfd8 [36646.190524] R13: ffffffff81d14500 R14: 0000000000000000 R15: ffff88021329bfd8 [36646.190525] FS: 0000000000000000(0000) GS:ffff88021ec80000(0000) knlGS:0000000000000000 [36646.190525] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033 [36646.190526] CR2: 00007f9d94147a38 CR3: 0000000001c0e000 CR4: 00000000001407e0 [36646.190526] Stack: [36646.190527] 0000000000000202 ffff88021329bed8 ffffffff810cb819 ffff88021329bf38 [36646.190528] ffff88021329bf28 ffffffff810bf3bb ffff88021329bfd8 ffff88021329bfd8 [36646.190529] 38638f98b70fd246 ffff88021329bf38 0000000000000000 0000000000000000 [36646.190530] Call Trace: [36646.190531] [<ffffffff810cb819>] rcu_idle_exit+0x39/0x50 [36646.190532] [<ffffffff810bf3bb>] cpu_startup_entry+0xdb/0x290 [36646.190533] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0 [36646.190535] Code: 48 8b 47 10 74 1b 48 83 c0 01 48 85 c0 48 89 47 10 0f 8e 8e 00 00 00 48 83 f8 01 74 21 5b 5d c3 90 48 ba 00 00 00 00 0 [36646.190549] NMI backtrace for cpu 0 [36646.190550] CPU: 0 PID: 0 Comm: swapper/0 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36646.190551] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013 [36646.190551] task: ffffffff81c15480 ti: ffffffff81c00000 task.ti: ffffffff81c00000 [36646.190552] RIP: 0010:[<ffffffff813e9b98>] [<ffffffff813e9b98>] intel_idle+0xd8/0x140 [36646.190554] RSP: 0018:ffffffff81c01e38 EFLAGS: 00000046 [36646.190555] RAX: 0000000000000020 RBX: 0000000000000008 RCX: 0000000000000001 [36646.190555] RDX: 0000000000000000 RSI: ffffffff81c93e80 RDI: 0000000000000000 [36646.190555] RBP: ffffffff81c01e60 R08: ffff88021ec10318 R09: 0000000000000018 [36646.190556] R10: 0000000000020398 R11: 0000000000037a5c R12: 0000000000000004 [36646.190556] R13: 0000000000000020 R14: 0000000000000003 R15: ffffffff81c93ff8 [36646.190557] FS: 0000000000000000(0000) GS:ffff88021ec00000(0000) knlGS:0000000000000000 [36646.190557] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033 [36646.190558] CR2: 00007ff448028108 CR3: 0000000001c0e000 CR4: 00000000001407f0 [36646.190558] Stack: [36646.190559] 0000000081c01e60 ffff88021ec1a300 ffffffff81c93e80 0000214d0e886526 [36646.190560] 0000000000000004 ffffffff81c01e98 ffffffff815d5dd0 ffffffffffffffff [36646.190561] ffff88021ec1a300 0000000000000004 0000000000000000 ffffffff81c93e80 [36646.190562] Call Trace: [36646.190563] [<ffffffff815d5dd0>] cpuidle_enter_state+0x40/0xc0 [36646.190565] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0 [36646.190566] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30 [36646.190568] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290 [36646.190569] [<ffffffff81712297>] rest_init+0x77/0x80 [36646.190571] [<ffffffff81d34f70>] start_kernel+0x438/0x443 [36646.190573] [<ffffffff81d34941>] ? repair_env_string+0x5c/0x5c [36646.190574] [<ffffffff81d34120>] ? early_idt_handler_array+0x120/0x120 [36646.190576] [<ffffffff81d345ee>] x86_64_start_reservations+0x2a/0x2c [36646.190577] [<ffffffff81d34733>] x86_64_start_kernel+0x143/0x152 [36646.190578] Code: 48 89 d1 48 2d c8 1f 00 00 0f 01 c8 0f ae f0 65 48 8b 04 25 30 b8 00 00 48 8b 80 38 e0 ff ff a8 08 75 08 b1 01 4c 89 e [36647.652991] { 2} (t=60373 jiffies g=5345479 c=5345478 q=0) [36647.664759] sending NMI to all CPUs: [36647.671285] NMI backtrace for cpu 2 [36647.677719] CPU: 2 PID: 0 Comm: swapper/2 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36647.689415] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013 [36647.702281] task: ffff88021328e000 ti: ffff88021329c000 task.ti: ffff88021329c000 [36647.712838] RIP: 0010:[<ffffffff813779bd>] [<ffffffff813779bd>] find_next_bit+0x3d/0xe0 [36647.724037] RSP: 0018:ffff88021ed038f8 EFLAGS: 00000006 [36647.732424] RAX: 0000000000000000 RBX: 0000000000000055 RCX: 0000000000000001 [36647.742665] RDX: 0000000000000001 RSI: 00000000000000c0 RDI: 0000000000000040 [36647.752886] RBP: ffff88021ed038f8 R08: ffff88021ed0ce08 R09: 0000000000000004 [36647.763123] R10: 00000000000000f0 R11: ffffc90008d59ff8 R12: ffff88021ed0ce00 [36647.773276] R13: 000000000000ce40 R14: ffff88021ec0ce20 R15: 0000000000080000 [36647.783343] FS: 0000000000000000(0000) GS:ffff88021ed00000(0000) knlGS:0000000000000000 [36647.794374] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033 [36647.803018] CR2: 00007f9dd812c800 CR3: 00000000359b0000 CR4: 00000000001407e0 [36647.813042] Stack: [36647.817891] ffff88021ed03958 ffffffff81049466 0000000000000092 000000021ed03968 [36647.828220] 000000000000ce20 0000000000000002 0000000000000002 0000000000002710 [36647.838546] ffffffff81c4e1c0 ffffffff81d14520 ffffffff81c4e1c0 0000000000000002 [36647.848873] Call Trace: [36647.854180] <IRQ> [36647.856123] [<ffffffff81049466>] __x2apic_send_IPI_mask+0xa6/0x180 [36647.868303] [<ffffffff8104955c>] x2apic_send_IPI_all+0x1c/0x20 [36647.877084] [<ffffffff81045310>] arch_trigger_all_cpu_backtrace+0x70/0xb0 [36647.886816] [<ffffffff810cb28e>] rcu_check_callbacks+0x3fe/0x650 [36647.895764] [<ffffffff810764e7>] update_process_times+0x47/0x70 [36647.904605] [<ffffffff810d66a5>] tick_sched_handle.isra.17+0x25/0x60 [36647.913866] [<ffffffff810d6721>] tick_sched_timer+0x41/0x60 [36647.922337] [<ffffffff8108e9e7>] __run_hrtimer+0x77/0x1d0 [36647.930611] [<ffffffff810d66e0>] ? tick_sched_handle.isra.17+0x60/0x60 [36647.940009] [<ffffffff8108f1af>] hrtimer_interrupt+0xef/0x230 [36647.948624] [<ffffffff81043727>] local_apic_timer_interrupt+0x37/0x60 [36647.957944] [<ffffffff8173700f>] smp_apic_timer_interrupt+0x3f/0x60 [36647.967093] [<ffffffff8173599d>] apic_timer_interrupt+0x6d/0x80 [36647.975816] [<ffffffffa0457c2a>] ? ____nf_conntrack_find+0x5a/0x160 [nf_conntrack] [36647.986136] [<ffffffffa0457c01>] ? ____nf_conntrack_find+0x31/0x160 [nf_conntrack] [36647.996412] [<ffffffffa04585f1>] __nf_conntrack_find_get+0x31/0x160 [nf_conntrack] [36648.006642] [<ffffffffa0459489>] nf_conntrack_in+0x2a9/0xb60 [nf_conntrack] [36648.016241] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40 [36648.024598] [<ffffffffa04862e2>] ipv4_conntrack_in+0x22/0x30 [nf_conntrack_ipv4] [36648.034620] [<ffffffff8165732a>] nf_iterate+0x9a/0xb0 [36648.042281] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40 [36648.050647] [<ffffffff816573b4>] nf_hook_slow+0x74/0x130 [36648.058583] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40 [36648.066955] [<ffffffff8165e2c8>] ip_rcv+0x2f8/0x3d0 [36648.074455] [<ffffffff81627a96>] __netif_receive_skb_core+0x676/0x850 [36648.083512] [<ffffffff81627c88>] __netif_receive_skb+0x18/0x60 [36648.091941] [<ffffffff8162881e>] process_backlog+0xae/0x1a0 [36648.100089] [<ffffffff81628072>] net_rx_action+0x152/0x250 [36648.108137] [<ffffffff8106cccc>] __do_softirq+0xec/0x2c0 [36648.115990] [<ffffffff8106d215>] irq_exit+0x105/0x110 [36648.123570] [<ffffffff81736f66>] do_IRQ+0x56/0xc0 [36648.130785] [<ffffffff8172c56d>] common_interrupt+0x6d/0x6d [36648.138852] <EOI> [36648.140796] [<ffffffff815d5de2>] ? cpuidle_enter_state+0x52/0xc0 [36648.151896] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0 [36648.160154] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30 [36648.167902] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290 [36648.176171] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0 [36648.184353] Code: d0 48 89 d1 48 c1 e8 06 4c 8d 04 c7 48 89 d7 48 83 e7 c0 48 29 fe 83 e1 3f 75 73 48 f7 c6 c0 ff ff ff 0f 84 9c 00 00 0 [36648.206858] NMI backtrace for cpu 0 [36648.212947] CPU: 0 PID: 0 Comm: swapper/0 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36648.224300] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013 [36648.236843] task: ffffffff81c15480 ti: ffffffff81c00000 task.ti: ffffffff81c00000 [36648.246986] RIP: 0010:[<ffffffff813e9b98>] [<ffffffff813e9b98>] intel_idle+0xd8/0x140 [36648.257518] RSP: 0018:ffffffff81c01e38 EFLAGS: 00000046 [36648.265409] RAX: 0000000000000020 RBX: 0000000000000008 RCX: 0000000000000001 [36648.275144] RDX: 0000000000000000 RSI: ffffffff81c93e80 RDI: 0000000000000000 [36648.284875] RBP: ffffffff81c01e60 R08: ffff88021ec1032c R09: 0000000000000018 [36648.294584] R10: 0000000000053026 R11: 0000000000073343 R12: 0000000000000004 [36648.304262] R13: 0000000000000020 R14: 0000000000000003 R15: ffffffff81c93ff8 [36648.313889] FS: 0000000000000000(0000) GS:ffff88021ec00000(0000) knlGS:0000000000000000 [36648.324471] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033 [36648.332685] CR2: 00007ff448028108 CR3: 0000000001c0e000 CR4: 00000000001407f0 [36648.342300] Stack: [36648.346798] 0000000081c01e60 ffff88021ec1a300 ffffffff81c93e80 0000214d6acd01fd [36648.356783] 0000000000000004 ffffffff81c01e98 ffffffff815d5dd0 ffffffffffffffff [36648.366773] ffff88021ec1a300 0000000000000004 0000000000000000 ffffffff81c93e80 [36648.376781] Call Trace: [36648.381752] [<ffffffff815d5dd0>] cpuidle_enter_state+0x40/0xc0 [36648.390215] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0 [36648.398569] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30 [36648.406379] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290 [36648.414686] [<ffffffff81712297>] rest_init+0x77/0x80 [36648.422206] [<ffffffff81d34f70>] start_kernel+0x438/0x443 [36648.430154] [<ffffffff81d34941>] ? repair_env_string+0x5c/0x5c [36648.438507] [<ffffffff81d34120>] ? early_idt_handler_array+0x120/0x120 [36648.447576] [<ffffffff81d345ee>] x86_64_start_reservations+0x2a/0x2c [36648.456464] [<ffffffff81d34733>] x86_64_start_kernel+0x143/0x152 [36648.464990] Code: 48 89 d1 48 2d c8 1f 00 00 0f 01 c8 0f ae f0 65 48 8b 04 25 30 b8 00 00 48 8b 80 38 e0 ff ff a8 08 75 08 b1 01 4c 89 e [36648.487530] NMI backtrace for cpu 1 [36648.493590] CPU: 1 PID: 0 Comm: swapper/1 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36648.504912] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013 [36648.517416] task: ffff88021328c800 ti: ffff88021329a000 task.ti: ffff88021329a000 [36648.527599] RIP: 0010:[<ffffffff813e9b98>] [<ffffffff813e9b98>] intel_idle+0xd8/0x140 [36648.538267] RSP: 0018:ffff88021329be28 EFLAGS: 00000046 [36648.546308] RAX: 0000000000000020 RBX: 0000000000000008 RCX: 0000000000000001 [36648.556191] RDX: 0000000000000000 RSI: ffffffff81c93e80 RDI: 0000000000000001 [36648.566070] RBP: ffff88021329be50 R08: ffff88021ec9030c R09: 0000000000001fa4 [36648.575934] R10: 00000000ffffffff R11: 000000000000f975 R12: 0000000000000004 [36648.585808] R13: 0000000000000020 R14: 0000000000000003 R15: ffffffff81c93ff8 [36648.595670] FS: 0000000000000000(0000) GS:ffff88021ec80000(0000) knlGS:0000000000000000 [36648.606525] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033 [36648.615039] CR2: 00007f9d94147a38 CR3: 0000000001c0e000 CR4: 00000000001407e0 [36648.624957] Stack: [36648.629729] 000000011329be50 ffff88021ec9a300 ffffffff81c93e80 0000214d6b841d8a [36648.639986] 0000000000000004 ffff88021329be88 ffffffff815d5dd0 ffff88021329bf38 [36648.650234] ffff88021ec9a300 0000000000000004 0000000000000001 ffffffff81c93e80 [36648.660497] Call Trace: [36648.665744] [<ffffffff815d5dd0>] cpuidle_enter_state+0x40/0xc0 [36648.674502] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0 [36648.683161] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30 [36648.691297] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290 [36648.699966] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0 [36648.708544] Code: 48 89 d1 48 2d c8 1f 00 00 0f 01 c8 0f ae f0 65 48 8b 04 25 30 b8 00 00 48 8b 80 38 e0 ff ff a8 08 75 08 b1 01 4c 89 e [36648.731454] NMI backtrace for cpu 3 [36648.737932] CPU: 3 PID: 0 Comm: swapper/3 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36648.749683] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013 [36648.762625] task: ffff8802132a8000 ti: ffff88021329e000 task.ti: ffff88021329e000 [36648.773242] RIP: 0010:[<ffffffff813e9b98>] [<ffffffff813e9b98>] intel_idle+0xd8/0x140 [36648.784335] RSP: 0018:ffff88021329fe28 EFLAGS: 00000046 [36648.792797] RAX: 0000000000000020 RBX: 0000000000000008 RCX: 0000000000000001 [36648.803103] RDX: 0000000000000000 RSI: ffffffff81c93e80 RDI: 0000000000000003 [36648.813409] RBP: ffff88021329fe50 R08: ffff88021ed9030c R09: 0000000000001f58 [36648.823709] R10: 00000000ffffffff R11: 0000000000007c89 R12: 0000000000000004 [36648.834017] R13: 0000000000000020 R14: 0000000000000003 R15: ffffffff81c93ff8 [36648.844234] FS: 0000000000000000(0000) GS:ffff88021ed80000(0000) knlGS:0000000000000000 [36648.855350] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033 [36648.864104] CR2: 00007f905fef2000 CR3: 0000000001c0e000 CR4: 00000000001407e0 [36648.874225] Stack: [36648.879171] 000000031329fe50 ffff88021ed9a300 ffffffff81c93e80 0000214d6bc1158a [36648.889593] 0000000000000004 ffff88021329fe88 ffffffff815d5dd0 ffff88021329ff38 [36648.900014] ffff88021ed9a300 0000000000000004 0000000000000003 ffffffff81c93e80 [36648.910417] Call Trace: [36648.915809] [<ffffffff815d5dd0>] cpuidle_enter_state+0x40/0xc0 [36648.924711] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0 [36648.933515] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30 [36648.941796] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290 [36648.950585] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0 [36648.959267] Code: 48 89 d1 48 2d c8 1f 00 00 0f 01 c8 0f ae f0 65 48 8b 04 25 30 b8 00 00 48 8b 80 38 e0 ff ff a8 08 75 08 b1 01 4c 89 e [36753.897795] INFO: task jbd2/dm-0-8:215 blocked for more than 120 seconds. [36753.904910] Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36753.911841] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message. [36753.919994] jbd2/dm-0-8 D ffff88021ec13180 0 215 2 0x00000000 [36753.927401] ffff88020dd5bbd8 0000000000000046 ffff88020e391800 ffff88020dd5bfd8 [36753.935174] 0000000000013180 0000000000013180 ffff88020e391800 ffff88021ec13a18 [36753.942941] ffff88021efd0140 0000000000000002 ffffffff811efd00 ffff88020dd5bc50 [36753.950710] Call Trace: [36753.953475] [<ffffffff811efd00>] ? generic_block_bmap+0x50/0x50 [36753.959810] [<ffffffff817287bd>] io_schedule+0x9d/0x140 [36753.965444] [<ffffffff811efd0e>] sleep_on_buffer+0xe/0x20 [36753.971259] [<ffffffff81728c42>] __wait_on_bit+0x62/0x90 [36753.976983] [<ffffffff811efd00>] ? generic_block_bmap+0x50/0x50 [36753.983312] [<ffffffff81728ce7>] out_of_line_wait_on_bit+0x77/0x90 [36753.989907] [<ffffffff810ab3d0>] ? autoremove_wake_function+0x40/0x40 [36753.996762] [<ffffffff811f103a>] __wait_on_buffer+0x2a/0x30 [36754.002719] [<ffffffff8128c23d>] jbd2_journal_commit_transaction+0x185d/0x1ab0 [36754.010312] [<ffffffff810756ff>] ? try_to_del_timer_sync+0x4f/0x70 [36754.016866] [<ffffffff812905fd>] kjournald2+0xbd/0x250 [36754.022360] [<ffffffff810ab390>] ? prepare_to_wait_event+0x100/0x100 [36754.029067] [<ffffffff81290540>] ? commit_timeout+0x10/0x10 [36754.034990] [<ffffffff8108b7d2>] kthread+0xd2/0xf0 [36754.040135] [<ffffffff8108b700>] ? kthread_create_on_node+0x1c0/0x1c0 [36754.046921] [<ffffffff81734ba8>] ret_from_fork+0x58/0x90 [36754.052576] [<ffffffff8108b700>] ? kthread_create_on_node+0x1c0/0x1c0 [36754.059367] INFO: task accel-pppd:26283 blocked for more than 120 seconds. [36754.066494] Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36754.073370] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message. [36754.081457] accel-pppd D ffff88021ec93180 0 26283 1 0x00000000 [36754.088792] ffff8801fbb4fad0 0000000000000086 ffff8802112d8000 ffff8801fbb4ffd8 [36754.096512] 0000000000013180 0000000000013180 ffff8802112d8000 ffff8801fbb4fc08 [36754.104242] ffff8801fbb4fc10 7fffffffffffffff ffff8802112d8000 0000000000000001 [36754.111954] Call Trace: [36754.114658] [<ffffffff81728499>] schedule+0x29/0x70 [36754.119877] [<ffffffff817276e9>] schedule_timeout+0x239/0x2d0 [36754.125959] [<ffffffff81728021>] ? __schedule+0x381/0x7d0 [36754.131700] [<ffffffff81728fb6>] wait_for_completion+0xa6/0x160 [36754.137958] [<ffffffff8109ac90>] ? wake_up_state+0x20/0x20 [36754.143787] [<ffffffff810c73f0>] ? rcu_is_watching+0x20/0x20 [36754.149794] [<ffffffff810f68cf>] __stop_cpus+0x4f/0x70 [36754.155269] [<ffffffff810c73f0>] ? rcu_is_watching+0x20/0x20 [36754.161264] [<ffffffff810f6c0a>] try_stop_cpus+0x3a/0x60 [36754.166888] [<ffffffff810c8c47>] synchronize_sched_expedited+0xd7/0x1c0 [36754.173824] [<ffffffff810c8d3e>] synchronize_rcu_expedited+0xe/0x10 [36754.180397] [<ffffffff816246dd>] synchronize_net+0x2d/0x40 [36754.186199] [<ffffffff81648ee5>] dev_deactivate_many+0x255/0x260 [36754.192519] [<ffffffff816234f6>] __dev_close_many+0x66/0xe0 [36754.198400] [<ffffffff816235bd>] __dev_close+0x4d/0x90 [36754.203853] [<ffffffff8162ae6d>] __dev_change_flags+0x9d/0x170 [36754.209989] [<ffffffff8162af69>] dev_change_flags+0x29/0x60 [36754.215867] [<ffffffff816946c3>] devinet_ioctl+0x693/0x790 [36754.221661] [<ffffffff8169569d>] inet_ioctl+0x6d/0xa0 [36754.227012] [<ffffffff8160be05>] sock_do_ioctl+0x25/0x50 [36754.232620] [<ffffffff8160c350>] sock_ioctl+0x1f0/0x2c0 [36754.238155] [<ffffffff811d16a0>] do_vfs_ioctl+0x2e0/0x4c0 [36754.243855] [<ffffffff81207580>] ? SyS_epoll_ctl+0xf0/0x9f0 [36754.249727] [<ffffffff811d1901>] SyS_ioctl+0x81/0xa0 [36754.254992] [<ffffffff81734c5d>] system_call_fastpath+0x1a/0x1f [36754.261217] INFO: task accel-pppd:26334 blocked for more than 120 seconds. [36754.268305] Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36754.275129] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message. [36754.283172] accel-pppd D ffff88021ec93180 0 26334 1 0x00000000 [36754.290471] ffff880211a95af0 0000000000000086 ffff8802112eb000 ffff880211a95fd8 [36754.298143] 0000000000013180 0000000000013180 ffff8802112eb000 ffffffff81cdc520 [36754.305813] ffffffff81cdc524 ffff8802112eb000 00000000ffffffff ffffffff81cdc528 [36754.313509] Call Trace: [36754.316155] [<ffffffff817289b9>] schedule_preempt_disabled+0x29/0x70 [36754.322786] [<ffffffff8172a825>] __mutex_lock_slowpath+0x135/0x1b0 [36754.329246] [<ffffffff8172a8bf>] mutex_lock+0x1f/0x2f [36754.334580] [<ffffffff81636909>] rtnetlink_rcv+0x19/0x30 [36754.340174] [<ffffffff816545a5>] netlink_unicast+0xd5/0x1b0 [36754.346016] [<ffffffff8165498e>] netlink_sendmsg+0x30e/0x680 [36754.351954] [<ffffffff8160ea2b>] sock_sendmsg+0x8b/0xc0 [36754.357453] [<ffffffff8101bc79>] ? sched_clock+0x9/0x10 [36754.362950] [<ffffffff8114fb23>] ? unlock_page+0x23/0x30 [36754.368536] [<ffffffff811782ba>] ? do_wp_page+0x39a/0x7c0 [36754.374206] [<ffffffff8160e71e>] ? move_addr_to_kernel.part.14+0x1e/0x60 [36754.381182] [<ffffffff8160f551>] ? move_addr_to_kernel+0x21/0x30 [36754.387462] [<ffffffff8160ee39>] ___sys_sendmsg+0x389/0x3a0 [36754.393310] [<ffffffff81730234>] ? __do_page_fault+0x204/0x570 [36754.399416] [<ffffffff8108efd4>] ? hrtimer_start_range_ns+0x14/0x20 [36754.405956] [<ffffffff8160fc22>] __sys_sendmsg+0x42/0x80 [36754.411543] [<ffffffff8160fc72>] SyS_sendmsg+0x12/0x20 [36754.416953] [<ffffffff81734c5d>] system_call_fastpath+0x1a/0x1f [36754.423145] INFO: task accel-pppd:26532 blocked for more than 120 seconds. [36754.430208] Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36754.437009] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message. [36754.445029] accel-pppd D ffff88021ec93180 0 26532 1 0x00000000 [36754.452307] ffff8800d430daf0 0000000000000086 ffff88020642e000 ffff8800d430dfd8 [36754.459976] 0000000000013180 0000000000013180 ffff88020642e000 ffffffff81cdc520 [36754.467635] ffffffff81cdc524 ffff88020642e000 00000000ffffffff ffffffff81cdc528 [36754.475302] Call Trace: [36754.477940] [<ffffffff817289b9>] schedule_preempt_disabled+0x29/0x70 [36754.484565] [<ffffffff8172a825>] __mutex_lock_slowpath+0x135/0x1b0 [36754.491023] [<ffffffff8172a8bf>] mutex_lock+0x1f/0x2f [36754.496352] [<ffffffff81636909>] rtnetlink_rcv+0x19/0x30 [36754.501943] [<ffffffff816545a5>] netlink_unicast+0xd5/0x1b0 [36754.507793] [<ffffffff8165498e>] netlink_sendmsg+0x30e/0x680 [36754.513731] [<ffffffff8160ea2b>] sock_sendmsg+0x8b/0xc0 [36754.519226] [<ffffffff8101bc79>] ? sched_clock+0x9/0x10 [36754.524725] [<ffffffff8160e71e>] ? move_addr_to_kernel.part.14+0x1e/0x60 [36754.531703] [<ffffffff8160f551>] ? move_addr_to_kernel+0x21/0x30 [36754.537980] [<ffffffff8160ee39>] ___sys_sendmsg+0x389/0x3a0 [36754.543828] [<ffffffff811a2695>] ? kmem_cache_free+0x1b5/0x1e0 [36754.549938] [<ffffffff8136de40>] ? timerqueue_add+0x60/0xb0 [36754.555789] [<ffffffff8108e505>] ? enqueue_hrtimer+0x25/0x80 [36754.561721] [<ffffffff8108edc2>] ? __hrtimer_start_range_ns+0x1a2/0x3a0 [36754.568610] [<ffffffff8108efd4>] ? hrtimer_start_range_ns+0x14/0x20 [36754.575149] [<ffffffff8160fc22>] __sys_sendmsg+0x42/0x80 [36754.580737] [<ffffffff8160fc72>] SyS_sendmsg+0x12/0x20 [36754.586150] [<ffffffff81734c5d>] system_call_fastpath+0x1a/0x1f [36754.592336] INFO: task accel-pppd:26707 blocked for more than 120 seconds. [36754.599391] Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36754.606192] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message. [36754.614219] accel-pppd D ffff88021ed93180 0 26707 1 0x00000000 [36754.621494] ffff88020fc35af0 0000000000000086 ffff88020dc2c800 ffff88020fc35fd8 [36754.629152] 0000000000013180 0000000000013180 ffff88020dc2c800 ffffffff81cdc520 [36754.636802] ffffffff81cdc524 ffff88020dc2c800 00000000ffffffff ffffffff81cdc528 [36754.644464] Call Trace: [36754.647101] [<ffffffff817289b9>] schedule_preempt_disabled+0x29/0x70 [36754.653734] [<ffffffff8172a825>] __mutex_lock_slowpath+0x135/0x1b0 [36754.660195] [<ffffffff8172a8bf>] mutex_lock+0x1f/0x2f [36754.665538] [<ffffffff81636909>] rtnetlink_rcv+0x19/0x30 [36754.671131] [<ffffffff816545a5>] netlink_unicast+0xd5/0x1b0 [36754.676986] [<ffffffff8165498e>] netlink_sendmsg+0x30e/0x680 [36754.682930] [<ffffffff8160ea2b>] sock_sendmsg+0x8b/0xc0 [36754.688437] [<ffffffff8101bc79>] ? sched_clock+0x9/0x10 [36754.693944] [<ffffffff8114fb23>] ? unlock_page+0x23/0x30 [36754.699537] [<ffffffff811782ba>] ? do_wp_page+0x39a/0x7c0 [36754.705208] [<ffffffff8160e71e>] ? move_addr_to_kernel.part.14+0x1e/0x60 [36754.712181] [<ffffffff8160f551>] ? move_addr_to_kernel+0x21/0x30 [36754.718462] [<ffffffff8160ee39>] ___sys_sendmsg+0x389/0x3a0 [36754.724316] [<ffffffff81730234>] ? __do_page_fault+0x204/0x570 [36754.730423] [<ffffffff8108efd4>] ? hrtimer_start_range_ns+0x14/0x20 [36754.736963] [<ffffffff8160fc22>] __sys_sendmsg+0x42/0x80 [36754.742547] [<ffffffff8160fc72>] SyS_sendmsg+0x12/0x20 [36754.747960] [<ffffffff81734c5d>] system_call_fastpath+0x1a/0x1f [36826.359280] INFO: rcu_sched self-detected stall on CPU[36826.363287] INFO: rcu_sched detected stalls on CPUs/tasks: { 2} (detected by 3,) [36826.363290] sending NMI to all CPUs: [36826.363292] NMI backtrace for cpu 3 [36826.363293] CPU: 3 PID: 0 Comm: swapper/3 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36826.363293] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013 [36826.363294] task: ffff8802132a8000 ti: ffff88021329e000 task.ti: ffff88021329e000 [36826.363295] RIP: 0010:[<ffffffff81374f83>] [<ffffffff81374f83>] __bitmap_andnot+0x13/0x50 [36826.363298] RSP: 0018:ffff88021ed83d80 EFLAGS: 00000002 [36826.363298] RAX: 0000000000000000 RBX: 0000000000000055 RCX: 0000000000000004 [36826.363298] RDX: ffff88021ec0ce20 RSI: ffff88021ed8ce00 RDI: ffff88021ed8ce00 [36826.363299] RBP: ffff88021ed83d80 R08: ffff88021ed8ce08 R09: ffffffff81ef11d8 [36826.363299] R10: 000000000000f46c R11: 0000000000040000 R12: ffff88021ed8ce00 [36826.363300] R13: 000000000000ce40 R14: ffff88021ec0ce20 R15: 0000000000080000 [36826.363301] FS: 0000000000000000(0000) GS:ffff88021ed80000(0000) knlGS:0000000000000000 [36826.363301] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033 [36826.363301] CR2: 00007f905fef2000 CR3: 0000000001c0e000 CR4: 00000000001407e0 [36826.363302] Stack: [36826.363302] ffff88021ed83de0 ffffffff81049515 0000000000000086 000000021ed83df0 [36826.363304] 000000000000ce20 0000000000000003 0000000000000003 0000000000002710 [36826.363305] ffffffff81c4e1c0 ffffffff81d14520 ffffffff81c4e1c0 0000000000000003 [36826.363306] Call Trace: [36826.363306] <IRQ> [<ffffffff81049515>] __x2apic_send_IPI_mask+0x155/0x180 [36826.363309] [<ffffffff8104955c>] x2apic_send_IPI_all+0x1c/0x20 [36826.363311] [<ffffffff81045310>] arch_trigger_all_cpu_backtrace+0x70/0xb0 [36826.363312] [<ffffffff810cb4c1>] rcu_check_callbacks+0x631/0x650 [36826.363313] [<ffffffff810764e7>] update_process_times+0x47/0x70 [36826.363315] [<ffffffff810d66a5>] tick_sched_handle.isra.17+0x25/0x60 [36826.363316] [<ffffffff810d6721>] tick_sched_timer+0x41/0x60 [36826.363317] [<ffffffff8108e9e7>] __run_hrtimer+0x77/0x1d0 [36826.363319] [<ffffffff810d66e0>] ? tick_sched_handle.isra.17+0x60/0x60 [36826.363320] [<ffffffff8108f1af>] hrtimer_interrupt+0xef/0x230 [36826.363322] [<ffffffff81043727>] local_apic_timer_interrupt+0x37/0x60 [36826.363323] [<ffffffff8173700f>] smp_apic_timer_interrupt+0x3f/0x60 [36826.363325] [<ffffffff8173599d>] apic_timer_interrupt+0x6d/0x80 [36826.363327] <EOI> [<ffffffff815d5de2>] ? cpuidle_enter_state+0x52/0xc0 [36826.363329] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0 [36826.363330] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30 [36826.363332] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290 [36826.363333] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0 [36826.363335] Code: 48 89 0c c7 48 83 c0 01 41 39 c0 7f eb 5d c3 66 0f 1f 84 00 00 00 00 00 48 63 c9 55 48 83 c1 3f 48 c1 e9 06 48 89 e5 8 [36826.363347] NMI backtrace for cpu 2 [36826.363348] CPU: 2 PID: 0 Comm: swapper/2 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36826.363349] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013 [36826.363349] task: ffff88021328e000 ti: ffff88021329c000 task.ti: ffff88021329c000 [36826.363350] RIP: 0010:[<ffffffff8146ea55>] [<ffffffff8146ea55>] io_serial_in+0x15/0x20 [36826.363352] RSP: 0018:ffff88021ed03798 EFLAGS: 00000002 [36826.363352] RAX: 0000000000000c00 RBX: ffffffff81fc6740 RCX: 0000000000000000 [36826.363352] RDX: 00000000000003fd RSI: 00000000000003fd RDI: ffffffff81fc6740 [36826.363353] RBP: ffff88021ed03798 R08: ffffffff81d144e8 R09: 0000000000000000 [36826.363353] R10: 0000000000000000 R11: ffff88021ed0373e R12: 000000000000270c [36826.363354] R13: 0000000000000020 R14: ffffffff81ebf979 R15: 0000000000000039 [36826.363354] FS: 0000000000000000(0000) GS:ffff88021ed00000(0000) knlGS:0000000000000000 [36826.363355] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033 [36826.363355] CR2: 00007f9dd812c800 CR3: 00000000359b0000 CR4: 00000000001407e0 [36826.363355] Stack: [36826.363356] ffff88021ed037c0 ffffffff8146f5fb ffffffff81fc6740 0000000000000061 [36826.363357] ffffffff81fc6740 ffff88021ed037e0 ffffffff8146f7bc ffffffff81ebf970 [36826.363358] ffffffff8146f7a0 ffff88021ed03810 ffffffff8146a3ba 0000000000000000 [36826.363359] Call Trace: [36826.363359] <IRQ> [<ffffffff8146f5fb>] wait_for_xmitr+0x3b/0xa0 [36826.363361] [<ffffffff8146f7bc>] serial8250_console_putchar+0x1c/0x30 [36826.363362] [<ffffffff8146f7a0>] ? serial8250_console_write+0x140/0x140 [36826.363363] [<ffffffff8146a3ba>] uart_console_write+0x3a/0x80 [36826.363365] [<ffffffff8146f70e>] serial8250_console_write+0xae/0x140 [36826.363366] [<ffffffff810bc823>] call_console_drivers.constprop.18+0x93/0xf0 [36826.363367] [<ffffffff810bd87e>] console_unlock+0x2ae/0x400 [36826.363368] [<ffffffff810bdc8e>] vprintk_emit+0x2be/0x530 [36826.363369] [<ffffffff8171da3e>] printk+0x67/0x69 [36826.363371] [<ffffffff810cb1de>] rcu_check_callbacks+0x34e/0x650 [36826.363373] [<ffffffff8109dfa2>] ? account_process_tick+0x62/0x1c0 [36826.363374] [<ffffffff810764e7>] update_process_times+0x47/0x70 [36826.363375] [<ffffffff810d66a5>] tick_sched_handle.isra.17+0x25/0x60 [36826.363376] [<ffffffff810d6721>] tick_sched_timer+0x41/0x60 [36826.363377] [<ffffffff8108e9e7>] __run_hrtimer+0x77/0x1d0 [36826.363379] [<ffffffff810d66e0>] ? tick_sched_handle.isra.17+0x60/0x60 [36826.363380] [<ffffffff8108f1af>] hrtimer_interrupt+0xef/0x230 [36826.363381] [<ffffffff81043727>] local_apic_timer_interrupt+0x37/0x60 [36826.363383] [<ffffffff8173700f>] smp_apic_timer_interrupt+0x3f/0x60 [36826.363385] [<ffffffff8173599d>] apic_timer_interrupt+0x6d/0x80 [36826.363387] [<ffffffffa0457c2a>] ? ____nf_conntrack_find+0x5a/0x160 [nf_conntrack] [36826.363390] [<ffffffffa0457c01>] ? ____nf_conntrack_find+0x31/0x160 [nf_conntrack] [36826.363393] [<ffffffffa04585f1>] __nf_conntrack_find_get+0x31/0x160 [nf_conntrack] [36826.363396] [<ffffffffa0459489>] nf_conntrack_in+0x2a9/0xb60 [nf_conntrack] [36826.363399] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40 [36826.363400] [<ffffffffa04862e2>] ipv4_conntrack_in+0x22/0x30 [nf_conntrack_ipv4] [36826.363402] [<ffffffff8165732a>] nf_iterate+0x9a/0xb0 [36826.363403] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40 [36826.363404] [<ffffffff816573b4>] nf_hook_slow+0x74/0x130 [36826.363405] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40 [36826.363407] [<ffffffff8165e2c8>] ip_rcv+0x2f8/0x3d0 [36826.363408] [<ffffffff81627a96>] __netif_receive_skb_core+0x676/0x850 [36826.363409] [<ffffffff81627c88>] __netif_receive_skb+0x18/0x60 [36826.363410] [<ffffffff8162881e>] process_backlog+0xae/0x1a0 [36826.363411] [<ffffffff81628072>] net_rx_action+0x152/0x250 [36826.363412] [<ffffffff8106cccc>] __do_softirq+0xec/0x2c0 [36826.363414] [<ffffffff8106d215>] irq_exit+0x105/0x110 [36826.363415] [<ffffffff81736f66>] do_IRQ+0x56/0xc0 [36826.363417] [<ffffffff8172c56d>] common_interrupt+0x6d/0x6d [36826.363418] <EOI> [<ffffffff815d5de2>] ? cpuidle_enter_state+0x52/0xc0 [36826.363420] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0 [36826.363421] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30 [36826.363423] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290 [36826.363424] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0 [36826.363425] Code: 48 89 e5 d3 e6 48 63 f6 48 03 77 10 8b 06 5d c3 66 0f 1f 44 00 00 0f 1f 44 00 00 0f b6 4f 61 55 48 89 e5 d3 e6 03 77 0 [36826.363439] NMI backtrace for cpu 0 [36826.363440] CPU: 0 PID: 0 Comm: swapper/0 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36826.363441] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013 [36826.363441] task: ffffffff81c15480 ti: ffffffff81c00000 task.ti: ffffffff81c00000 [36826.363442] RIP: 0010:[<ffffffff813e9b98>] [<ffffffff813e9b98>] intel_idle+0xd8/0x140 [36826.363444] RSP: 0018:ffffffff81c01e38 EFLAGS: 00000046 [36826.363445] RAX: 0000000000000020 RBX: 0000000000000008 RCX: 0000000000000001 [36826.363445] RDX: 0000000000000000 RSI: ffffffff81c93e80 RDI: 0000000000000000 [36826.363445] RBP: ffffffff81c01e60 R08: ffff88021ec10328 R09: 0000000000000018 [36826.363446] R10: 0000000000021d23 R11: 000000000004d794 R12: 0000000000000004 [36826.363446] R13: 0000000000000020 R14: 0000000000000003 R15: ffffffff81c93ff8 [36826.363447] FS: 0000000000000000(0000) GS:ffff88021ec00000(0000) knlGS:0000000000000000 [36826.363447] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033 [36826.363448] CR2: 00007f905fef2000 CR3: 0000000001c0e000 CR4: 00000000001407f0 [36826.363448] Stack: [36826.363449] 0000000081c01e60 ffff88021ec1a300 ffffffff81c93e80 00002176f7216ab3 [36826.363450] 0000000000000004 ffffffff81c01e98 ffffffff815d5dd0 ffffffffffffffff [36826.363451] ffff88021ec1a300 0000000000000004 0000000000000000 ffffffff81c93e80 [36826.363452] Call Trace: [36826.363453] [<ffffffff815d5dd0>] cpuidle_enter_state+0x40/0xc0 [36826.363455] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0 [36826.363456] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30 [36826.363458] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290 [36826.363459] [<ffffffff81712297>] rest_init+0x77/0x80 [36826.363460] [<ffffffff81d34f70>] start_kernel+0x438/0x443 [36826.363462] [<ffffffff81d34941>] ? repair_env_string+0x5c/0x5c [36826.363464] [<ffffffff81d34120>] ? early_idt_handler_array+0x120/0x120 [36826.363465] [<ffffffff81d345ee>] x86_64_start_reservations+0x2a/0x2c [36826.363466] [<ffffffff81d34733>] x86_64_start_kernel+0x143/0x152 [36826.363468] Code: 48 89 d1 48 2d c8 1f 00 00 0f 01 c8 0f ae f0 65 48 8b 04 25 30 b8 00 00 48 8b 80 38 e0 ff ff a8 08 75 08 b1 01 4c 89 e [36826.363481] NMI backtrace for cpu 1 [36826.363483] CPU: 1 PID: 0 Comm: swapper/1 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36826.363483] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013 [36826.363484] task: ffff88021328c800 ti: ffff88021329a000 task.ti: ffff88021329a000 [36826.363485] RIP: 0010:[<ffffffff813e9b98>] [<ffffffff813e9b98>] intel_idle+0xd8/0x140 [36826.363486] RSP: 0018:ffff88021329be28 EFLAGS: 00000046 [36826.363487] RAX: 0000000000000020 RBX: 0000000000000008 RCX: 0000000000000001 [36826.363487] RDX: 0000000000000000 RSI: ffffffff81c93e80 RDI: 0000000000000001 [36826.363488] RBP: ffff88021329be50 R08: ffff88021ec9030c R09: 0000000000001fa8 [36826.363488] R10: 00000000ffffffff R11: 000000000000f973 R12: 0000000000000004 [36826.363489] R13: 0000000000000020 R14: 0000000000000003 R15: ffffffff81c93ff8 [36826.363489] FS: 0000000000000000(0000) GS:ffff88021ec80000(0000) knlGS:0000000000000000 [36826.363490] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033 [36826.363490] CR2: 000000000060a3c0 CR3: 0000000001c0e000 CR4: 00000000001407e0 [36826.363491] Stack: [36826.363491] 000000011329be50 ffff88021ec9a300 ffffffff81c93e80 00002176fd9156e2 [36826.363492] 0000000000000004 ffff88021329be88 ffffffff815d5dd0 ffff88021329bf38 [36826.363494] ffff88021ec9a300 0000000000000004 0000000000000001 ffffffff81c93e80 [36826.363495] Call Trace: [36826.363495] [<ffffffff815d5dd0>] cpuidle_enter_state+0x40/0xc0 [36826.363497] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0 [36826.363499] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30 [36826.363500] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290 [36826.363501] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0 [36826.363503] Code: 48 89 d1 48 2d c8 1f 00 00 0f 01 c8 0f ae f0 65 48 8b 04 25 30 b8 00 00 48 8b 80 38 e0 ff ff a8 08 75 08 b1 01 4c 89 e [36827.829409] { 2} (t=105379 jiffies g=5345479 c=5345478 q=0) [36827.841101] sending NMI to all CPUs: [36827.847549] NMI backtrace for cpu 2 [36827.853919] CPU: 2 PID: 0 Comm: swapper/2 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36827.865558] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013 [36827.878362] task: ffff88021328e000 ti: ffff88021329c000 task.ti: ffff88021329c000 [36827.888833] RIP: 0010:[<ffffffff81049520>] [<ffffffff81049520>] __x2apic_send_IPI_mask+0x160/0x180 [36827.900930] RSP: 0018:ffff88021ed03908 EFLAGS: 00000092 [36827.909287] RAX: 0000000000000100 RBX: 0000000000000055 RCX: 0000000000000001 [36827.919489] RDX: ffff88021ed0ce20 RSI: 0000000000000000 RDI: 0000000000000092 [36827.929598] RBP: ffff88021ed03958 R08: ffff88021ed0ce08 R09: 0000000000000004 [36827.939627] R10: 00000000000000f0 R11: ffffc90008d59ff8 R12: ffff88021ed0ce00 [36827.949638] R13: 000000000000ce40 R14: ffff88021ec0ce20 R15: 0000000000080000 [36827.959607] FS: 0000000000000000(0000) GS:ffff88021ed00000(0000) knlGS:0000000000000000 [36827.970519] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033 [36827.979059] CR2: 00007f9dd812c800 CR3: 00000000359b0000 CR4: 00000000001407e0 [36827.989004] Stack: [36827.993797] 0000000000000092 000000021ed03968 000000000000ce20 0000010000000002 [36828.004108] 0000000000000002 0000000000002710 ffffffff81c4e1c0 ffffffff81d14520 [36828.014418] ffffffff81c4e1c0 0000000000000002 ffff88021ed03968 ffffffff8104955c [36828.024732] Call Trace: [36828.030025] <IRQ> [36828.031968] [<ffffffff8104955c>] x2apic_send_IPI_all+0x1c/0x20 [36828.043740] [<ffffffff81045310>] arch_trigger_all_cpu_backtrace+0x70/0xb0 [36828.053464] [<ffffffff810cb28e>] rcu_check_callbacks+0x3fe/0x650 [36828.062391] [<ffffffff810764e7>] update_process_times+0x47/0x70 [36828.071211] [<ffffffff810d66a5>] tick_sched_handle.isra.17+0x25/0x60 [36828.080466] [<ffffffff810d6721>] tick_sched_timer+0x41/0x60 [36828.088925] [<ffffffff8108e9e7>] __run_hrtimer+0x77/0x1d0 [36828.097179] [<ffffffff810d66e0>] ? tick_sched_handle.isra.17+0x60/0x60 [36828.106570] [<ffffffff8108f1af>] hrtimer_interrupt+0xef/0x230 [36828.115184] [<ffffffff81043727>] local_apic_timer_interrupt+0x37/0x60 [36828.124504] [<ffffffff8173700f>] smp_apic_timer_interrupt+0x3f/0x60 [36828.133664] [<ffffffff8173599d>] apic_timer_interrupt+0x6d/0x80 [36828.142482] [<ffffffffa0457c2a>] ? ____nf_conntrack_find+0x5a/0x160 [nf_conntrack] [36828.152982] [<ffffffffa0457c01>] ? ____nf_conntrack_find+0x31/0x160 [nf_conntrack] [36828.163458] [<ffffffffa04585f1>] __nf_conntrack_find_get+0x31/0x160 [nf_conntrack] [36828.173931] [<ffffffffa0459489>] nf_conntrack_in+0x2a9/0xb60 [nf_conntrack] [36828.183801] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40 [36828.192464] [<ffffffffa04862e2>] ipv4_conntrack_in+0x22/0x30 [nf_conntrack_ipv4] [36828.202721] [<ffffffff8165732a>] nf_iterate+0x9a/0xb0 [36828.210550] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40 [36828.219058] [<ffffffff816573b4>] nf_hook_slow+0x74/0x130 [36828.227091] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40 [36828.235521] [<ffffffff8165e2c8>] ip_rcv+0x2f8/0x3d0 [36828.243050] [<ffffffff81627a96>] __netif_receive_skb_core+0x676/0x850 [36828.252142] [<ffffffff81627c88>] __netif_receive_skb+0x18/0x60 [36828.260598] [<ffffffff8162881e>] process_backlog+0xae/0x1a0 [36828.268803] [<ffffffff81628072>] net_rx_action+0x152/0x250 [36828.276919] [<ffffffff8106cccc>] __do_softirq+0xec/0x2c0 [36828.284853] [<ffffffff8106d215>] irq_exit+0x105/0x110 [36828.292528] [<ffffffff81736f66>] do_IRQ+0x56/0xc0 [36828.299834] [<ffffffff8172c56d>] common_interrupt+0x6d/0x6d [36828.307993] <EOI> [36828.309935] [<ffffffff815d5de2>] ? cpuidle_enter_state+0x52/0xc0 [36828.321203] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0 [36828.329516] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30 [36828.337304] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290 [36828.345600] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0 [36828.353787] Code: 02 0f 44 f0 89 f6 e8 50 5f 00 00 66 90 b9 00 01 00 00 4c 89 f2 4c 89 e6 4c 89 e7 e8 5b ba 32 00 e9 36 ff ff ff 48 8b 7 [36828.376283] NMI backtrace for cpu 0 [36828.382369] CPU: 0 PID: 0 Comm: swapper/0 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36828.393729] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013 [36828.406264] task: ffffffff81c15480 ti: ffffffff81c00000 task.ti: ffffffff81c00000 [36828.416480] RIP: 0010:[<ffffffff813e9b98>] [<ffffffff813e9b98>] intel_idle+0xd8/0x140 [36828.427097] RSP: 0018:ffffffff81c01e38 EFLAGS: 00000046 [36828.435001] RAX: 0000000000000020 RBX: 0000000000000008 RCX: 0000000000000001 [36828.444741] RDX: 0000000000000000 RSI: ffffffff81c93e80 RDI: 0000000000000000 [36828.454469] RBP: ffffffff81c01e60 R08: ffff88021ec10324 R09: 0000000000000018 [36828.464205] R10: 000000000002132a R11: 000000000003c85b R12: 0000000000000004 [36828.473917] R13: 0000000000000020 R14: 0000000000000003 R15: ffffffff81c93ff8 [36828.483588] FS: 0000000000000000(0000) GS:ffff88021ec00000(0000) knlGS:0000000000000000 [36828.494200] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033 [36828.502426] CR2: 00007f905fef2000 CR3: 0000000001c0e000 CR4: 00000000001407f0 [36828.512033] Stack: [36828.516492] 0000000081c01e60 ffff88021ec1a300 ffffffff81c93e80 0000217753a304fe [36828.526466] 0000000000000004 ffffffff81c01e98 ffffffff815d5dd0 ffffffffffffffff [36828.536448] ffff88021ec1a300 0000000000000004 0000000000000000 ffffffff81c93e80 [36828.546430] Call Trace: [36828.551403] [<ffffffff815d5dd0>] cpuidle_enter_state+0x40/0xc0 [36828.559866] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0 [36828.568220] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30 [36828.576034] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290 [36828.584355] [<ffffffff81712297>] rest_init+0x77/0x80 [36828.591864] [<ffffffff81d34f70>] start_kernel+0x438/0x443 [36828.599804] [<ffffffff81d34941>] ? repair_env_string+0x5c/0x5c [36828.608173] [<ffffffff81d34120>] ? early_idt_handler_array+0x120/0x120 [36828.617224] [<ffffffff81d345ee>] x86_64_start_reservations+0x2a/0x2c [36828.626115] [<ffffffff81d34733>] x86_64_start_kernel+0x143/0x152 [36828.634638] Code: 48 89 d1 48 2d c8 1f 00 00 0f 01 c8 0f ae f0 65 48 8b 04 25 30 b8 00 00 48 8b 80 38 e0 ff ff a8 08 75 08 b1 01 4c 89 e [36828.657137] NMI backtrace for cpu 1 [36828.663197] CPU: 1 PID: 0 Comm: swapper/1 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36828.674517] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013 [36828.687014] task: ffff88021328c800 ti: ffff88021329a000 task.ti: ffff88021329a000 [36828.697195] RIP: 0010:[<ffffffff813e9b98>] [<ffffffff813e9b98>] intel_idle+0xd8/0x140 [36828.707864] RSP: 0018:ffff88021329be28 EFLAGS: 00000046 [36828.715904] RAX: 0000000000000020 RBX: 0000000000000008 RCX: 0000000000000001 [36828.725790] RDX: 0000000000000000 RSI: ffffffff81c93e80 RDI: 0000000000000001 [36828.735665] RBP: ffff88021329be50 R08: ffff88021ec9030c R09: 0000000000000014 [36828.745529] R10: 0000000000001f30 R11: 0000000000007cab R12: 0000000000000004 [36828.755394] R13: 0000000000000020 R14: 0000000000000003 R15: ffffffff81c93ff8 [36828.765243] FS: 0000000000000000(0000) GS:ffff88021ec80000(0000) knlGS:0000000000000000 [36828.776091] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033 [36828.784601] CR2: 000000000060a3c0 CR3: 0000000001c0e000 CR4: 00000000001407e0 [36828.794511] Stack: [36828.799267] 000000011329be50 ffff88021ec9a300 ffffffff81c93e80 0000217755c85d41 [36828.809512] 0000000000000004 ffff88021329be88 ffffffff815d5dd0 ffff88021329bf38 [36828.819744] ffff88021ec9a300 0000000000000004 0000000000000001 ffffffff81c93e80 [36828.829997] Call Trace: [36828.835227] [<ffffffff815d5dd0>] cpuidle_enter_state+0x40/0xc0 [36828.843969] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0 [36828.852618] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30 [36828.860736] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290 [36828.869387] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0 [36828.877949] Code: 48 89 d1 48 2d c8 1f 00 00 0f 01 c8 0f ae f0 65 48 8b 04 25 30 b8 00 00 48 8b 80 38 e0 ff ff a8 08 75 08 b1 01 4c 89 e [36828.900826] NMI backtrace for cpu 3 [36828.907295] CPU: 3 PID: 0 Comm: swapper/3 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu [36828.919039] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013 [36828.931965] task: ffff8802132a8000 ti: ffff88021329e000 task.ti: ffff88021329e000 [36828.942572] RIP: 0010:[<ffffffff813e9b98>] [<ffffffff813e9b98>] intel_idle+0xd8/0x140 [36828.953655] RSP: 0018:ffff88021329fe28 EFLAGS: 00000046 [36828.962099] RAX: 0000000000000020 RBX: 0000000000000008 RCX: 0000000000000001 [36828.972399] RDX: 0000000000000000 RSI: ffffffff81c93e80 RDI: 0000000000000003 [36828.982684] RBP: ffff88021329fe50 R08: ffff88021ed9030c R09: 0000000000001f58 [36828.992974] R10: 00000000ffffffff R11: 0000000000007c84 R12: 0000000000000004 [36829.003265] R13: 0000000000000020 R14: 0000000000000003 R15: ffffffff81c93ff8 [36829.013476] FS: 0000000000000000(0000) GS:ffff88021ed80000(0000) knlGS:0000000000000000 [36829.024584] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033 [36829.033326] CR2: 00007f905fef2000 CR3: 0000000001c0e000 CR4: 00000000001407e0 [36829.043442] Stack: [36829.048376] 000000031329fe50 ffff88021ed9a300 ffffffff81c93e80 00002177560552e5 [36829.058784] 0000000000000004 ffff88021329fe88 ffffffff815d5dd0 ffff88021329ff38 [36829.069186] ffff88021ed9a300 0000000000000004 0000000000000003 ffffffff81c93e80 [36829.079589] Call Trace: [36829.084972] [<ffffffff815d5dd0>] cpuidle_enter_state+0x40/0xc0 [36829.093868] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0 [36829.102663] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30 [36829.110936] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290 [36829.119716] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0 [36829.128387] Code: 48 89 d1 48 2d c8 1f 00 00 0f 01 c8 0f ae f0 65 48 8b 04 25 30 b8 00 00 48 8b 80 38 e0 ff ff a8 08 75 08 b1 01 4c 89 e Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
Dimka88 Опубликовано 25 августа, 2016 · Жалоба Если кто получил стабильную работу ppp на ядрах > 3.2 сообщите, пожалуйста. ppp ~ # uname -r 3.12.59 ppp ~ # uptime 09:40:13 up 93 days, 6:17, 1 user, load average: 0.00, 0.01, 0.05 ppp ~ # accel-cmd show stat uptime: 93.06:17:18 cpu: 0% Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
NiTr0 Опубликовано 25 августа, 2016 · Жалоба pppoe заломали где-то с 3.19. добавив в него асинхронности, из-за чего полезли грабли с race condition при опускании ифейса. вроде как пытаются лечить в более свежих ветках, в честности - должен был появиться параметр модуля указывающий кто обрабатывает PADT - юзерспейс (для accel) или модуль ядра (rp-pppoe PADT не умеет), грабля лезла при двойном одновременном дестрое ифейса юзерспейсом и ядром. в 3.14 были проблемы с race condition при опускании ифейса и прибивании на нем шейперов (вроде как лечилось профилактическим прибиванием шейперов не в ifdown, а в ifup). pptp вроде стабилен на 3.10, новее не пробовал. Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
Dimka88 Опубликовано 25 августа, 2016 · Жалоба pptp вроде стабилен на 3.10, новее не пробовал. Также на 3.12.59 все прекрасно с pptp и l2tp. Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
taf_321 Опубликовано 25 августа, 2016 · Жалоба в честности - должен был появиться параметр модуля указывающий кто обрабатывает PADT - юзерспейс (для accel) или модуль ядра (rp-pppoe PADT не умеет), грабля лезла при двойном одновременном дестрое ифейса юзерспейсом и ядром. На каких версиях такое должно появиться? А то на 4.7.2 никаких параметров у модуля pppoe не замечено Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
NiTr0 Опубликовано 25 августа, 2016 · Жалоба вроде в netdev'е проскакивало сполгода назад патчами. и вроде куда-то мерджили даже... Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...
dtcom Опубликовано 27 августа, 2016 (изменено) · Жалоба pptp вроде стабилен на 3.10, новее не пробовал. Также на 3.12.59 все прекрасно с pptp и l2tp. Поставил 3.12.62 (были до этого 4.4.x) будем тестить может норамально станет работать. Пока обратил внимание, что после замены ядра упала загрузка процессора примерно с 20% до 10% (смотрел htop). Zabbix говорит что это softirq. Изменено 27 августа, 2016 пользователем dtcom Вставить ник Цитата Ответить с цитированием Поделиться сообщением Ссылка на сообщение Поделиться на других сайтах More sharing options...