Перейти к содержимому
Калькуляторы

Коллеги, подскажите:

Есть 2 сервера с accel-ppp 1.10.2

Настроен pppoe+radius

Раз в 7-10 дней выпадают в панику. То один, то другой, так что железо отпадает.

Система :

# uname -a

Linux pppoe4 3.16.0-4-amd64 #1 SMP Debian 3.16.7-ckt25-2 (2016-04-08) x86_64 GNU/Linux

# cat /etc/debian_version

8.4

 

В sysctl.conf выставлено kernel.panic=5 - но в ребут по чему то не пошли ни один ни второй.

post-65609-063097200 1469523204_thumb.png

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

То один, то другой, так что железо отпадает.

Сетевые карты какие?

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

То один, то другой, так что железо отпадает.

Сетевые карты какие?

NetXtreme BCM5722 Gigabit Ethernet PCI Express

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

3.16.0-4-amd64 #1 SMP Debian 3.16.7-ckt25-2 (2016-04-08) x86_64 GNU/Linux

 

Стабильной работы ppp удалось добиться только с ядрами 3.2. Во всех остальных случаях - паника.

Изменено пользователем sanyasi

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

3.16.0-4-amd64 #1 SMP Debian 3.16.7-ckt25-2 (2016-04-08) x86_64 GNU/Linux

 

Стабильной работы ppp удалось добиться только с ядрами 3.2. Во всех остальных случаях - паника.

спасибо

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Стабильной работы ppp удалось добиться только с ядрами 3.2. Во всех остальных случаях - паника.

Т.е., я понимаю так, что на 2.6.32 (CentOS 6.7) можно и не заморачиваться?

 

P.S. Кстати, на нём он и не собирается..

cmake -DKDIR=/usr/src/kernels/2.6.32-642.3.1.el6.x86_64/ -DBUILD_PPTP_DRIVER=FALSE -DBUILD_IPOE_DRIVER=TRUE -DRADIUS=TRUE -DLUA=TRUE ..
....

make
.....
Scanning dependencies of target ipoe_drv
[100%] Generating driver/ipoe.ko
make[3]: *** Нет правила для сборки цели `modules'.  Останов.
make[2]: *** [drivers/ipoe/driver/ipoe.ko] Ошибка 2
make[1]: *** [drivers/ipoe/CMakeFiles/ipoe_drv.dir/all] Ошибка 2
make: *** [all] Ошибка 2

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Стабильной работы ppp удалось добиться только с ядрами 3.2. Во всех остальных случаях - паника.

Т.е., я понимаю так, что на 2.6.32 (CentOS 6.7) можно и не заморачиваться?

 

P.S. Кстати, на нём он и не собирается..

cmake -DKDIR=/usr/src/kernels/2.6.32-642.3.1.el6.x86_64/ -DBUILD_PPTP_DRIVER=FALSE -DBUILD_IPOE_DRIVER=TRUE -DRADIUS=TRUE -DLUA=TRUE ..
....

make
.....
Scanning dependencies of target ipoe_drv
[100%] Generating driver/ipoe.ko
make[3]: *** Нет правила для сборки цели `modules'.  Останов.
make[2]: *** [drivers/ipoe/driver/ipoe.ko] Ошибка 2
make[1]: *** [drivers/ipoe/CMakeFiles/ipoe_drv.dir/all] Ошибка 2
make: *** [all] Ошибка 2

 

 

Если вы говорите о PPP, то модуль ipoe вам не нужно собирать -DBUILD_IPOE_DRIVER=FALSE

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Если вы говорите о PPP, то модуль ipoe вам не нужно собирать -DBUILD_IPOE_DRIVER=FALSE

Ровно наоборот - все ррр НЕ нужны, надо именно IPoE.

Кстати, ррр ругается тем же матом..

Scanning dependencies of target pptp_drv
[100%] Generating driver/pptp.ko
make[3]: *** Нет правила для сборки цели `modules'.  Останов.
make[2]: *** [drivers/pptp/driver/pptp.ko] Ошибка 2
make[1]: *** [drivers/pptp/CMakeFiles/pptp_drv.dir/all] Ошибка 2
make: *** [all] Ошибка 2

Есть подозрение, что исходники ядра, поставленные yum-ом, "неполные".

Сейчас пытаюсь поставить с сырцов...

 

P.S. Поставил "полные" исходники из сырцов, практически те же яйца..

[100%] Generating driver/ipoe.ko
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c: В функции ‘ipoe_process_queue’:
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:579: ошибка: ‘struct sk_buff’ не содержит элемента с именем ‘skb_iif’
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c: В функции ‘ipoe_lookup_rt’:
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:673: ошибка: размер ‘fl4’ в памяти неизвестен
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:679: ошибка: слишком мало аргументов в вызове функции ‘ip_route_output_key’
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:683: ошибка: ‘struct rtable’ не содержит элемента с именем ‘dst’
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:673: предупреждение: неиспользуемая переменная ‘fl4’
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c: В функции ‘ipoe_recv’:
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:702: ошибка: ‘struct net_device’ не содержит элемента с именем ‘rx_handler_data’
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:702: предупреждение: в декларации ‘_________p1’ по умолчанию установлен тип ‘int’
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:702: ошибка: ‘struct net_device’ не содержит элемента с именем ‘rx_handler_data’
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:702: ошибка: ‘struct net_device’ не содержит элемента с именем ‘rx_handler_data’
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:702: предупреждение: в декларации ‘type name’ по умолчанию установлен тип ‘int’
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:702: предупреждение: при инициализации целое преобразуется в указатель без приведения типа
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:795: ошибка: ‘struct sk_buff’ не содержит элемента с именем ‘skb_iif’
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c: В функции ‘ipoe_stats64’:
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:885: ошибка: неявная декларация функции ‘u64_stats_fetch_begin_bh’
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:888: ошибка: неявная декларация функции ‘u64_stats_fetch_retry_bh’
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c: В функции ‘ipoe_nl_cmd_delete’:
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1194: ошибка: неявная декларация функции ‘dev_get_by_index_rcu’
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1194: предупреждение: в присваивании целое преобразуется в указатель без приведения типа
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c: В функции ‘ipoe_nl_cmd_modify’:
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1246: предупреждение: в присваивании целое преобразуется в указатель без приведения типа
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c: В функции ‘ipoe_nl_cmd_del_interface’:
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1526: ошибка: ‘struct net_device’ не содержит элемента с именем ‘rx_handler’
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1526: предупреждение: в декларации ‘_________p1’ по умолчанию установлен тип ‘int’
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1526: ошибка: ‘struct net_device’ не содержит элемента с именем ‘rx_handler’
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1526: ошибка: ‘struct net_device’ не содержит элемента с именем ‘rx_handler’
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1526: предупреждение: в декларации ‘type name’ по умолчанию установлен тип ‘int’
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1526: предупреждение: сравнение указателя и целого
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c: На верхнем уровне:
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1690: ошибка: неизвестное поле ‘ndo_get_stats64’ в инициализаторе
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1690: предупреждение: несовместимый тип указателя в инициализации
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c: В функции ‘ipoe_fini’:
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1762: ошибка: ‘struct net_device’ не содержит элемента с именем ‘rx_handler’
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1762: предупреждение: в декларации ‘_________p1’ по умолчанию установлен тип ‘int’
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1762: ошибка: ‘struct net_device’ не содержит элемента с именем ‘rx_handler’
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1762: ошибка: ‘struct net_device’ не содержит элемента с именем ‘rx_handler’
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1762: предупреждение: в декларации ‘type name’ по умолчанию установлен тип ‘int’
/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.c:1762: предупреждение: сравнение указателя и целого
make[4]: *** [/opt/accel-ppp-code/build/drivers/ipoe/driver/ipoe.o] Ошибка 1
make[3]: *** [_module_/opt/accel-ppp-code/build/drivers/ipoe/driver] Ошибка 2
make[2]: *** [drivers/ipoe/driver/ipoe.ko] Ошибка 2
make[1]: *** [drivers/ipoe/CMakeFiles/ipoe_drv.dir/all] Ошибка 2
make: *** [all] Ошибка 2

 

Изменено пользователем AlKov

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

А зачем его вообще пытаться собрать на 2.6.32? Это ж окаменелая кака, которой не место в роутерах.

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

А зачем его вообще пытаться собрать на 2.6.32? Это ж окаменелая кака, которой не место в роутерах.

А вот восхотелося так! :)

Ну а если серъёзно, то это так называемый "продакшен" на CentOS 6.7, довольно "свежеустановленный".

Который довольно неплохо освоен и вылизан. А yum update kernel не желает ставить 3.хх ядро..

Ставить "тройку" вручную нет никакого желания.. В своё время наигрался в эти игры до блевоты.. :(

На 7-м CentOS-е пробовал взлететь со "старыми настройками" - истратил кучу нервов, плюнул и вернулся к 6.7 (до этого всё неплохо жужжало на 5.5).

Вот такое я вот г... старого мамонта. ;)

 

P.S. Кстати...

Нахрена тогда было писать на "оф-сайте", что...

Требования:

 

Современный дистрибутив Linux

Ядро версии 2.6.25 или старше

cmake не младше версии 2.6

libcrypto-0.9.8 или старше (openssl-0.9.8)

libpcre

net-snmp-5.x (Для snmp)

liblua5.1 (для IPoE c DHCP option 82)

Не написали, я бы и не "вякал". ;)

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

AlKov

Хорош прикалываться, подключаете EPEL, ставите оттуда только ядро и всё прекрасно работает на нём

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

А yum update kernel не желает ставить 3.хх ядро..

За пиво дам несколько файлов, которые поставятся командой rpm -Uv *.rpm

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

AlKov

Хорош прикалываться, подключаете EPEL, ставите оттуда только ядро

Ну это я просто "скромно позабыл".. ;)

А вот в это -

и всё прекрасно работает на нём

дерзну не поверить, особенно после секса с CentOS 7.

Что конкретно, уже не могу вспомнить, но вроде как на нём тогда не взлетела сеть (Bonding+vlan).

То ли дрова на сетевые (Intel 82576) кривые были, то ли ещё что-то в ядре.

Возможно, на сегодня это уже не актуально на последних 3.хх, но "кошечки" для этих "исследований" у меня нет.

Поэтому, предпочитаю работать на проверенном, подпиленным всеми напильниками.

 

P.S. Кстати, после "напильника" по исходникам ядра и небольшого подпиливания в исходниках accel, последний всё же собрался на 6.32.

Но ещё не запускал, пока вкуриваю конфиги и способы привязки к конкретным реалиям.

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Коллеги, подскажите:

Есть 2 сервера с accel-ppp 1.10.2

Настроен pppoe+radius

Раз в 7-10 дней выпадают в панику. То один, то другой, так что железо отпадает.

Система :

# uname -a

Linux pppoe4 3.16.0-4-amd64 #1 SMP Debian 3.16.7-ckt25-2 (2016-04-08) x86_64 GNU/Linux

# cat /etc/debian_version

8.4

 

В sysctl.conf выставлено kernel.panic=5 - но в ребут по чему то не пошли ни один ни второй.

шейпер как настроен? у нас тоже валился, пока шейпер не перенастроили. Что в kern.log?

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

есть проблема

 

при переходе на новое ядра пробовал с 3.14.14 на 3.14.53, 4.4.19 поднимаются только pppoe сессии pptp нет

 

accel 1.10.3 модули загружены в логах

 

error: : pptp: read: Connection reset by peer

 

кто сталкивался куда копать?

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

кто сталкивался куда копать?

diff по pptp и gre mux (или как там он зовется), посмотреть чего накоммитили туда... или отписать в netdev.

 

как вариант - сразу бисекцию сделать, найти кривой коммит и отписаться в нетдев. быстре будет (там скорее всего потребуют провести git bisect).

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

кто сталкивался куда копать?

Ядро 4.4.16

accel-ppp 1.11.0

pptp сессии работают у меня.

Изменено пользователем dtcom

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Коллеги, подскажите:

Есть 2 сервера с accel-ppp 1.10.2

Настроен pppoe+radius

Раз в 7-10 дней выпадают в панику. То один, то другой, так что железо отпадает.

Система :

# uname -a

Linux pppoe4 3.16.0-4-amd64 #1 SMP Debian 3.16.7-ckt25-2 (2016-04-08) x86_64 GNU/Linux

# cat /etc/debian_version

8.4

 

В sysctl.conf выставлено kernel.panic=5 - но в ребут по чему то не пошли ни один ни второй.

Почти один в один как у меня тоже самое, только pptp+radius

Также установлен bird 1.6.0

Ядро 4.4.16.

accel-ppp 1.11.0

Впрочем accel-ppp 1.10.2 тоже стоял, такжe висло. И ядра были 4.4.13-15.

Раз в десять дней примерно намертво зависает система. В логах ничего подозрительного.

На другом железе пробовал тоже самое.

Единственно, что понял виснет только на этом участке сети.

Короче отличие только в месте установке и в наборе софта. То есть если установлен accel-ppp pptp+radius, +bird и стоит в конкретном месте, то в течение недели гарантированно зависнет.

Как отловить не пойму

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Ядро 4.4.16.

accel-ppp 1.11.0

 

Ловили уже, дампы ядра есть, по моему даже в этой ветке.

ppp работает только на ядрах 3.2. Видимо что-то несовместимое появилось в новых ядрах.

 

Вот что собралось с консоли. Если кто получил стабильную работу ppp на ядрах > 3.2 сообщите, пожалуйста.

 

 

 

36466.013424] INFO: rcu_sched self-detected stall on CPU[36466.017430] INFO: rcu_sched detected stalls on CPUs/tasks: { 2} (detected by 3,)

[36466.017433] sending NMI to all CPUs:

[36466.017435] NMI backtrace for cpu 2

[36466.017437] CPU: 2 PID: 0 Comm: swapper/2 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36466.017437] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013

[36466.017438] task: ffff88021328e000 ti: ffff88021329c000 task.ti: ffff88021329c000

[36466.017439] RIP: 0010:[<ffffffff8146ea55>] [<ffffffff8146ea55>] io_serial_in+0x15/0x20

[36466.017442] RSP: 0018:ffff88021ed03798 EFLAGS: 00000002

[36466.017443] RAX: 0000000000000c00 RBX: ffffffff81fc6740 RCX: 0000000000000000

[36466.017443] RDX: 00000000000003fd RSI: 00000000000003fd RDI: ffffffff81fc6740

[36466.017444] RBP: ffff88021ed03798 R08: ffffffff81d144e8 R09: 0000000000000001

[36466.017444] R10: 0000000000000000 R11: ffff88021ed0373e R12: 000000000000270e

[36466.017445] R13: 0000000000000020 R14: ffffffff81ebf979 R15: 0000000000000039

[36466.017445] FS: 0000000000000000(0000) GS:ffff88021ed00000(0000) knlGS:0000000000000000

[36466.017446] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033

[36466.017446] CR2: 00007f9dd812c800 CR3: 00000000359b0000 CR4: 00000000001407e0

[36466.017447] Stack:

[36466.017447] ffff88021ed037c0 ffffffff8146f5fb ffffffff81fc6740 0000000000000061

[36466.017449] ffffffff81fc6740 ffff88021ed037e0 ffffffff8146f7bc ffffffff81ebf970

[36466.017450] ffffffff8146f7a0 ffff88021ed03810 ffffffff8146a3ba 0000000000000000

[36466.017451] Call Trace:

[36466.017452] <IRQ> [<ffffffff8146f5fb>] wait_for_xmitr+0x3b/0xa0

[36466.017454] [<ffffffff8146f7bc>] serial8250_console_putchar+0x1c/0x30

[36466.017455] [<ffffffff8146f7a0>] ? serial8250_console_write+0x140/0x140

[36466.017457] [<ffffffff8146a3ba>] uart_console_write+0x3a/0x80

[36466.017459] [<ffffffff8146f70e>] serial8250_console_write+0xae/0x140

[36466.017460] [<ffffffff810bc823>] call_console_drivers.constprop.18+0x93/0xf0

[36466.017461] [<ffffffff810bd87e>] console_unlock+0x2ae/0x400

[36466.017463] [<ffffffff810bdc8e>] vprintk_emit+0x2be/0x530

[36466.017464] [<ffffffff81365540>] ? cpumask_next_and+0x30/0x50

[36466.017466] [<ffffffff8171da3e>] printk+0x67/0x69

[36466.017468] [<ffffffff810cb1de>] rcu_check_callbacks+0x34e/0x650

[36466.017470] [<ffffffff8109dfa2>] ? account_process_tick+0x62/0x1c0

[36466.017472] [<ffffffff810764e7>] update_process_times+0x47/0x70

[36466.017474] [<ffffffff810d66a5>] tick_sched_handle.isra.17+0x25/0x60

[36466.017476] [<ffffffff810d6721>] tick_sched_timer+0x41/0x60

[36466.017477] [<ffffffff8108e9e7>] __run_hrtimer+0x77/0x1d0

[36466.017480] [<ffffffff810d66e0>] ? tick_sched_handle.isra.17+0x60/0x60

[36466.017481] [<ffffffff8108f1af>] hrtimer_interrupt+0xef/0x230

[36466.017482] [<ffffffff81043727>] local_apic_timer_interrupt+0x37/0x60

[36466.017485] [<ffffffff8173700f>] smp_apic_timer_interrupt+0x3f/0x60

[36466.017488] [<ffffffff8173599d>] apic_timer_interrupt+0x6d/0x80

[36466.017492] [<ffffffffa0457c2a>] ? ____nf_conntrack_find+0x5a/0x160 [nf_conntrack]

[36466.017497] [<ffffffffa0457c01>] ? ____nf_conntrack_find+0x31/0x160 [nf_conntrack]

[36466.017500] [<ffffffffa04585f1>] __nf_conntrack_find_get+0x31/0x160 [nf_conntrack]

[36466.017503] [<ffffffffa0459489>] nf_conntrack_in+0x2a9/0xb60 [nf_conntrack]

[36466.017507] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40

[36466.017510] [<ffffffffa04862e2>] ipv4_conntrack_in+0x22/0x30 [nf_conntrack_ipv4]

[36466.017512] [<ffffffff8165732a>] nf_iterate+0x9a/0xb0

[36466.017514] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40

[36466.017515] [<ffffffff816573b4>] nf_hook_slow+0x74/0x130

[36466.017516] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40

[36466.017518] [<ffffffff8165e2c8>] ip_rcv+0x2f8/0x3d0

[36466.017519] [<ffffffff81627a96>] __netif_receive_skb_core+0x676/0x850

[36466.017521] [<ffffffff81627c88>] __netif_receive_skb+0x18/0x60

[36466.017522] [<ffffffff8162881e>] process_backlog+0xae/0x1a0

[36466.017523] [<ffffffff81628072>] net_rx_action+0x152/0x250

[36466.017524] [<ffffffff8106cccc>] __do_softirq+0xec/0x2c0

[36466.017526] [<ffffffff8106d215>] irq_exit+0x105/0x110

[36466.017528] [<ffffffff81736f66>] do_IRQ+0x56/0xc0

[36466.017529] [<ffffffff8172c56d>] common_interrupt+0x6d/0x6d

[36466.017531] <EOI> [<ffffffff815d5de2>] ? cpuidle_enter_state+0x52/0xc0

[36466.017534] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0

[36466.017535] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30

[36466.017537] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290

[36466.017539] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0

[36466.017541] Code: 48 89 e5 d3 e6 48 63 f6 48 03 77 10 8b 06 5d c3 66 0f 1f 44 00 00 0f 1f 44 00 00 0f b6 4f 61 55 48 89 e5 d3 e6 03 77 0

[36466.017554] NMI backtrace for cpu 3

[36466.017555] CPU: 3 PID: 0 Comm: swapper/3 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36466.017555] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013

[36466.017556] task: ffff8802132a8000 ti: ffff88021329e000 task.ti: ffff88021329e000

[36466.017557] RIP: 0010:[<ffffffff81374f83>] [<ffffffff81374f83>] __bitmap_andnot+0x13/0x50

[36466.017560] RSP: 0018:ffff88021ed83d80 EFLAGS: 00000002

[36466.017560] RAX: 0000000000000000 RBX: 0000000000000055 RCX: 0000000000000004

[36466.017561] RDX: ffff88021ec0ce20 RSI: ffff88021ed8ce00 RDI: ffff88021ed8ce00

[36466.017561] RBP: ffff88021ed83d80 R08: ffff88021ed8ce08 R09: ffffffff81edd49c

[36466.017562] R10: 00000000000231a8 R11: 0000000000040000 R12: ffff88021ed8ce00

[36466.017562] R13: 000000000000ce40 R14: ffff88021ec0ce20 R15: 0000000000080000

[36466.017563] FS: 0000000000000000(0000) GS:ffff88021ed80000(0000) knlGS:0000000000000000

[36466.017563] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033

[36466.017564] CR2: 00007f9de82b7f98 CR3: 0000000001c0e000 CR4: 00000000001407e0

[36466.017564] Stack:

[36466.017565] ffff88021ed83de0 ffffffff81049515 0000000000000086 000000021ed83df0

[36466.017566] 000000000000ce20 0000000000000003 0000000000000003 0000000000002710

[36466.017567] ffffffff81c4e1c0 ffffffff81d14520 ffffffff81c4e1c0 0000000000000003

[36466.017568] Call Trace:

[36466.017569] <IRQ> [<ffffffff81049515>] __x2apic_send_IPI_mask+0x155/0x180

[36466.017573] [<ffffffff8104955c>] x2apic_send_IPI_all+0x1c/0x20

[36466.017574] [<ffffffff81045310>] arch_trigger_all_cpu_backtrace+0x70/0xb0

[36466.017575] [<ffffffff810cb4c1>] rcu_check_callbacks+0x631/0x650

[36466.017577] [<ffffffff810764e7>] update_process_times+0x47/0x70

[36466.017578] [<ffffffff810d66a5>] tick_sched_handle.isra.17+0x25/0x60

[36466.017580] [<ffffffff810d6721>] tick_sched_timer+0x41/0x60

[36466.017581] [<ffffffff8108e9e7>] __run_hrtimer+0x77/0x1d0

[36466.017582] [<ffffffff810d66e0>] ? tick_sched_handle.isra.17+0x60/0x60

[36466.017583] [<ffffffff8108f1af>] hrtimer_interrupt+0xef/0x230

[36466.017585] [<ffffffff81043727>] local_apic_timer_interrupt+0x37/0x60

[36466.017587] [<ffffffff8173700f>] smp_apic_timer_interrupt+0x3f/0x60

[36466.017588] [<ffffffff8173599d>] apic_timer_interrupt+0x6d/0x80

[36466.017590] <EOI> [<ffffffff815d5de2>] ? cpuidle_enter_state+0x52/0xc0

[36466.017592] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0

[36466.017593] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30

[36466.017595] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290

[36466.017596] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0

[36466.017598] Code: 48 89 0c c7 48 83 c0 01 41 39 c0 7f eb 5d c3 66 0f 1f 84 00 00 00 00 00 48 63 c9 55 48 83 c1 3f 48 c1 e9 06 48 89 e5 8

[36466.017611] NMI backtrace for cpu 1

[36466.017613] CPU: 1 PID: 0 Comm: swapper/1 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36466.017613] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013

[36466.017614] task: ffff88021328c800 ti: ffff88021329a000 task.ti: ffff88021329a000

[36466.017615] RIP: 0010:[<ffffffff8109ef7e>] [<ffffffff8109ef7e>] update_cfs_rq_blocked_load+0xce/0x140

[36466.017617] RSP: 0018:ffff88021ec83c78 EFLAGS: 00000002

[36466.017618] RAX: 0000000000000001 RBX: ffff8800d752e068 RCX: 0000000000000000

[36466.017618] RDX: ffffffff81ebcc80 RSI: 0000000000000001 RDI: ffff88021ec93200

[36466.017618] RBP: ffff88021ec83c78 R08: 0000000000000000 R09: 0000000000000000

[36466.017619] R10: 0000000000000000 R11: 0000000000000005 R12: ffff88021ec93200

[36466.017619] R13: 0000000000000000 R14: 000000000000012f R15: 0000000000000000

[36466.017620] FS: 0000000000000000(0000) GS:ffff88021ec80000(0000) knlGS:0000000000000000

[36466.017620] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033

[36466.017621] CR2: 00007f9d94147a38 CR3: 0000000001c0e000 CR4: 00000000001407e0

[36466.017621] Stack:

[36466.017622] ffff88021ec83cc0 ffffffff810a547d 0000000000000000 0000000000000000

[36466.017623] ffff8800d752e068 ffff88021ec93200 ffff88021ec93180 0000000000000000

[36466.017624] 0000000000000001 ffff88021ec83d10 ffffffff810a5d9c ffff88021ec83cf8

[36466.017625] Call Trace:

[36466.017626] <IRQ> [<ffffffff810a547d>] enqueue_entity+0x2ed/0xbb0

[36466.017628] [<ffffffff810a5d9c>] enqueue_task_fair+0x5c/0x6c0

[36466.017630] [<ffffffff8109d7d5>] ? sched_clock_cpu+0xb5/0x100

[36466.017631] [<ffffffff8109527a>] enqueue_task+0x3a/0x60

[36466.017632] [<ffffffff810982e3>] activate_task+0x23/0x30

[36466.017634] [<ffffffff810985c3>] ttwu_do_activate.constprop.74+0x33/0x70

[36466.017636] [<ffffffff8109ab42>] try_to_wake_up+0x1d2/0x2c0

[36466.017637] [<ffffffff810a75d5>] ? load_balance+0x185/0x890

[36466.017639] [<ffffffff8109ac53>] wake_up_process+0x23/0x40

[36466.017640] [<ffffffff81081054>] wake_up_worker+0x24/0x30

[36466.017642] [<ffffffff81081afb>] insert_work+0x6b/0xb0

[36466.017644] [<ffffffff810a83f1>] ? trigger_load_balance+0x61/0x1e0

[36466.017645] [<ffffffff81081c6e>] __queue_work+0x12e/0x320

[36466.017646] [<ffffffff81081e60>] ? __queue_work+0x320/0x320

[36466.017648] [<ffffffff81081e78>] delayed_work_timer_fn+0x18/0x20

[36466.017649] [<ffffffff810744f6>] call_timer_fn+0x36/0x100

[36466.017650] [<ffffffff81081e60>] ? __queue_work+0x320/0x320

[36466.017651] [<ffffffff810753f5>] run_timer_softirq+0x155/0x2f0

[36466.017653] [<ffffffff8106cccc>] __do_softirq+0xec/0x2c0

[36466.017655] [<ffffffff8106d215>] irq_exit+0x105/0x110

[36466.017656] [<ffffffff81737015>] smp_apic_timer_interrupt+0x45/0x60

[36466.017657] [<ffffffff8173599d>] apic_timer_interrupt+0x6d/0x80

[36466.017659] <EOI> [<ffffffff815d5de2>] ? cpuidle_enter_state+0x52/0xc0

[36466.017661] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0

[36466.017662] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30

[36466.017664] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290

[36466.017665] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0

[36466.017667] Code: 29 c8 48 03 47 60 85 f6 75 19 49 89 c0 48 c1 e9 03 49 c1 f8 3f 4c 89 c6 48 31 c6 4c 29 c6 48 39 ce 76 0f f0 48 01 82 a

[36466.017680] NMI backtrace for cpu 0

[36466.017682] CPU: 0 PID: 0 Comm: swapper/0 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36466.017682] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013

[36466.017683] task: ffffffff81c15480 ti: ffffffff81c00000 task.ti: ffffffff81c00000

[36466.017683] RIP: 0010:[<ffffffff813e9b98>] [<ffffffff813e9b98>] intel_idle+0xd8/0x140

[36466.017686] RSP: 0018:ffffffff81c01e38 EFLAGS: 00000046

[36466.017686] RAX: 0000000000000020 RBX: 0000000000000008 RCX: 0000000000000001

[36466.017687] RDX: 0000000000000000 RSI: ffffffff81c93e80 RDI: 0000000000000000

[36466.017687] RBP: ffffffff81c01e60 R08: ffff88021ec10324 R09: 0000000000000018

[36466.017688] R10: 0000000000001f3f R11: 0000000000007c50 R12: 0000000000000004

[36466.017688] R13: 0000000000000020 R14: 0000000000000003 R15: ffffffff81c93ff8

[36466.017689] FS: 0000000000000000(0000) GS:ffff88021ec00000(0000) knlGS:0000000000000000

[36466.017689] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033

[36466.017690] CR2: 00007f905fef2000 CR3: 0000000001c0e000 CR4: 00000000001407f0

[36466.017690] Stack:

[36466.017690] 0000000081c01e60 ffff88021ec1a300 ffffffff81c93e80 000021232982dcbf

[36466.017692] 0000000000000004 ffffffff81c01e98 ffffffff815d5dd0 ffffffffffffffff

[36466.017693] ffff88021ec1a300 0000000000000004 0000000000000000 ffffffff81c93e80

[36466.017694] Call Trace:

[36466.017695] [<ffffffff815d5dd0>] cpuidle_enter_state+0x40/0xc0

[36466.017697] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0

[36466.017698] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30

[36466.017700] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290

[36466.017701] [<ffffffff81712297>] rest_init+0x77/0x80

[36466.017703] [<ffffffff81d34f70>] start_kernel+0x438/0x443

[36466.017705] [<ffffffff81d34941>] ? repair_env_string+0x5c/0x5c

[36466.017707] [<ffffffff81d34120>] ? early_idt_handler_array+0x120/0x120

[36466.017708] [<ffffffff81d345ee>] x86_64_start_reservations+0x2a/0x2c

[36466.017710] [<ffffffff81d34733>] x86_64_start_kernel+0x143/0x152

[36466.017711] Code: 48 89 d1 48 2d c8 1f 00 00 0f 01 c8 0f ae f0 65 48 8b 04 25 30 b8 00 00 48 8b 80 38 e0 ff ff a8 08 75 08 b1 01 4c 89 e

 

[36467.659354] { 2} (t=15413 jiffies g=5345479 c=5345478 q=0)

[36467.670241] sending NMI to all CPUs:

[36467.676306] NMI backtrace for cpu 2

[36467.682269] CPU: 2 PID: 0 Comm: swapper/2 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36467.693476] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013

[36467.705861] task: ffff88021328e000 ti: ffff88021329c000 task.ti: ffff88021329c000

[36467.715924] RIP: 0010:[<ffffffff813779bd>] [<ffffffff813779bd>] find_next_bit+0x3d/0xe0

[36467.726625] RSP: 0018:ffff88021ed038f8 EFLAGS: 00000006

[36467.734520] RAX: 0000000000000000 RBX: 0000000000000055 RCX: 0000000000000001

[36467.744254] RDX: 0000000000000001 RSI: 00000000000000c0 RDI: 0000000000000040

[36467.753979] RBP: ffff88021ed038f8 R08: ffff88021ed0ce08 R09: 0000000000000004

[36467.763706] R10: 00000000000000f0 R11: ffffc90008d59ff8 R12: ffff88021ed0ce00

[36467.773453] R13: 000000000000ce40 R14: ffff88021ec0ce20 R15: 0000000000080000

[36467.783189] FS: 0000000000000000(0000) GS:ffff88021ed00000(0000) knlGS:0000000000000000

[36467.793902] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033

[36467.802284] CR2: 00007f9dd812c800 CR3: 00000000359b0000 CR4: 00000000001407e0

[36467.812079] Stack:

[36467.816750] ffff88021ed03958 ffffffff81049466 0000000000000092 000000021ed03968

[36467.826923] 000000000000ce20 0000000000000002 0000000000000002 0000000000002710

[36467.837114] ffffffff81c4e1c0 ffffffff81d14520 ffffffff81c4e1c0 0000000000000002

[36467.847306] Call Trace:

[36467.852493] <IRQ>

[36467.854436] [<ffffffff81049466>] __x2apic_send_IPI_mask+0xa6/0x180

[36467.866381] [<ffffffff8104955c>] x2apic_send_IPI_all+0x1c/0x20

[36467.875067] [<ffffffff81045310>] arch_trigger_all_cpu_backtrace+0x70/0xb0

[36467.884724] [<ffffffff810cb28e>] rcu_check_callbacks+0x3fe/0x650

[36467.893610] [<ffffffff810764e7>] update_process_times+0x47/0x70

[36467.902418] [<ffffffff810d66a5>] tick_sched_handle.isra.17+0x25/0x60

[36467.911656] [<ffffffff810d6721>] tick_sched_timer+0x41/0x60

[36467.920107] [<ffffffff8108e9e7>] __run_hrtimer+0x77/0x1d0

[36467.928370] [<ffffffff810d66e0>] ? tick_sched_handle.isra.17+0x60/0x60

[36467.937756] [<ffffffff8108f1af>] hrtimer_interrupt+0xef/0x230

[36467.946361] [<ffffffff81043727>] local_apic_timer_interrupt+0x37/0x60

[36467.955673] [<ffffffff8173700f>] smp_apic_timer_interrupt+0x3f/0x60

[36467.964822] [<ffffffff8173599d>] apic_timer_interrupt+0x6d/0x80

[36467.973546] [<ffffffffa0457c2a>] ? ____nf_conntrack_find+0x5a/0x160 [nf_conntrack]

[36467.983867] [<ffffffffa0457c01>] ? ____nf_conntrack_find+0x31/0x160 [nf_conntrack]

[36467.994139] [<ffffffffa04585f1>] __nf_conntrack_find_get+0x31/0x160 [nf_conntrack]

[36468.004380] [<ffffffffa0459489>] nf_conntrack_in+0x2a9/0xb60 [nf_conntrack]

[36468.013974] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40

[36468.022332] [<ffffffffa04862e2>] ipv4_conntrack_in+0x22/0x30 [nf_conntrack_ipv4]

[36468.032353] [<ffffffff8165732a>] nf_iterate+0x9a/0xb0

[36468.040017] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40

[36468.048391] [<ffffffff816573b4>] nf_hook_slow+0x74/0x130

[36468.056324] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40

[36468.064698] [<ffffffff8165e2c8>] ip_rcv+0x2f8/0x3d0

[36468.072201] [<ffffffff81627a96>] __netif_receive_skb_core+0x676/0x850

[36468.081266] [<ffffffff81627c88>] __netif_receive_skb+0x18/0x60

[36468.089695] [<ffffffff8162881e>] process_backlog+0xae/0x1a0

[36468.097848] [<ffffffff81628072>] net_rx_action+0x152/0x250

[36468.105896] [<ffffffff8106cccc>] __do_softirq+0xec/0x2c0

[36468.113751] [<ffffffff8106d215>] irq_exit+0x105/0x110

[36468.121338] [<ffffffff81736f66>] do_IRQ+0x56/0xc0

[36468.128558] [<ffffffff8172c56d>] common_interrupt+0x6d/0x6d

[36468.136625] <EOI>

[36468.138569] [<ffffffff815d5de2>] ? cpuidle_enter_state+0x52/0xc0

[36468.149675] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0

[36468.157944] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30

[36468.165690] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290

[36468.173961] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0

[36468.182153] Code: d0 48 89 d1 48 c1 e8 06 4c 8d 04 c7 48 89 d7 48 83 e7 c0 48 29 fe 83 e1 3f 75 73 48 f7 c6 c0 ff ff ff 0f 84 9c 00 00 0

[36468.204670] NMI backtrace for cpu 0

[36468.204672] INFO: NMI handler (arch_trigger_all_cpu_backtrace_handler) took too long to run: 528.363 msecs

[36468.223098] CPU: 0 PID: 0 Comm: swapper/0 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36468.234519] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013

[36468.247027] task: ffffffff81c15480 ti: ffffffff81c00000 task.ti: ffffffff81c00000

[36468.257130] RIP: 0010:[<ffffffff813e9b98>] [<ffffffff813e9b98>] intel_idle+0xd8/0x140

[36468.267705] RSP: 0018:ffffffff81c01e38 EFLAGS: 00000046

[36468.275644] RAX: 0000000000000020 RBX: 0000000000000008 RCX: 0000000000000001

[36468.285447] RDX: 0000000000000000 RSI: ffffffff81c93e80 RDI: 0000000000000000

[36468.295215] RBP: ffffffff81c01e60 R08: ffff88021ec10328 R09: 0000000000000018

[36468.304943] R10: 0000000000005dac R11: 0000000000015752 R12: 0000000000000004

[36468.314627] R13: 0000000000000020 R14: 0000000000000003 R15: ffffffff81c93ff8

[36468.324285] FS: 0000000000000000(0000) GS:ffff88021ec00000(0000) knlGS:0000000000000000

[36468.334898] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033

[36468.343157] CR2: 00007f905fef2000 CR3: 0000000001c0e000 CR4: 00000000001407f0

[36468.352850] Stack:

[36468.357398] 0000000081c01e60 ffff88021ec1a300 ffffffff81c93e80 000021238bfa753d

[36468.367444] 0000000000000004 ffffffff81c01e98 ffffffff815d5dd0 ffffffffffffffff

[36468.377494] ffff88021ec1a300 0000000000000004 0000000000000000 ffffffff81c93e80

[36468.387548] Call Trace:

[36468.392560] [<ffffffff815d5dd0>] cpuidle_enter_state+0x40/0xc0

[36468.401067] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0

[36468.409454] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30

[36468.417293] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290

[36468.425655] [<ffffffff81712297>] rest_init+0x77/0x80

[36468.433216] [<ffffffff81d34f70>] start_kernel+0x438/0x443

[36468.441193] [<ffffffff81d34941>] ? repair_env_string+0x5c/0x5c

[36468.449615] [<ffffffff81d34120>] ? early_idt_handler_array+0x120/0x120

[36468.458728] [<ffffffff81d345ee>] x86_64_start_reservations+0x2a/0x2c

[36468.467671] [<ffffffff81d34733>] x86_64_start_kernel+0x143/0x152

[36468.476249] Code: 48 89 d1 48 2d c8 1f 00 00 0f 01 c8 0f ae f0 65 48 8b 04 25 30 b8 00 00 48 8b 80 38 e0 ff ff a8 08 75 08 b1 01 4c 89 e

[36468.498851] NMI backtrace for cpu 1

[36468.498853] INFO: NMI handler (arch_trigger_all_cpu_backtrace_handler) took too long to run: 822.513 msecs

[36468.517334] CPU: 1 PID: 0 Comm: swapper/1 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36468.528768] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013

[36468.541386] task: ffff88021328c800 ti: ffff88021329a000 task.ti: ffff88021329a000

[36468.551674] RIP: 0010:[<ffffffff813e9b98>] [<ffffffff813e9b98>] intel_idle+0xd8/0x140

[36468.562440] RSP: 0018:ffff88021329be28 EFLAGS: 00000046

[36468.570591] RAX: 0000000000000020 RBX: 0000000000000008 RCX: 0000000000000001

[36468.580573] RDX: 0000000000000000 RSI: ffffffff81c93e80 RDI: 0000000000000001

[36468.590546] RBP: ffff88021329be50 R08: ffff88021ec9030c R09: 0000000000000018

[36468.600506] R10: 0000000000001f2f R11: 0000000000009bd3 R12: 0000000000000004

[36468.610485] R13: 0000000000000020 R14: 0000000000000003 R15: ffffffff81c93ff8

[36468.620478] FS: 0000000000000000(0000) GS:ffff88021ec80000(0000) knlGS:0000000000000000

[36468.631428] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033

[36468.640017] CR2: 00007f9d94147a38 CR3: 0000000001c0e000 CR4: 00000000001407e0

[36468.650004] Stack:

[36468.654844] 000000011329be50 ffff88021ec9a300 ffffffff81c93e80 000021238c748a8b

[36468.665188] 0000000000000004 ffff88021329be88 ffffffff815d5dd0 ffff88021329bf38

[36468.675534] ffff88021ec9a300 0000000000000004 0000000000000001 ffffffff81c93e80

[36468.685891] Call Trace:

[36468.691235] [<ffffffff815d5dd0>] cpuidle_enter_state+0x40/0xc0

[36468.700079] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0

[36468.708845] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30

[36468.717081] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290

[36468.725848] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0

[36468.734521] Code: 48 89 d1 48 2d c8 1f 00 00 0f 01 c8 0f ae f0 65 48 8b 04 25 30 b8 00 00 48 8b 80 38 e0 ff ff a8 08 75 08 b1 01 4c 89 e

[36468.757554] NMI backtrace for cpu 3

[36468.757557] INFO: NMI handler (arch_trigger_all_cpu_backtrace_handler) took too long to run: 1081.216 msecs

[36468.777056] CPU: 3 PID: 0 Comm: swapper/3 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36468.788954] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013

[36468.802018] task: ffff8802132a8000 ti: ffff88021329e000 task.ti: ffff88021329e000

[36468.812762] RIP: 0010:[<ffffffff813e9b98>] [<ffffffff813e9b98>] intel_idle+0xd8/0x140

[36468.823983] RSP: 0018:ffff88021329fe28 EFLAGS: 00000046

[36468.832587] RAX: 0000000000000020 RBX: 0000000000000008 RCX: 0000000000000001

[36468.843040] RDX: 0000000000000000 RSI: ffffffff81c93e80 RDI: 0000000000000003

[36468.853399] RBP: ffff88021329fe50 R08: ffff88021ed9030c R09: 0000000000001f59

[36468.863675] R10: 00000000ffffffff R11: 0000000000007c83 R12: 0000000000000004

[36468.873922] R13: 0000000000000020 R14: 0000000000000003 R15: ffffffff81c93ff8

[36468.884134] FS: 0000000000000000(0000) GS:ffff88021ed80000(0000) knlGS:0000000000000000

[36468.895281] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033

[36468.904044] CR2: 00007f9de82b7f98 CR3: 0000000001c0e000 CR4: 00000000001407e0

[36468.914195] Stack:

[36468.919184] 000000031329fe50 ffff88021ed9a300 ffffffff81c93e80 000021238c747bc9

[36468.929664] 0000000000000004 ffff88021329fe88 ffffffff815d5dd0 ffff88021329ff38

[36468.940160] ffff88021ed9a300 0000000000000004 0000000000000003 ffffffff81c93e80

[36468.950674] Call Trace:

[36468.956157] [<ffffffff815d5dd0>] cpuidle_enter_state+0x40/0xc0

[36468.965151] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0

[36468.974035] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30

[36468.982375] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290

[36468.991227] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0

[36468.999967] Code: 48 89 d1 48 2d c8 1f 00 00 0f 01 c8 0f ae f0 65 48 8b 04 25 30 b8 00 00 48 8b 80 38 e0 ff ff a8 08 75 08 b1 01 4c 89 e

[36469.023008] INFO: NMI handler (arch_trigger_all_cpu_backtrace_handler) took too long to run: 1346.668 msecs

[36632.943125] INFO: task jbd2/dm-0-8:215 blocked for more than 120 seconds.

[36632.950258] Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36632.957202] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message.

[36632.965369] jbd2/dm-0-8 D ffff88021ec13180 0 215 2 0x00000000

[36632.972794] ffff88020dd5bbd8 0000000000000046 ffff88020e391800 ffff88020dd5bfd8

[36632.980593] 0000000000013180 0000000000013180 ffff88020e391800 ffff88021ec13a18

[36632.988391] ffff88021efd0140 0000000000000002 ffffffff811efd00 ffff88020dd5bc50

[36632.996193] Call Trace:

[36632.998991] [<ffffffff811efd00>] ? generic_block_bmap+0x50/0x50

[36633.005364] [<ffffffff817287bd>] io_schedule+0x9d/0x140

[36633.011032] [<ffffffff811efd0e>] sleep_on_buffer+0xe/0x20

[36633.016878] [<ffffffff81728c42>] __wait_on_bit+0x62/0x90

[36633.022638] [<ffffffff811efd00>] ? generic_block_bmap+0x50/0x50

[36633.028979] [<ffffffff81728ce7>] out_of_line_wait_on_bit+0x77/0x90

[36633.035560] [<ffffffff810ab3d0>] ? autoremove_wake_function+0x40/0x40

[36633.042385] [<ffffffff811f103a>] __wait_on_buffer+0x2a/0x30

[36633.048330] [<ffffffff8128c23d>] jbd2_journal_commit_transaction+0x185d/0x1ab0

[36633.055915] [<ffffffff810756ff>] ? try_to_del_timer_sync+0x4f/0x70

[36633.062448] [<ffffffff812905fd>] kjournald2+0xbd/0x250

[36633.067932] [<ffffffff810ab390>] ? prepare_to_wait_event+0x100/0x100

[36633.074643] [<ffffffff81290540>] ? commit_timeout+0x10/0x10

[36633.080562] [<ffffffff8108b7d2>] kthread+0xd2/0xf0

[36633.085702] [<ffffffff8108b700>] ? kthread_create_on_node+0x1c0/0x1c0

[36633.092488] [<ffffffff81734ba8>] ret_from_fork+0x58/0x90

[36633.098143] [<ffffffff8108b700>] ? kthread_create_on_node+0x1c0/0x1c0

[36633.104923] INFO: task accel-pppd:26283 blocked for more than 120 seconds.

[36633.112056] Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36633.118928] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message.

[36633.127010] accel-pppd D ffff88021ec93180 0 26283 1 0x00000000

[36633.134357] ffff8801fbb4fad0 0000000000000086 ffff8802112d8000 ffff8801fbb4ffd8

[36633.142078] 0000000000013180 0000000000013180 ffff8802112d8000 ffff8801fbb4fc08

[36633.149797] ffff8801fbb4fc10 7fffffffffffffff ffff8802112d8000 0000000000000001

[36633.157531] Call Trace:

[36633.160234] [<ffffffff81728499>] schedule+0x29/0x70

[36633.165449] [<ffffffff817276e9>] schedule_timeout+0x239/0x2d0

[36633.171541] [<ffffffff81728021>] ? __schedule+0x381/0x7d0

[36633.177315] [<ffffffff81728fb6>] wait_for_completion+0xa6/0x160

[36633.183572] [<ffffffff8109ac90>] ? wake_up_state+0x20/0x20

[36633.189399] [<ffffffff810c73f0>] ? rcu_is_watching+0x20/0x20

[36633.195391] [<ffffffff810f68cf>] __stop_cpus+0x4f/0x70

[36633.200847] [<ffffffff810c73f0>] ? rcu_is_watching+0x20/0x20

[36633.206822] [<ffffffff810f6c0a>] try_stop_cpus+0x3a/0x60

[36633.212447] [<ffffffff810c8c47>] synchronize_sched_expedited+0xd7/0x1c0

[36633.219372] [<ffffffff810c8d3e>] synchronize_rcu_expedited+0xe/0x10

[36633.225951] [<ffffffff816246dd>] synchronize_net+0x2d/0x40

[36633.231742] [<ffffffff81648ee5>] dev_deactivate_many+0x255/0x260

[36633.238068] [<ffffffff816234f6>] __dev_close_many+0x66/0xe0

[36633.243945] [<ffffffff816235bd>] __dev_close+0x4d/0x90

[36633.249389] [<ffffffff8162ae6d>] __dev_change_flags+0x9d/0x170

[36633.255532] [<ffffffff8162af69>] dev_change_flags+0x29/0x60

[36633.261404] [<ffffffff816946c3>] devinet_ioctl+0x693/0x790

[36633.267187] [<ffffffff8169569d>] inet_ioctl+0x6d/0xa0

[36633.272539] [<ffffffff8160be05>] sock_do_ioctl+0x25/0x50

[36633.278150] [<ffffffff8160c350>] sock_ioctl+0x1f0/0x2c0

[36633.283671] [<ffffffff811d16a0>] do_vfs_ioctl+0x2e0/0x4c0

[36633.289375] [<ffffffff81207580>] ? SyS_epoll_ctl+0xf0/0x9f0

[36633.295245] [<ffffffff811d1901>] SyS_ioctl+0x81/0xa0

[36633.300510] [<ffffffff81734c5d>] system_call_fastpath+0x1a/0x1f

[36633.306724] INFO: task accel-pppd:26334 blocked for more than 120 seconds.

[36633.313813] Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36633.320640] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message.

[36633.328681] accel-pppd D ffff88021ec93180 0 26334 1 0x00000000

[36633.335979] ffff880211a95af0 0000000000000086 ffff8802112eb000 ffff880211a95fd8

[36633.343662] 0000000000013180 0000000000013180 ffff8802112eb000 ffffffff81cdc520

[36633.351335] ffffffff81cdc524 ffff8802112eb000 00000000ffffffff ffffffff81cdc528

[36633.359012] Call Trace:

[36633.361648] [<ffffffff817289b9>] schedule_preempt_disabled+0x29/0x70

[36633.368285] [<ffffffff8172a825>] __mutex_lock_slowpath+0x135/0x1b0

[36633.374740] [<ffffffff8172a8bf>] mutex_lock+0x1f/0x2f

[36633.380075] [<ffffffff81636909>] rtnetlink_rcv+0x19/0x30

[36633.385668] [<ffffffff816545a5>] netlink_unicast+0xd5/0x1b0

[36633.391511] [<ffffffff8165498e>] netlink_sendmsg+0x30e/0x680

[36633.397445] [<ffffffff8160ea2b>] sock_sendmsg+0x8b/0xc0

[36633.402942] [<ffffffff8101bc79>] ? sched_clock+0x9/0x10

[36633.408440] [<ffffffff8114fb23>] ? unlock_page+0x23/0x30

[36633.414027] [<ffffffff811782ba>] ? do_wp_page+0x39a/0x7c0

[36633.419699] [<ffffffff8160e71e>] ? move_addr_to_kernel.part.14+0x1e/0x60

[36633.426680] [<ffffffff8160f551>] ? move_addr_to_kernel+0x21/0x30

[36633.432961] [<ffffffff8160ee39>] ___sys_sendmsg+0x389/0x3a0

[36633.438812] [<ffffffff81730234>] ? __do_page_fault+0x204/0x570

[36633.444915] [<ffffffff8108efd4>] ? hrtimer_start_range_ns+0x14/0x20

[36633.451456] [<ffffffff8160fc22>] __sys_sendmsg+0x42/0x80

[36633.457042] [<ffffffff8160fc72>] SyS_sendmsg+0x12/0x20

[36633.462455] [<ffffffff81734c5d>] system_call_fastpath+0x1a/0x1f

[36633.468644] INFO: task accel-pppd:26532 blocked for more than 120 seconds.

[36633.475707] Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36633.482505] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message.

[36633.490523] accel-pppd D ffff88021ec93180 0 26532 1 0x00000000

[36633.497805] ffff8800d430daf0 0000000000000086 ffff88020642e000 ffff8800d430dfd8

[36633.505460] 0000000000013180 0000000000013180 ffff88020642e000 ffffffff81cdc520

[36633.513125] ffffffff81cdc524 ffff88020642e000 00000000ffffffff ffffffff81cdc528

[36633.520778] Call Trace:

[36633.523410] [<ffffffff817289b9>] schedule_preempt_disabled+0x29/0x70

[36633.530032] [<ffffffff8172a825>] __mutex_lock_slowpath+0x135/0x1b0

[36633.536491] [<ffffffff8172a8bf>] mutex_lock+0x1f/0x2f

[36633.541814] [<ffffffff81636909>] rtnetlink_rcv+0x19/0x30

[36633.547401] [<ffffffff816545a5>] netlink_unicast+0xd5/0x1b0

[36633.553246] [<ffffffff8165498e>] netlink_sendmsg+0x30e/0x680

[36633.559177] [<ffffffff8160ea2b>] sock_sendmsg+0x8b/0xc0

[36633.564676] [<ffffffff8101bc79>] ? sched_clock+0x9/0x10

[36633.570178] [<ffffffff8160e71e>] ? move_addr_to_kernel.part.14+0x1e/0x60

[36633.577149] [<ffffffff8160f551>] ? move_addr_to_kernel+0x21/0x30

[36633.583429] [<ffffffff8160ee39>] ___sys_sendmsg+0x389/0x3a0

[36633.589282] [<ffffffff811a2695>] ? kmem_cache_free+0x1b5/0x1e0

[36633.595391] [<ffffffff8136de40>] ? timerqueue_add+0x60/0xb0

[36633.601237] [<ffffffff8108e505>] ? enqueue_hrtimer+0x25/0x80

[36633.607173] [<ffffffff8108edc2>] ? __hrtimer_start_range_ns+0x1a2/0x3a0

[36633.614056] [<ffffffff8108efd4>] ? hrtimer_start_range_ns+0x14/0x20

[36633.620599] [<ffffffff8160fc22>] __sys_sendmsg+0x42/0x80

[36633.626183] [<ffffffff8160fc72>] SyS_sendmsg+0x12/0x20

[36633.631594] [<ffffffff81734c5d>] system_call_fastpath+0x1a/0x1f

[36633.637788] INFO: task accel-pppd:26707 blocked for more than 120 seconds.

[36633.644853] Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36633.651649] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message.

[36633.659665] accel-pppd D ffff88021ed93180 0 26707 1 0x00000000

[36633.666951] ffff88020fc35af0 0000000000000086 ffff88020dc2c800 ffff88020fc35fd8

[36633.674602] 0000000000013180 0000000000013180 ffff88020dc2c800 ffffffff81cdc520

[36633.682270] ffffffff81cdc524 ffff88020dc2c800 00000000ffffffff ffffffff81cdc528

[36633.689929] Call Trace:

[36633.692567] [<ffffffff817289b9>] schedule_preempt_disabled+0x29/0x70

[36633.699199] [<ffffffff8172a825>] __mutex_lock_slowpath+0x135/0x1b0

[36633.705662] [<ffffffff8172a8bf>] mutex_lock+0x1f/0x2f

[36633.710995] [<ffffffff81636909>] rtnetlink_rcv+0x19/0x30

[36633.716584] [<ffffffff816545a5>] netlink_unicast+0xd5/0x1b0

[36633.722437] [<ffffffff8165498e>] netlink_sendmsg+0x30e/0x680

[36633.728384] [<ffffffff8160ea2b>] sock_sendmsg+0x8b/0xc0

[36633.733884] [<ffffffff8101bc79>] ? sched_clock+0x9/0x10

[36633.739382] [<ffffffff8114fb23>] ? unlock_page+0x23/0x30

[36633.744969] [<ffffffff811782ba>] ? do_wp_page+0x39a/0x7c0

[36633.750639] [<ffffffff8160e71e>] ? move_addr_to_kernel.part.14+0x1e/0x60

[36633.757615] [<ffffffff8160f551>] ? move_addr_to_kernel+0x21/0x30

[36633.763891] [<ffffffff8160ee39>] ___sys_sendmsg+0x389/0x3a0

[36633.769737] [<ffffffff81730234>] ? __do_page_fault+0x204/0x570

[36633.775847] [<ffffffff8108efd4>] ? hrtimer_start_range_ns+0x14/0x20

[36633.782386] [<ffffffff8160fc22>] __sys_sendmsg+0x42/0x80

[36633.787969] [<ffffffff8160fc72>] SyS_sendmsg+0x12/0x20

[36633.793383] [<ffffffff81734c5d>] system_call_fastpath+0x1a/0x1f

[36646.186352] INFO: rcu_sched self-detected stall on CPU[36646.190359] INFO: rcu_sched detected stalls on CPUs/tasks: { 2} (detected by 3,)

[36646.190361] sending NMI to all CPUs:

[36646.190363] NMI backtrace for cpu 2

[36646.190364] CPU: 2 PID: 0 Comm: swapper/2 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36646.190364] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013

[36646.190365] task: ffff88021328e000 ti: ffff88021329c000 task.ti: ffff88021329c000

[36646.190365] RIP: 0010:[<ffffffff8146ea55>] [<ffffffff8146ea55>] io_serial_in+0x15/0x20

[36646.190367] RSP: 0018:ffff88021ed03798 EFLAGS: 00000002

[36646.190368] RAX: 0000000000000c00 RBX: ffffffff81fc6740 RCX: 0000000000000000

[36646.190368] RDX: 00000000000003fd RSI: 00000000000003fd RDI: ffffffff81fc6740

[36646.190369] RBP: ffff88021ed03798 R08: ffffffff81d144e8 R09: 0000000000000000

[36646.190369] R10: 0000000000000000 R11: ffff88021ed0373e R12: 000000000000270b

[36646.190369] R13: 0000000000000020 R14: ffffffff81ebf979 R15: 0000000000000039

[36646.190370] FS: 0000000000000000(0000) GS:ffff88021ed00000(0000) knlGS:0000000000000000

[36646.190371] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033

[36646.190371] CR2: 00007f9dd812c800 CR3: 00000000359b0000 CR4: 00000000001407e0

[36646.190371] Stack:

[36646.190372] ffff88021ed037c0 ffffffff8146f5fb ffffffff81fc6740 0000000000000061

[36646.190373] ffffffff81fc6740 ffff88021ed037e0 ffffffff8146f7bc ffffffff81ebf970

[36646.190374] ffffffff8146f7a0 ffff88021ed03810 ffffffff8146a3ba 0000000000000000

[36646.190375] Call Trace:

[36646.190375] <IRQ> [<ffffffff8146f5fb>] wait_for_xmitr+0x3b/0xa0

[36646.190377] [<ffffffff8146f7bc>] serial8250_console_putchar+0x1c/0x30

[36646.190378] [<ffffffff8146f7a0>] ? serial8250_console_write+0x140/0x140

[36646.190379] [<ffffffff8146a3ba>] uart_console_write+0x3a/0x80

[36646.190381] [<ffffffff8146f70e>] serial8250_console_write+0xae/0x140

[36646.190382] [<ffffffff810bc823>] call_console_drivers.constprop.18+0x93/0xf0

[36646.190383] [<ffffffff810bd87e>] console_unlock+0x2ae/0x400

[36646.190384] [<ffffffff810bdc8e>] vprintk_emit+0x2be/0x530

[36646.190385] [<ffffffff81365540>] ? cpumask_next_and+0x30/0x50

[36646.190388] [<ffffffff8171da3e>] printk+0x67/0x69

[36646.190390] [<ffffffff810cb1de>] rcu_check_callbacks+0x34e/0x650

[36646.190391] [<ffffffff8109dfa2>] ? account_process_tick+0x62/0x1c0

[36646.190392] [<ffffffff810764e7>] update_process_times+0x47/0x70

[36646.190394] [<ffffffff810d66a5>] tick_sched_handle.isra.17+0x25/0x60

[36646.190396] [<ffffffff810d6721>] tick_sched_timer+0x41/0x60

[36646.190397] [<ffffffff8108e9e7>] __run_hrtimer+0x77/0x1d0

[36646.190398] [<ffffffff810d66e0>] ? tick_sched_handle.isra.17+0x60/0x60

[36646.190399] [<ffffffff8108f1af>] hrtimer_interrupt+0xef/0x230

[36646.190401] [<ffffffff81043727>] local_apic_timer_interrupt+0x37/0x60

[36646.190403] [<ffffffff8173700f>] smp_apic_timer_interrupt+0x3f/0x60

[36646.190405] [<ffffffff8173599d>] apic_timer_interrupt+0x6d/0x80

[36646.190408] [<ffffffffa0457c2a>] ? ____nf_conntrack_find+0x5a/0x160 [nf_conntrack]

[36646.190412] [<ffffffffa0457c01>] ? ____nf_conntrack_find+0x31/0x160 [nf_conntrack]

[36646.190414] [<ffffffffa04585f1>] __nf_conntrack_find_get+0x31/0x160 [nf_conntrack]

[36646.190417] [<ffffffffa0459489>] nf_conntrack_in+0x2a9/0xb60 [nf_conntrack]

[36646.190420] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40

[36646.190422] [<ffffffffa04862e2>] ipv4_conntrack_in+0x22/0x30 [nf_conntrack_ipv4]

[36646.190424] [<ffffffff8165732a>] nf_iterate+0x9a/0xb0

[36646.190425] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40

[36646.190427] [<ffffffff816573b4>] nf_hook_slow+0x74/0x130

[36646.190427] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40

[36646.190429] [<ffffffff8165e2c8>] ip_rcv+0x2f8/0x3d0

[36646.190430] [<ffffffff81627a96>] __netif_receive_skb_core+0x676/0x850

[36646.190432] [<ffffffff81627c88>] __netif_receive_skb+0x18/0x60

[36646.190432] [<ffffffff8162881e>] process_backlog+0xae/0x1a0

[36646.190433] [<ffffffff81628072>] net_rx_action+0x152/0x250

[36646.190434] [<ffffffff8106cccc>] __do_softirq+0xec/0x2c0

[36646.190436] [<ffffffff8106d215>] irq_exit+0x105/0x110

[36646.190438] [<ffffffff81736f66>] do_IRQ+0x56/0xc0

[36646.190439] [<ffffffff8172c56d>] common_interrupt+0x6d/0x6d

[36646.190441] <EOI> [<ffffffff815d5de2>] ? cpuidle_enter_state+0x52/0xc0

[36646.190443] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0

[36646.190444] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30

[36646.190446] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290

[36646.190447] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0

[36646.190449] Code: 48 89 e5 d3 e6 48 63 f6 48 03 77 10 8b 06 5d c3 66 0f 1f 44 00 00 0f 1f 44 00 00 0f b6 4f 61 55 48 89 e5 d3 e6 03 77 0

[36646.190462] NMI backtrace for cpu 3

[36646.190463] CPU: 3 PID: 0 Comm: swapper/3 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36646.190463] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013

[36646.190464] task: ffff8802132a8000 ti: ffff88021329e000 task.ti: ffff88021329e000

[36646.190464] RIP: 0010:[<ffffffff81374f83>] [<ffffffff81374f83>] __bitmap_andnot+0x13/0x50

[36646.190467] RSP: 0018:ffff88021ed83d80 EFLAGS: 00000002

[36646.190468] RAX: 0000000000000000 RBX: 0000000000000055 RCX: 0000000000000004

[36646.190468] RDX: ffff88021ec0ce20 RSI: ffff88021ed8ce00 RDI: ffff88021ed8ce00

[36646.190469] RBP: ffff88021ed83d80 R08: ffff88021ed8ce08 R09: ffffffff81ee7810

[36646.190469] R10: 0000000000018e34 R11: 0000000000040000 R12: ffff88021ed8ce00

[36646.190469] R13: 000000000000ce40 R14: ffff88021ec0ce20 R15: 0000000000080000

[36646.190470] FS: 0000000000000000(0000) GS:ffff88021ed80000(0000) knlGS:0000000000000000

[36646.190471] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033

[36646.190471] CR2: 00007f905fef2000 CR3: 0000000001c0e000 CR4: 00000000001407e0

[36646.190472] Stack:

[36646.190472] ffff88021ed83de0 ffffffff81049515 0000000000000086 000000021ed83df0

[36646.190473] 000000000000ce20 0000000000000003 0000000000000003 0000000000002710

[36646.190474] ffffffff81c4e1c0 ffffffff81d14520 ffffffff81c4e1c0 0000000000000003

[36646.190475] Call Trace:

[36646.190476] <IRQ> [<ffffffff81049515>] __x2apic_send_IPI_mask+0x155/0x180

[36646.190479] [<ffffffff8104955c>] x2apic_send_IPI_all+0x1c/0x20

[36646.190480] [<ffffffff81045310>] arch_trigger_all_cpu_backtrace+0x70/0xb0

[36646.190482] [<ffffffff810cb4c1>] rcu_check_callbacks+0x631/0x650

[36646.190483] [<ffffffff810764e7>] update_process_times+0x47/0x70

[36646.190484] [<ffffffff810d66a5>] tick_sched_handle.isra.17+0x25/0x60

[36646.190486] [<ffffffff810d6721>] tick_sched_timer+0x41/0x60

[36646.190487] [<ffffffff8108e9e7>] __run_hrtimer+0x77/0x1d0

[36646.190488] [<ffffffff810d66e0>] ? tick_sched_handle.isra.17+0x60/0x60

[36646.190489] [<ffffffff8108f1af>] hrtimer_interrupt+0xef/0x230

[36646.190491] [<ffffffff81043727>] local_apic_timer_interrupt+0x37/0x60

[36646.190493] [<ffffffff8173700f>] smp_apic_timer_interrupt+0x3f/0x60

[36646.190494] [<ffffffff8173599d>] apic_timer_interrupt+0x6d/0x80

[36646.190496] <EOI> [<ffffffff815d5de2>] ? cpuidle_enter_state+0x52/0xc0

[36646.190498] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0

[36646.190499] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30

[36646.190500] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290

[36646.190502] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0

[36646.190503] Code: 48 89 0c c7 48 83 c0 01 41 39 c0 7f eb 5d c3 66 0f 1f 84 00 00 00 00 00 48 63 c9 55 48 83 c1 3f 48 c1 e9 06 48 89 e5 8

[36646.190517] NMI backtrace for cpu 1

[36646.190518] CPU: 1 PID: 0 Comm: swapper/1 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36646.190518] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013

[36646.190519] task: ffff88021328c800 ti: ffff88021329a000 task.ti: ffff88021329a000

[36646.190520] RIP: 0010:[<ffffffff810cb70a>] [<ffffffff810cb70a>] rcu_sysidle_exit+0x3a/0x110

[36646.190522] RSP: 0018:ffff88021329beb8 EFLAGS: 00000046

[36646.190522] RAX: 0000000000000000 RBX: ffff88021ec8d640 RCX: 0000000000001f2e

[36646.190523] RDX: 7f00000000000000 RSI: 0000000000000000 RDI: ffff88021ec8d640

[36646.190523] RBP: ffff88021329bec0 R08: ffff88021ec9030c R09: 0000000000001fa8

[36646.190524] R10: 00000000ffffffff R11: 000000000000f976 R12: ffff88021329bfd8

[36646.190524] R13: ffffffff81d14500 R14: 0000000000000000 R15: ffff88021329bfd8

[36646.190525] FS: 0000000000000000(0000) GS:ffff88021ec80000(0000) knlGS:0000000000000000

[36646.190525] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033

[36646.190526] CR2: 00007f9d94147a38 CR3: 0000000001c0e000 CR4: 00000000001407e0

[36646.190526] Stack:

[36646.190527] 0000000000000202 ffff88021329bed8 ffffffff810cb819 ffff88021329bf38

[36646.190528] ffff88021329bf28 ffffffff810bf3bb ffff88021329bfd8 ffff88021329bfd8

[36646.190529] 38638f98b70fd246 ffff88021329bf38 0000000000000000 0000000000000000

[36646.190530] Call Trace:

[36646.190531] [<ffffffff810cb819>] rcu_idle_exit+0x39/0x50

[36646.190532] [<ffffffff810bf3bb>] cpu_startup_entry+0xdb/0x290

[36646.190533] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0

[36646.190535] Code: 48 8b 47 10 74 1b 48 83 c0 01 48 85 c0 48 89 47 10 0f 8e 8e 00 00 00 48 83 f8 01 74 21 5b 5d c3 90 48 ba 00 00 00 00 0

[36646.190549] NMI backtrace for cpu 0

[36646.190550] CPU: 0 PID: 0 Comm: swapper/0 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36646.190551] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013

[36646.190551] task: ffffffff81c15480 ti: ffffffff81c00000 task.ti: ffffffff81c00000

[36646.190552] RIP: 0010:[<ffffffff813e9b98>] [<ffffffff813e9b98>] intel_idle+0xd8/0x140

[36646.190554] RSP: 0018:ffffffff81c01e38 EFLAGS: 00000046

[36646.190555] RAX: 0000000000000020 RBX: 0000000000000008 RCX: 0000000000000001

[36646.190555] RDX: 0000000000000000 RSI: ffffffff81c93e80 RDI: 0000000000000000

[36646.190555] RBP: ffffffff81c01e60 R08: ffff88021ec10318 R09: 0000000000000018

[36646.190556] R10: 0000000000020398 R11: 0000000000037a5c R12: 0000000000000004

[36646.190556] R13: 0000000000000020 R14: 0000000000000003 R15: ffffffff81c93ff8

[36646.190557] FS: 0000000000000000(0000) GS:ffff88021ec00000(0000) knlGS:0000000000000000

[36646.190557] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033

[36646.190558] CR2: 00007ff448028108 CR3: 0000000001c0e000 CR4: 00000000001407f0

[36646.190558] Stack:

[36646.190559] 0000000081c01e60 ffff88021ec1a300 ffffffff81c93e80 0000214d0e886526

[36646.190560] 0000000000000004 ffffffff81c01e98 ffffffff815d5dd0 ffffffffffffffff

[36646.190561] ffff88021ec1a300 0000000000000004 0000000000000000 ffffffff81c93e80

[36646.190562] Call Trace:

[36646.190563] [<ffffffff815d5dd0>] cpuidle_enter_state+0x40/0xc0

[36646.190565] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0

[36646.190566] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30

[36646.190568] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290

[36646.190569] [<ffffffff81712297>] rest_init+0x77/0x80

[36646.190571] [<ffffffff81d34f70>] start_kernel+0x438/0x443

[36646.190573] [<ffffffff81d34941>] ? repair_env_string+0x5c/0x5c

[36646.190574] [<ffffffff81d34120>] ? early_idt_handler_array+0x120/0x120

[36646.190576] [<ffffffff81d345ee>] x86_64_start_reservations+0x2a/0x2c

[36646.190577] [<ffffffff81d34733>] x86_64_start_kernel+0x143/0x152

[36646.190578] Code: 48 89 d1 48 2d c8 1f 00 00 0f 01 c8 0f ae f0 65 48 8b 04 25 30 b8 00 00 48 8b 80 38 e0 ff ff a8 08 75 08 b1 01 4c 89 e

 

[36647.652991] { 2} (t=60373 jiffies g=5345479 c=5345478 q=0)

[36647.664759] sending NMI to all CPUs:

[36647.671285] NMI backtrace for cpu 2

[36647.677719] CPU: 2 PID: 0 Comm: swapper/2 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36647.689415] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013

[36647.702281] task: ffff88021328e000 ti: ffff88021329c000 task.ti: ffff88021329c000

[36647.712838] RIP: 0010:[<ffffffff813779bd>] [<ffffffff813779bd>] find_next_bit+0x3d/0xe0

[36647.724037] RSP: 0018:ffff88021ed038f8 EFLAGS: 00000006

[36647.732424] RAX: 0000000000000000 RBX: 0000000000000055 RCX: 0000000000000001

[36647.742665] RDX: 0000000000000001 RSI: 00000000000000c0 RDI: 0000000000000040

[36647.752886] RBP: ffff88021ed038f8 R08: ffff88021ed0ce08 R09: 0000000000000004

[36647.763123] R10: 00000000000000f0 R11: ffffc90008d59ff8 R12: ffff88021ed0ce00

[36647.773276] R13: 000000000000ce40 R14: ffff88021ec0ce20 R15: 0000000000080000

[36647.783343] FS: 0000000000000000(0000) GS:ffff88021ed00000(0000) knlGS:0000000000000000

[36647.794374] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033

[36647.803018] CR2: 00007f9dd812c800 CR3: 00000000359b0000 CR4: 00000000001407e0

[36647.813042] Stack:

[36647.817891] ffff88021ed03958 ffffffff81049466 0000000000000092 000000021ed03968

[36647.828220] 000000000000ce20 0000000000000002 0000000000000002 0000000000002710

[36647.838546] ffffffff81c4e1c0 ffffffff81d14520 ffffffff81c4e1c0 0000000000000002

[36647.848873] Call Trace:

[36647.854180] <IRQ>

[36647.856123] [<ffffffff81049466>] __x2apic_send_IPI_mask+0xa6/0x180

[36647.868303] [<ffffffff8104955c>] x2apic_send_IPI_all+0x1c/0x20

[36647.877084] [<ffffffff81045310>] arch_trigger_all_cpu_backtrace+0x70/0xb0

[36647.886816] [<ffffffff810cb28e>] rcu_check_callbacks+0x3fe/0x650

[36647.895764] [<ffffffff810764e7>] update_process_times+0x47/0x70

[36647.904605] [<ffffffff810d66a5>] tick_sched_handle.isra.17+0x25/0x60

[36647.913866] [<ffffffff810d6721>] tick_sched_timer+0x41/0x60

[36647.922337] [<ffffffff8108e9e7>] __run_hrtimer+0x77/0x1d0

[36647.930611] [<ffffffff810d66e0>] ? tick_sched_handle.isra.17+0x60/0x60

[36647.940009] [<ffffffff8108f1af>] hrtimer_interrupt+0xef/0x230

[36647.948624] [<ffffffff81043727>] local_apic_timer_interrupt+0x37/0x60

[36647.957944] [<ffffffff8173700f>] smp_apic_timer_interrupt+0x3f/0x60

[36647.967093] [<ffffffff8173599d>] apic_timer_interrupt+0x6d/0x80

[36647.975816] [<ffffffffa0457c2a>] ? ____nf_conntrack_find+0x5a/0x160 [nf_conntrack]

[36647.986136] [<ffffffffa0457c01>] ? ____nf_conntrack_find+0x31/0x160 [nf_conntrack]

[36647.996412] [<ffffffffa04585f1>] __nf_conntrack_find_get+0x31/0x160 [nf_conntrack]

[36648.006642] [<ffffffffa0459489>] nf_conntrack_in+0x2a9/0xb60 [nf_conntrack]

[36648.016241] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40

[36648.024598] [<ffffffffa04862e2>] ipv4_conntrack_in+0x22/0x30 [nf_conntrack_ipv4]

[36648.034620] [<ffffffff8165732a>] nf_iterate+0x9a/0xb0

[36648.042281] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40

[36648.050647] [<ffffffff816573b4>] nf_hook_slow+0x74/0x130

[36648.058583] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40

[36648.066955] [<ffffffff8165e2c8>] ip_rcv+0x2f8/0x3d0

[36648.074455] [<ffffffff81627a96>] __netif_receive_skb_core+0x676/0x850

[36648.083512] [<ffffffff81627c88>] __netif_receive_skb+0x18/0x60

[36648.091941] [<ffffffff8162881e>] process_backlog+0xae/0x1a0

[36648.100089] [<ffffffff81628072>] net_rx_action+0x152/0x250

[36648.108137] [<ffffffff8106cccc>] __do_softirq+0xec/0x2c0

[36648.115990] [<ffffffff8106d215>] irq_exit+0x105/0x110

[36648.123570] [<ffffffff81736f66>] do_IRQ+0x56/0xc0

[36648.130785] [<ffffffff8172c56d>] common_interrupt+0x6d/0x6d

[36648.138852] <EOI>

[36648.140796] [<ffffffff815d5de2>] ? cpuidle_enter_state+0x52/0xc0

[36648.151896] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0

[36648.160154] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30

[36648.167902] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290

[36648.176171] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0

[36648.184353] Code: d0 48 89 d1 48 c1 e8 06 4c 8d 04 c7 48 89 d7 48 83 e7 c0 48 29 fe 83 e1 3f 75 73 48 f7 c6 c0 ff ff ff 0f 84 9c 00 00 0

[36648.206858] NMI backtrace for cpu 0

[36648.212947] CPU: 0 PID: 0 Comm: swapper/0 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36648.224300] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013

[36648.236843] task: ffffffff81c15480 ti: ffffffff81c00000 task.ti: ffffffff81c00000

[36648.246986] RIP: 0010:[<ffffffff813e9b98>] [<ffffffff813e9b98>] intel_idle+0xd8/0x140

[36648.257518] RSP: 0018:ffffffff81c01e38 EFLAGS: 00000046

[36648.265409] RAX: 0000000000000020 RBX: 0000000000000008 RCX: 0000000000000001

[36648.275144] RDX: 0000000000000000 RSI: ffffffff81c93e80 RDI: 0000000000000000

[36648.284875] RBP: ffffffff81c01e60 R08: ffff88021ec1032c R09: 0000000000000018

[36648.294584] R10: 0000000000053026 R11: 0000000000073343 R12: 0000000000000004

[36648.304262] R13: 0000000000000020 R14: 0000000000000003 R15: ffffffff81c93ff8

[36648.313889] FS: 0000000000000000(0000) GS:ffff88021ec00000(0000) knlGS:0000000000000000

[36648.324471] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033

[36648.332685] CR2: 00007ff448028108 CR3: 0000000001c0e000 CR4: 00000000001407f0

[36648.342300] Stack:

[36648.346798] 0000000081c01e60 ffff88021ec1a300 ffffffff81c93e80 0000214d6acd01fd

[36648.356783] 0000000000000004 ffffffff81c01e98 ffffffff815d5dd0 ffffffffffffffff

[36648.366773] ffff88021ec1a300 0000000000000004 0000000000000000 ffffffff81c93e80

[36648.376781] Call Trace:

[36648.381752] [<ffffffff815d5dd0>] cpuidle_enter_state+0x40/0xc0

[36648.390215] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0

[36648.398569] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30

[36648.406379] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290

[36648.414686] [<ffffffff81712297>] rest_init+0x77/0x80

[36648.422206] [<ffffffff81d34f70>] start_kernel+0x438/0x443

[36648.430154] [<ffffffff81d34941>] ? repair_env_string+0x5c/0x5c

[36648.438507] [<ffffffff81d34120>] ? early_idt_handler_array+0x120/0x120

[36648.447576] [<ffffffff81d345ee>] x86_64_start_reservations+0x2a/0x2c

[36648.456464] [<ffffffff81d34733>] x86_64_start_kernel+0x143/0x152

[36648.464990] Code: 48 89 d1 48 2d c8 1f 00 00 0f 01 c8 0f ae f0 65 48 8b 04 25 30 b8 00 00 48 8b 80 38 e0 ff ff a8 08 75 08 b1 01 4c 89 e

[36648.487530] NMI backtrace for cpu 1

[36648.493590] CPU: 1 PID: 0 Comm: swapper/1 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36648.504912] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013

[36648.517416] task: ffff88021328c800 ti: ffff88021329a000 task.ti: ffff88021329a000

[36648.527599] RIP: 0010:[<ffffffff813e9b98>] [<ffffffff813e9b98>] intel_idle+0xd8/0x140

[36648.538267] RSP: 0018:ffff88021329be28 EFLAGS: 00000046

[36648.546308] RAX: 0000000000000020 RBX: 0000000000000008 RCX: 0000000000000001

[36648.556191] RDX: 0000000000000000 RSI: ffffffff81c93e80 RDI: 0000000000000001

[36648.566070] RBP: ffff88021329be50 R08: ffff88021ec9030c R09: 0000000000001fa4

[36648.575934] R10: 00000000ffffffff R11: 000000000000f975 R12: 0000000000000004

[36648.585808] R13: 0000000000000020 R14: 0000000000000003 R15: ffffffff81c93ff8

[36648.595670] FS: 0000000000000000(0000) GS:ffff88021ec80000(0000) knlGS:0000000000000000

[36648.606525] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033

[36648.615039] CR2: 00007f9d94147a38 CR3: 0000000001c0e000 CR4: 00000000001407e0

[36648.624957] Stack:

[36648.629729] 000000011329be50 ffff88021ec9a300 ffffffff81c93e80 0000214d6b841d8a

[36648.639986] 0000000000000004 ffff88021329be88 ffffffff815d5dd0 ffff88021329bf38

[36648.650234] ffff88021ec9a300 0000000000000004 0000000000000001 ffffffff81c93e80

[36648.660497] Call Trace:

[36648.665744] [<ffffffff815d5dd0>] cpuidle_enter_state+0x40/0xc0

[36648.674502] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0

[36648.683161] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30

[36648.691297] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290

[36648.699966] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0

[36648.708544] Code: 48 89 d1 48 2d c8 1f 00 00 0f 01 c8 0f ae f0 65 48 8b 04 25 30 b8 00 00 48 8b 80 38 e0 ff ff a8 08 75 08 b1 01 4c 89 e

[36648.731454] NMI backtrace for cpu 3

[36648.737932] CPU: 3 PID: 0 Comm: swapper/3 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36648.749683] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013

[36648.762625] task: ffff8802132a8000 ti: ffff88021329e000 task.ti: ffff88021329e000

[36648.773242] RIP: 0010:[<ffffffff813e9b98>] [<ffffffff813e9b98>] intel_idle+0xd8/0x140

[36648.784335] RSP: 0018:ffff88021329fe28 EFLAGS: 00000046

[36648.792797] RAX: 0000000000000020 RBX: 0000000000000008 RCX: 0000000000000001

[36648.803103] RDX: 0000000000000000 RSI: ffffffff81c93e80 RDI: 0000000000000003

[36648.813409] RBP: ffff88021329fe50 R08: ffff88021ed9030c R09: 0000000000001f58

[36648.823709] R10: 00000000ffffffff R11: 0000000000007c89 R12: 0000000000000004

[36648.834017] R13: 0000000000000020 R14: 0000000000000003 R15: ffffffff81c93ff8

[36648.844234] FS: 0000000000000000(0000) GS:ffff88021ed80000(0000) knlGS:0000000000000000

[36648.855350] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033

[36648.864104] CR2: 00007f905fef2000 CR3: 0000000001c0e000 CR4: 00000000001407e0

[36648.874225] Stack:

[36648.879171] 000000031329fe50 ffff88021ed9a300 ffffffff81c93e80 0000214d6bc1158a

[36648.889593] 0000000000000004 ffff88021329fe88 ffffffff815d5dd0 ffff88021329ff38

[36648.900014] ffff88021ed9a300 0000000000000004 0000000000000003 ffffffff81c93e80

[36648.910417] Call Trace:

[36648.915809] [<ffffffff815d5dd0>] cpuidle_enter_state+0x40/0xc0

[36648.924711] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0

[36648.933515] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30

[36648.941796] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290

[36648.950585] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0

[36648.959267] Code: 48 89 d1 48 2d c8 1f 00 00 0f 01 c8 0f ae f0 65 48 8b 04 25 30 b8 00 00 48 8b 80 38 e0 ff ff a8 08 75 08 b1 01 4c 89 e

[36753.897795] INFO: task jbd2/dm-0-8:215 blocked for more than 120 seconds.

[36753.904910] Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36753.911841] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message.

[36753.919994] jbd2/dm-0-8 D ffff88021ec13180 0 215 2 0x00000000

[36753.927401] ffff88020dd5bbd8 0000000000000046 ffff88020e391800 ffff88020dd5bfd8

[36753.935174] 0000000000013180 0000000000013180 ffff88020e391800 ffff88021ec13a18

[36753.942941] ffff88021efd0140 0000000000000002 ffffffff811efd00 ffff88020dd5bc50

[36753.950710] Call Trace:

[36753.953475] [<ffffffff811efd00>] ? generic_block_bmap+0x50/0x50

[36753.959810] [<ffffffff817287bd>] io_schedule+0x9d/0x140

[36753.965444] [<ffffffff811efd0e>] sleep_on_buffer+0xe/0x20

[36753.971259] [<ffffffff81728c42>] __wait_on_bit+0x62/0x90

[36753.976983] [<ffffffff811efd00>] ? generic_block_bmap+0x50/0x50

[36753.983312] [<ffffffff81728ce7>] out_of_line_wait_on_bit+0x77/0x90

[36753.989907] [<ffffffff810ab3d0>] ? autoremove_wake_function+0x40/0x40

[36753.996762] [<ffffffff811f103a>] __wait_on_buffer+0x2a/0x30

[36754.002719] [<ffffffff8128c23d>] jbd2_journal_commit_transaction+0x185d/0x1ab0

[36754.010312] [<ffffffff810756ff>] ? try_to_del_timer_sync+0x4f/0x70

[36754.016866] [<ffffffff812905fd>] kjournald2+0xbd/0x250

[36754.022360] [<ffffffff810ab390>] ? prepare_to_wait_event+0x100/0x100

[36754.029067] [<ffffffff81290540>] ? commit_timeout+0x10/0x10

[36754.034990] [<ffffffff8108b7d2>] kthread+0xd2/0xf0

[36754.040135] [<ffffffff8108b700>] ? kthread_create_on_node+0x1c0/0x1c0

[36754.046921] [<ffffffff81734ba8>] ret_from_fork+0x58/0x90

[36754.052576] [<ffffffff8108b700>] ? kthread_create_on_node+0x1c0/0x1c0

[36754.059367] INFO: task accel-pppd:26283 blocked for more than 120 seconds.

[36754.066494] Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36754.073370] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message.

[36754.081457] accel-pppd D ffff88021ec93180 0 26283 1 0x00000000

[36754.088792] ffff8801fbb4fad0 0000000000000086 ffff8802112d8000 ffff8801fbb4ffd8

[36754.096512] 0000000000013180 0000000000013180 ffff8802112d8000 ffff8801fbb4fc08

[36754.104242] ffff8801fbb4fc10 7fffffffffffffff ffff8802112d8000 0000000000000001

[36754.111954] Call Trace:

[36754.114658] [<ffffffff81728499>] schedule+0x29/0x70

[36754.119877] [<ffffffff817276e9>] schedule_timeout+0x239/0x2d0

[36754.125959] [<ffffffff81728021>] ? __schedule+0x381/0x7d0

[36754.131700] [<ffffffff81728fb6>] wait_for_completion+0xa6/0x160

[36754.137958] [<ffffffff8109ac90>] ? wake_up_state+0x20/0x20

[36754.143787] [<ffffffff810c73f0>] ? rcu_is_watching+0x20/0x20

[36754.149794] [<ffffffff810f68cf>] __stop_cpus+0x4f/0x70

[36754.155269] [<ffffffff810c73f0>] ? rcu_is_watching+0x20/0x20

[36754.161264] [<ffffffff810f6c0a>] try_stop_cpus+0x3a/0x60

[36754.166888] [<ffffffff810c8c47>] synchronize_sched_expedited+0xd7/0x1c0

[36754.173824] [<ffffffff810c8d3e>] synchronize_rcu_expedited+0xe/0x10

[36754.180397] [<ffffffff816246dd>] synchronize_net+0x2d/0x40

[36754.186199] [<ffffffff81648ee5>] dev_deactivate_many+0x255/0x260

[36754.192519] [<ffffffff816234f6>] __dev_close_many+0x66/0xe0

[36754.198400] [<ffffffff816235bd>] __dev_close+0x4d/0x90

[36754.203853] [<ffffffff8162ae6d>] __dev_change_flags+0x9d/0x170

[36754.209989] [<ffffffff8162af69>] dev_change_flags+0x29/0x60

[36754.215867] [<ffffffff816946c3>] devinet_ioctl+0x693/0x790

[36754.221661] [<ffffffff8169569d>] inet_ioctl+0x6d/0xa0

[36754.227012] [<ffffffff8160be05>] sock_do_ioctl+0x25/0x50

[36754.232620] [<ffffffff8160c350>] sock_ioctl+0x1f0/0x2c0

[36754.238155] [<ffffffff811d16a0>] do_vfs_ioctl+0x2e0/0x4c0

[36754.243855] [<ffffffff81207580>] ? SyS_epoll_ctl+0xf0/0x9f0

[36754.249727] [<ffffffff811d1901>] SyS_ioctl+0x81/0xa0

[36754.254992] [<ffffffff81734c5d>] system_call_fastpath+0x1a/0x1f

[36754.261217] INFO: task accel-pppd:26334 blocked for more than 120 seconds.

[36754.268305] Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36754.275129] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message.

[36754.283172] accel-pppd D ffff88021ec93180 0 26334 1 0x00000000

[36754.290471] ffff880211a95af0 0000000000000086 ffff8802112eb000 ffff880211a95fd8

[36754.298143] 0000000000013180 0000000000013180 ffff8802112eb000 ffffffff81cdc520

[36754.305813] ffffffff81cdc524 ffff8802112eb000 00000000ffffffff ffffffff81cdc528

[36754.313509] Call Trace:

[36754.316155] [<ffffffff817289b9>] schedule_preempt_disabled+0x29/0x70

[36754.322786] [<ffffffff8172a825>] __mutex_lock_slowpath+0x135/0x1b0

[36754.329246] [<ffffffff8172a8bf>] mutex_lock+0x1f/0x2f

[36754.334580] [<ffffffff81636909>] rtnetlink_rcv+0x19/0x30

[36754.340174] [<ffffffff816545a5>] netlink_unicast+0xd5/0x1b0

[36754.346016] [<ffffffff8165498e>] netlink_sendmsg+0x30e/0x680

[36754.351954] [<ffffffff8160ea2b>] sock_sendmsg+0x8b/0xc0

[36754.357453] [<ffffffff8101bc79>] ? sched_clock+0x9/0x10

[36754.362950] [<ffffffff8114fb23>] ? unlock_page+0x23/0x30

[36754.368536] [<ffffffff811782ba>] ? do_wp_page+0x39a/0x7c0

[36754.374206] [<ffffffff8160e71e>] ? move_addr_to_kernel.part.14+0x1e/0x60

[36754.381182] [<ffffffff8160f551>] ? move_addr_to_kernel+0x21/0x30

[36754.387462] [<ffffffff8160ee39>] ___sys_sendmsg+0x389/0x3a0

[36754.393310] [<ffffffff81730234>] ? __do_page_fault+0x204/0x570

[36754.399416] [<ffffffff8108efd4>] ? hrtimer_start_range_ns+0x14/0x20

[36754.405956] [<ffffffff8160fc22>] __sys_sendmsg+0x42/0x80

[36754.411543] [<ffffffff8160fc72>] SyS_sendmsg+0x12/0x20

[36754.416953] [<ffffffff81734c5d>] system_call_fastpath+0x1a/0x1f

[36754.423145] INFO: task accel-pppd:26532 blocked for more than 120 seconds.

[36754.430208] Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36754.437009] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message.

[36754.445029] accel-pppd D ffff88021ec93180 0 26532 1 0x00000000

[36754.452307] ffff8800d430daf0 0000000000000086 ffff88020642e000 ffff8800d430dfd8

[36754.459976] 0000000000013180 0000000000013180 ffff88020642e000 ffffffff81cdc520

[36754.467635] ffffffff81cdc524 ffff88020642e000 00000000ffffffff ffffffff81cdc528

[36754.475302] Call Trace:

[36754.477940] [<ffffffff817289b9>] schedule_preempt_disabled+0x29/0x70

[36754.484565] [<ffffffff8172a825>] __mutex_lock_slowpath+0x135/0x1b0

[36754.491023] [<ffffffff8172a8bf>] mutex_lock+0x1f/0x2f

[36754.496352] [<ffffffff81636909>] rtnetlink_rcv+0x19/0x30

[36754.501943] [<ffffffff816545a5>] netlink_unicast+0xd5/0x1b0

[36754.507793] [<ffffffff8165498e>] netlink_sendmsg+0x30e/0x680

[36754.513731] [<ffffffff8160ea2b>] sock_sendmsg+0x8b/0xc0

[36754.519226] [<ffffffff8101bc79>] ? sched_clock+0x9/0x10

[36754.524725] [<ffffffff8160e71e>] ? move_addr_to_kernel.part.14+0x1e/0x60

[36754.531703] [<ffffffff8160f551>] ? move_addr_to_kernel+0x21/0x30

[36754.537980] [<ffffffff8160ee39>] ___sys_sendmsg+0x389/0x3a0

[36754.543828] [<ffffffff811a2695>] ? kmem_cache_free+0x1b5/0x1e0

[36754.549938] [<ffffffff8136de40>] ? timerqueue_add+0x60/0xb0

[36754.555789] [<ffffffff8108e505>] ? enqueue_hrtimer+0x25/0x80

[36754.561721] [<ffffffff8108edc2>] ? __hrtimer_start_range_ns+0x1a2/0x3a0

[36754.568610] [<ffffffff8108efd4>] ? hrtimer_start_range_ns+0x14/0x20

[36754.575149] [<ffffffff8160fc22>] __sys_sendmsg+0x42/0x80

[36754.580737] [<ffffffff8160fc72>] SyS_sendmsg+0x12/0x20

[36754.586150] [<ffffffff81734c5d>] system_call_fastpath+0x1a/0x1f

[36754.592336] INFO: task accel-pppd:26707 blocked for more than 120 seconds.

[36754.599391] Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36754.606192] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message.

[36754.614219] accel-pppd D ffff88021ed93180 0 26707 1 0x00000000

[36754.621494] ffff88020fc35af0 0000000000000086 ffff88020dc2c800 ffff88020fc35fd8

[36754.629152] 0000000000013180 0000000000013180 ffff88020dc2c800 ffffffff81cdc520

[36754.636802] ffffffff81cdc524 ffff88020dc2c800 00000000ffffffff ffffffff81cdc528

[36754.644464] Call Trace:

[36754.647101] [<ffffffff817289b9>] schedule_preempt_disabled+0x29/0x70

[36754.653734] [<ffffffff8172a825>] __mutex_lock_slowpath+0x135/0x1b0

[36754.660195] [<ffffffff8172a8bf>] mutex_lock+0x1f/0x2f

[36754.665538] [<ffffffff81636909>] rtnetlink_rcv+0x19/0x30

[36754.671131] [<ffffffff816545a5>] netlink_unicast+0xd5/0x1b0

[36754.676986] [<ffffffff8165498e>] netlink_sendmsg+0x30e/0x680

[36754.682930] [<ffffffff8160ea2b>] sock_sendmsg+0x8b/0xc0

[36754.688437] [<ffffffff8101bc79>] ? sched_clock+0x9/0x10

[36754.693944] [<ffffffff8114fb23>] ? unlock_page+0x23/0x30

[36754.699537] [<ffffffff811782ba>] ? do_wp_page+0x39a/0x7c0

[36754.705208] [<ffffffff8160e71e>] ? move_addr_to_kernel.part.14+0x1e/0x60

[36754.712181] [<ffffffff8160f551>] ? move_addr_to_kernel+0x21/0x30

[36754.718462] [<ffffffff8160ee39>] ___sys_sendmsg+0x389/0x3a0

[36754.724316] [<ffffffff81730234>] ? __do_page_fault+0x204/0x570

[36754.730423] [<ffffffff8108efd4>] ? hrtimer_start_range_ns+0x14/0x20

[36754.736963] [<ffffffff8160fc22>] __sys_sendmsg+0x42/0x80

[36754.742547] [<ffffffff8160fc72>] SyS_sendmsg+0x12/0x20

[36754.747960] [<ffffffff81734c5d>] system_call_fastpath+0x1a/0x1f

[36826.359280] INFO: rcu_sched self-detected stall on CPU[36826.363287] INFO: rcu_sched detected stalls on CPUs/tasks: { 2} (detected by 3,)

[36826.363290] sending NMI to all CPUs:

[36826.363292] NMI backtrace for cpu 3

[36826.363293] CPU: 3 PID: 0 Comm: swapper/3 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36826.363293] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013

[36826.363294] task: ffff8802132a8000 ti: ffff88021329e000 task.ti: ffff88021329e000

[36826.363295] RIP: 0010:[<ffffffff81374f83>] [<ffffffff81374f83>] __bitmap_andnot+0x13/0x50

[36826.363298] RSP: 0018:ffff88021ed83d80 EFLAGS: 00000002

[36826.363298] RAX: 0000000000000000 RBX: 0000000000000055 RCX: 0000000000000004

[36826.363298] RDX: ffff88021ec0ce20 RSI: ffff88021ed8ce00 RDI: ffff88021ed8ce00

[36826.363299] RBP: ffff88021ed83d80 R08: ffff88021ed8ce08 R09: ffffffff81ef11d8

[36826.363299] R10: 000000000000f46c R11: 0000000000040000 R12: ffff88021ed8ce00

[36826.363300] R13: 000000000000ce40 R14: ffff88021ec0ce20 R15: 0000000000080000

[36826.363301] FS: 0000000000000000(0000) GS:ffff88021ed80000(0000) knlGS:0000000000000000

[36826.363301] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033

[36826.363301] CR2: 00007f905fef2000 CR3: 0000000001c0e000 CR4: 00000000001407e0

[36826.363302] Stack:

[36826.363302] ffff88021ed83de0 ffffffff81049515 0000000000000086 000000021ed83df0

[36826.363304] 000000000000ce20 0000000000000003 0000000000000003 0000000000002710

[36826.363305] ffffffff81c4e1c0 ffffffff81d14520 ffffffff81c4e1c0 0000000000000003

[36826.363306] Call Trace:

[36826.363306] <IRQ> [<ffffffff81049515>] __x2apic_send_IPI_mask+0x155/0x180

[36826.363309] [<ffffffff8104955c>] x2apic_send_IPI_all+0x1c/0x20

[36826.363311] [<ffffffff81045310>] arch_trigger_all_cpu_backtrace+0x70/0xb0

[36826.363312] [<ffffffff810cb4c1>] rcu_check_callbacks+0x631/0x650

[36826.363313] [<ffffffff810764e7>] update_process_times+0x47/0x70

[36826.363315] [<ffffffff810d66a5>] tick_sched_handle.isra.17+0x25/0x60

[36826.363316] [<ffffffff810d6721>] tick_sched_timer+0x41/0x60

[36826.363317] [<ffffffff8108e9e7>] __run_hrtimer+0x77/0x1d0

[36826.363319] [<ffffffff810d66e0>] ? tick_sched_handle.isra.17+0x60/0x60

[36826.363320] [<ffffffff8108f1af>] hrtimer_interrupt+0xef/0x230

[36826.363322] [<ffffffff81043727>] local_apic_timer_interrupt+0x37/0x60

[36826.363323] [<ffffffff8173700f>] smp_apic_timer_interrupt+0x3f/0x60

[36826.363325] [<ffffffff8173599d>] apic_timer_interrupt+0x6d/0x80

[36826.363327] <EOI> [<ffffffff815d5de2>] ? cpuidle_enter_state+0x52/0xc0

[36826.363329] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0

[36826.363330] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30

[36826.363332] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290

[36826.363333] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0

[36826.363335] Code: 48 89 0c c7 48 83 c0 01 41 39 c0 7f eb 5d c3 66 0f 1f 84 00 00 00 00 00 48 63 c9 55 48 83 c1 3f 48 c1 e9 06 48 89 e5 8

[36826.363347] NMI backtrace for cpu 2

[36826.363348] CPU: 2 PID: 0 Comm: swapper/2 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36826.363349] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013

[36826.363349] task: ffff88021328e000 ti: ffff88021329c000 task.ti: ffff88021329c000

[36826.363350] RIP: 0010:[<ffffffff8146ea55>] [<ffffffff8146ea55>] io_serial_in+0x15/0x20

[36826.363352] RSP: 0018:ffff88021ed03798 EFLAGS: 00000002

[36826.363352] RAX: 0000000000000c00 RBX: ffffffff81fc6740 RCX: 0000000000000000

[36826.363352] RDX: 00000000000003fd RSI: 00000000000003fd RDI: ffffffff81fc6740

[36826.363353] RBP: ffff88021ed03798 R08: ffffffff81d144e8 R09: 0000000000000000

[36826.363353] R10: 0000000000000000 R11: ffff88021ed0373e R12: 000000000000270c

[36826.363354] R13: 0000000000000020 R14: ffffffff81ebf979 R15: 0000000000000039

[36826.363354] FS: 0000000000000000(0000) GS:ffff88021ed00000(0000) knlGS:0000000000000000

[36826.363355] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033

[36826.363355] CR2: 00007f9dd812c800 CR3: 00000000359b0000 CR4: 00000000001407e0

[36826.363355] Stack:

[36826.363356] ffff88021ed037c0 ffffffff8146f5fb ffffffff81fc6740 0000000000000061

[36826.363357] ffffffff81fc6740 ffff88021ed037e0 ffffffff8146f7bc ffffffff81ebf970

[36826.363358] ffffffff8146f7a0 ffff88021ed03810 ffffffff8146a3ba 0000000000000000

[36826.363359] Call Trace:

[36826.363359] <IRQ> [<ffffffff8146f5fb>] wait_for_xmitr+0x3b/0xa0

[36826.363361] [<ffffffff8146f7bc>] serial8250_console_putchar+0x1c/0x30

[36826.363362] [<ffffffff8146f7a0>] ? serial8250_console_write+0x140/0x140

[36826.363363] [<ffffffff8146a3ba>] uart_console_write+0x3a/0x80

[36826.363365] [<ffffffff8146f70e>] serial8250_console_write+0xae/0x140

[36826.363366] [<ffffffff810bc823>] call_console_drivers.constprop.18+0x93/0xf0

[36826.363367] [<ffffffff810bd87e>] console_unlock+0x2ae/0x400

[36826.363368] [<ffffffff810bdc8e>] vprintk_emit+0x2be/0x530

[36826.363369] [<ffffffff8171da3e>] printk+0x67/0x69

[36826.363371] [<ffffffff810cb1de>] rcu_check_callbacks+0x34e/0x650

[36826.363373] [<ffffffff8109dfa2>] ? account_process_tick+0x62/0x1c0

[36826.363374] [<ffffffff810764e7>] update_process_times+0x47/0x70

[36826.363375] [<ffffffff810d66a5>] tick_sched_handle.isra.17+0x25/0x60

[36826.363376] [<ffffffff810d6721>] tick_sched_timer+0x41/0x60

[36826.363377] [<ffffffff8108e9e7>] __run_hrtimer+0x77/0x1d0

[36826.363379] [<ffffffff810d66e0>] ? tick_sched_handle.isra.17+0x60/0x60

[36826.363380] [<ffffffff8108f1af>] hrtimer_interrupt+0xef/0x230

[36826.363381] [<ffffffff81043727>] local_apic_timer_interrupt+0x37/0x60

[36826.363383] [<ffffffff8173700f>] smp_apic_timer_interrupt+0x3f/0x60

[36826.363385] [<ffffffff8173599d>] apic_timer_interrupt+0x6d/0x80

[36826.363387] [<ffffffffa0457c2a>] ? ____nf_conntrack_find+0x5a/0x160 [nf_conntrack]

[36826.363390] [<ffffffffa0457c01>] ? ____nf_conntrack_find+0x31/0x160 [nf_conntrack]

[36826.363393] [<ffffffffa04585f1>] __nf_conntrack_find_get+0x31/0x160 [nf_conntrack]

[36826.363396] [<ffffffffa0459489>] nf_conntrack_in+0x2a9/0xb60 [nf_conntrack]

[36826.363399] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40

[36826.363400] [<ffffffffa04862e2>] ipv4_conntrack_in+0x22/0x30 [nf_conntrack_ipv4]

[36826.363402] [<ffffffff8165732a>] nf_iterate+0x9a/0xb0

[36826.363403] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40

[36826.363404] [<ffffffff816573b4>] nf_hook_slow+0x74/0x130

[36826.363405] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40

[36826.363407] [<ffffffff8165e2c8>] ip_rcv+0x2f8/0x3d0

[36826.363408] [<ffffffff81627a96>] __netif_receive_skb_core+0x676/0x850

[36826.363409] [<ffffffff81627c88>] __netif_receive_skb+0x18/0x60

[36826.363410] [<ffffffff8162881e>] process_backlog+0xae/0x1a0

[36826.363411] [<ffffffff81628072>] net_rx_action+0x152/0x250

[36826.363412] [<ffffffff8106cccc>] __do_softirq+0xec/0x2c0

[36826.363414] [<ffffffff8106d215>] irq_exit+0x105/0x110

[36826.363415] [<ffffffff81736f66>] do_IRQ+0x56/0xc0

[36826.363417] [<ffffffff8172c56d>] common_interrupt+0x6d/0x6d

[36826.363418] <EOI> [<ffffffff815d5de2>] ? cpuidle_enter_state+0x52/0xc0

[36826.363420] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0

[36826.363421] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30

[36826.363423] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290

[36826.363424] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0

[36826.363425] Code: 48 89 e5 d3 e6 48 63 f6 48 03 77 10 8b 06 5d c3 66 0f 1f 44 00 00 0f 1f 44 00 00 0f b6 4f 61 55 48 89 e5 d3 e6 03 77 0

[36826.363439] NMI backtrace for cpu 0

[36826.363440] CPU: 0 PID: 0 Comm: swapper/0 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36826.363441] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013

[36826.363441] task: ffffffff81c15480 ti: ffffffff81c00000 task.ti: ffffffff81c00000

[36826.363442] RIP: 0010:[<ffffffff813e9b98>] [<ffffffff813e9b98>] intel_idle+0xd8/0x140

[36826.363444] RSP: 0018:ffffffff81c01e38 EFLAGS: 00000046

[36826.363445] RAX: 0000000000000020 RBX: 0000000000000008 RCX: 0000000000000001

[36826.363445] RDX: 0000000000000000 RSI: ffffffff81c93e80 RDI: 0000000000000000

[36826.363445] RBP: ffffffff81c01e60 R08: ffff88021ec10328 R09: 0000000000000018

[36826.363446] R10: 0000000000021d23 R11: 000000000004d794 R12: 0000000000000004

[36826.363446] R13: 0000000000000020 R14: 0000000000000003 R15: ffffffff81c93ff8

[36826.363447] FS: 0000000000000000(0000) GS:ffff88021ec00000(0000) knlGS:0000000000000000

[36826.363447] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033

[36826.363448] CR2: 00007f905fef2000 CR3: 0000000001c0e000 CR4: 00000000001407f0

[36826.363448] Stack:

[36826.363449] 0000000081c01e60 ffff88021ec1a300 ffffffff81c93e80 00002176f7216ab3

[36826.363450] 0000000000000004 ffffffff81c01e98 ffffffff815d5dd0 ffffffffffffffff

[36826.363451] ffff88021ec1a300 0000000000000004 0000000000000000 ffffffff81c93e80

[36826.363452] Call Trace:

[36826.363453] [<ffffffff815d5dd0>] cpuidle_enter_state+0x40/0xc0

[36826.363455] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0

[36826.363456] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30

[36826.363458] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290

[36826.363459] [<ffffffff81712297>] rest_init+0x77/0x80

[36826.363460] [<ffffffff81d34f70>] start_kernel+0x438/0x443

[36826.363462] [<ffffffff81d34941>] ? repair_env_string+0x5c/0x5c

[36826.363464] [<ffffffff81d34120>] ? early_idt_handler_array+0x120/0x120

[36826.363465] [<ffffffff81d345ee>] x86_64_start_reservations+0x2a/0x2c

[36826.363466] [<ffffffff81d34733>] x86_64_start_kernel+0x143/0x152

[36826.363468] Code: 48 89 d1 48 2d c8 1f 00 00 0f 01 c8 0f ae f0 65 48 8b 04 25 30 b8 00 00 48 8b 80 38 e0 ff ff a8 08 75 08 b1 01 4c 89 e

[36826.363481] NMI backtrace for cpu 1

[36826.363483] CPU: 1 PID: 0 Comm: swapper/1 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36826.363483] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013

[36826.363484] task: ffff88021328c800 ti: ffff88021329a000 task.ti: ffff88021329a000

[36826.363485] RIP: 0010:[<ffffffff813e9b98>] [<ffffffff813e9b98>] intel_idle+0xd8/0x140

[36826.363486] RSP: 0018:ffff88021329be28 EFLAGS: 00000046

[36826.363487] RAX: 0000000000000020 RBX: 0000000000000008 RCX: 0000000000000001

[36826.363487] RDX: 0000000000000000 RSI: ffffffff81c93e80 RDI: 0000000000000001

[36826.363488] RBP: ffff88021329be50 R08: ffff88021ec9030c R09: 0000000000001fa8

[36826.363488] R10: 00000000ffffffff R11: 000000000000f973 R12: 0000000000000004

[36826.363489] R13: 0000000000000020 R14: 0000000000000003 R15: ffffffff81c93ff8

[36826.363489] FS: 0000000000000000(0000) GS:ffff88021ec80000(0000) knlGS:0000000000000000

[36826.363490] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033

[36826.363490] CR2: 000000000060a3c0 CR3: 0000000001c0e000 CR4: 00000000001407e0

[36826.363491] Stack:

[36826.363491] 000000011329be50 ffff88021ec9a300 ffffffff81c93e80 00002176fd9156e2

[36826.363492] 0000000000000004 ffff88021329be88 ffffffff815d5dd0 ffff88021329bf38

[36826.363494] ffff88021ec9a300 0000000000000004 0000000000000001 ffffffff81c93e80

[36826.363495] Call Trace:

[36826.363495] [<ffffffff815d5dd0>] cpuidle_enter_state+0x40/0xc0

[36826.363497] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0

[36826.363499] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30

[36826.363500] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290

[36826.363501] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0

[36826.363503] Code: 48 89 d1 48 2d c8 1f 00 00 0f 01 c8 0f ae f0 65 48 8b 04 25 30 b8 00 00 48 8b 80 38 e0 ff ff a8 08 75 08 b1 01 4c 89 e

 

[36827.829409] { 2} (t=105379 jiffies g=5345479 c=5345478 q=0)

[36827.841101] sending NMI to all CPUs:

[36827.847549] NMI backtrace for cpu 2

[36827.853919] CPU: 2 PID: 0 Comm: swapper/2 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36827.865558] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013

[36827.878362] task: ffff88021328e000 ti: ffff88021329c000 task.ti: ffff88021329c000

[36827.888833] RIP: 0010:[<ffffffff81049520>] [<ffffffff81049520>] __x2apic_send_IPI_mask+0x160/0x180

[36827.900930] RSP: 0018:ffff88021ed03908 EFLAGS: 00000092

[36827.909287] RAX: 0000000000000100 RBX: 0000000000000055 RCX: 0000000000000001

[36827.919489] RDX: ffff88021ed0ce20 RSI: 0000000000000000 RDI: 0000000000000092

[36827.929598] RBP: ffff88021ed03958 R08: ffff88021ed0ce08 R09: 0000000000000004

[36827.939627] R10: 00000000000000f0 R11: ffffc90008d59ff8 R12: ffff88021ed0ce00

[36827.949638] R13: 000000000000ce40 R14: ffff88021ec0ce20 R15: 0000000000080000

[36827.959607] FS: 0000000000000000(0000) GS:ffff88021ed00000(0000) knlGS:0000000000000000

[36827.970519] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033

[36827.979059] CR2: 00007f9dd812c800 CR3: 00000000359b0000 CR4: 00000000001407e0

[36827.989004] Stack:

[36827.993797] 0000000000000092 000000021ed03968 000000000000ce20 0000010000000002

[36828.004108] 0000000000000002 0000000000002710 ffffffff81c4e1c0 ffffffff81d14520

[36828.014418] ffffffff81c4e1c0 0000000000000002 ffff88021ed03968 ffffffff8104955c

[36828.024732] Call Trace:

[36828.030025] <IRQ>

[36828.031968] [<ffffffff8104955c>] x2apic_send_IPI_all+0x1c/0x20

[36828.043740] [<ffffffff81045310>] arch_trigger_all_cpu_backtrace+0x70/0xb0

[36828.053464] [<ffffffff810cb28e>] rcu_check_callbacks+0x3fe/0x650

[36828.062391] [<ffffffff810764e7>] update_process_times+0x47/0x70

[36828.071211] [<ffffffff810d66a5>] tick_sched_handle.isra.17+0x25/0x60

[36828.080466] [<ffffffff810d6721>] tick_sched_timer+0x41/0x60

[36828.088925] [<ffffffff8108e9e7>] __run_hrtimer+0x77/0x1d0

[36828.097179] [<ffffffff810d66e0>] ? tick_sched_handle.isra.17+0x60/0x60

[36828.106570] [<ffffffff8108f1af>] hrtimer_interrupt+0xef/0x230

[36828.115184] [<ffffffff81043727>] local_apic_timer_interrupt+0x37/0x60

[36828.124504] [<ffffffff8173700f>] smp_apic_timer_interrupt+0x3f/0x60

[36828.133664] [<ffffffff8173599d>] apic_timer_interrupt+0x6d/0x80

[36828.142482] [<ffffffffa0457c2a>] ? ____nf_conntrack_find+0x5a/0x160 [nf_conntrack]

[36828.152982] [<ffffffffa0457c01>] ? ____nf_conntrack_find+0x31/0x160 [nf_conntrack]

[36828.163458] [<ffffffffa04585f1>] __nf_conntrack_find_get+0x31/0x160 [nf_conntrack]

[36828.173931] [<ffffffffa0459489>] nf_conntrack_in+0x2a9/0xb60 [nf_conntrack]

[36828.183801] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40

[36828.192464] [<ffffffffa04862e2>] ipv4_conntrack_in+0x22/0x30 [nf_conntrack_ipv4]

[36828.202721] [<ffffffff8165732a>] nf_iterate+0x9a/0xb0

[36828.210550] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40

[36828.219058] [<ffffffff816573b4>] nf_hook_slow+0x74/0x130

[36828.227091] [<ffffffff8165d8a0>] ? inet_del_offload+0x40/0x40

[36828.235521] [<ffffffff8165e2c8>] ip_rcv+0x2f8/0x3d0

[36828.243050] [<ffffffff81627a96>] __netif_receive_skb_core+0x676/0x850

[36828.252142] [<ffffffff81627c88>] __netif_receive_skb+0x18/0x60

[36828.260598] [<ffffffff8162881e>] process_backlog+0xae/0x1a0

[36828.268803] [<ffffffff81628072>] net_rx_action+0x152/0x250

[36828.276919] [<ffffffff8106cccc>] __do_softirq+0xec/0x2c0

[36828.284853] [<ffffffff8106d215>] irq_exit+0x105/0x110

[36828.292528] [<ffffffff81736f66>] do_IRQ+0x56/0xc0

[36828.299834] [<ffffffff8172c56d>] common_interrupt+0x6d/0x6d

[36828.307993] <EOI>

[36828.309935] [<ffffffff815d5de2>] ? cpuidle_enter_state+0x52/0xc0

[36828.321203] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0

[36828.329516] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30

[36828.337304] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290

[36828.345600] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0

[36828.353787] Code: 02 0f 44 f0 89 f6 e8 50 5f 00 00 66 90 b9 00 01 00 00 4c 89 f2 4c 89 e6 4c 89 e7 e8 5b ba 32 00 e9 36 ff ff ff 48 8b 7

[36828.376283] NMI backtrace for cpu 0

[36828.382369] CPU: 0 PID: 0 Comm: swapper/0 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36828.393729] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013

[36828.406264] task: ffffffff81c15480 ti: ffffffff81c00000 task.ti: ffffffff81c00000

[36828.416480] RIP: 0010:[<ffffffff813e9b98>] [<ffffffff813e9b98>] intel_idle+0xd8/0x140

[36828.427097] RSP: 0018:ffffffff81c01e38 EFLAGS: 00000046

[36828.435001] RAX: 0000000000000020 RBX: 0000000000000008 RCX: 0000000000000001

[36828.444741] RDX: 0000000000000000 RSI: ffffffff81c93e80 RDI: 0000000000000000

[36828.454469] RBP: ffffffff81c01e60 R08: ffff88021ec10324 R09: 0000000000000018

[36828.464205] R10: 000000000002132a R11: 000000000003c85b R12: 0000000000000004

[36828.473917] R13: 0000000000000020 R14: 0000000000000003 R15: ffffffff81c93ff8

[36828.483588] FS: 0000000000000000(0000) GS:ffff88021ec00000(0000) knlGS:0000000000000000

[36828.494200] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033

[36828.502426] CR2: 00007f905fef2000 CR3: 0000000001c0e000 CR4: 00000000001407f0

[36828.512033] Stack:

[36828.516492] 0000000081c01e60 ffff88021ec1a300 ffffffff81c93e80 0000217753a304fe

[36828.526466] 0000000000000004 ffffffff81c01e98 ffffffff815d5dd0 ffffffffffffffff

[36828.536448] ffff88021ec1a300 0000000000000004 0000000000000000 ffffffff81c93e80

[36828.546430] Call Trace:

[36828.551403] [<ffffffff815d5dd0>] cpuidle_enter_state+0x40/0xc0

[36828.559866] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0

[36828.568220] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30

[36828.576034] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290

[36828.584355] [<ffffffff81712297>] rest_init+0x77/0x80

[36828.591864] [<ffffffff81d34f70>] start_kernel+0x438/0x443

[36828.599804] [<ffffffff81d34941>] ? repair_env_string+0x5c/0x5c

[36828.608173] [<ffffffff81d34120>] ? early_idt_handler_array+0x120/0x120

[36828.617224] [<ffffffff81d345ee>] x86_64_start_reservations+0x2a/0x2c

[36828.626115] [<ffffffff81d34733>] x86_64_start_kernel+0x143/0x152

[36828.634638] Code: 48 89 d1 48 2d c8 1f 00 00 0f 01 c8 0f ae f0 65 48 8b 04 25 30 b8 00 00 48 8b 80 38 e0 ff ff a8 08 75 08 b1 01 4c 89 e

[36828.657137] NMI backtrace for cpu 1

[36828.663197] CPU: 1 PID: 0 Comm: swapper/1 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36828.674517] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013

[36828.687014] task: ffff88021328c800 ti: ffff88021329a000 task.ti: ffff88021329a000

[36828.697195] RIP: 0010:[<ffffffff813e9b98>] [<ffffffff813e9b98>] intel_idle+0xd8/0x140

[36828.707864] RSP: 0018:ffff88021329be28 EFLAGS: 00000046

[36828.715904] RAX: 0000000000000020 RBX: 0000000000000008 RCX: 0000000000000001

[36828.725790] RDX: 0000000000000000 RSI: ffffffff81c93e80 RDI: 0000000000000001

[36828.735665] RBP: ffff88021329be50 R08: ffff88021ec9030c R09: 0000000000000014

[36828.745529] R10: 0000000000001f30 R11: 0000000000007cab R12: 0000000000000004

[36828.755394] R13: 0000000000000020 R14: 0000000000000003 R15: ffffffff81c93ff8

[36828.765243] FS: 0000000000000000(0000) GS:ffff88021ec80000(0000) knlGS:0000000000000000

[36828.776091] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033

[36828.784601] CR2: 000000000060a3c0 CR3: 0000000001c0e000 CR4: 00000000001407e0

[36828.794511] Stack:

[36828.799267] 000000011329be50 ffff88021ec9a300 ffffffff81c93e80 0000217755c85d41

[36828.809512] 0000000000000004 ffff88021329be88 ffffffff815d5dd0 ffff88021329bf38

[36828.819744] ffff88021ec9a300 0000000000000004 0000000000000001 ffffffff81c93e80

[36828.829997] Call Trace:

[36828.835227] [<ffffffff815d5dd0>] cpuidle_enter_state+0x40/0xc0

[36828.843969] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0

[36828.852618] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30

[36828.860736] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290

[36828.869387] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0

[36828.877949] Code: 48 89 d1 48 2d c8 1f 00 00 0f 01 c8 0f ae f0 65 48 8b 04 25 30 b8 00 00 48 8b 80 38 e0 ff ff a8 08 75 08 b1 01 4c 89 e

[36828.900826] NMI backtrace for cpu 3

[36828.907295] CPU: 3 PID: 0 Comm: swapper/3 Tainted: G W OX 3.13.0-66-generic #108-Ubuntu

[36828.919039] Hardware name: Gigabyte Technology Co., Ltd. To be filled by O.E.M./Z77-D3H, BIOS F22 11/14/2013

[36828.931965] task: ffff8802132a8000 ti: ffff88021329e000 task.ti: ffff88021329e000

[36828.942572] RIP: 0010:[<ffffffff813e9b98>] [<ffffffff813e9b98>] intel_idle+0xd8/0x140

[36828.953655] RSP: 0018:ffff88021329fe28 EFLAGS: 00000046

[36828.962099] RAX: 0000000000000020 RBX: 0000000000000008 RCX: 0000000000000001

[36828.972399] RDX: 0000000000000000 RSI: ffffffff81c93e80 RDI: 0000000000000003

[36828.982684] RBP: ffff88021329fe50 R08: ffff88021ed9030c R09: 0000000000001f58

[36828.992974] R10: 00000000ffffffff R11: 0000000000007c84 R12: 0000000000000004

[36829.003265] R13: 0000000000000020 R14: 0000000000000003 R15: ffffffff81c93ff8

[36829.013476] FS: 0000000000000000(0000) GS:ffff88021ed80000(0000) knlGS:0000000000000000

[36829.024584] CS: 0010 DS: 0000 ES: 0000 CR0: 0000000080050033

[36829.033326] CR2: 00007f905fef2000 CR3: 0000000001c0e000 CR4: 00000000001407e0

[36829.043442] Stack:

[36829.048376] 000000031329fe50 ffff88021ed9a300 ffffffff81c93e80 00002177560552e5

[36829.058784] 0000000000000004 ffff88021329fe88 ffffffff815d5dd0 ffff88021329ff38

[36829.069186] ffff88021ed9a300 0000000000000004 0000000000000003 ffffffff81c93e80

[36829.079589] Call Trace:

[36829.084972] [<ffffffff815d5dd0>] cpuidle_enter_state+0x40/0xc0

[36829.093868] [<ffffffff815d5f09>] cpuidle_idle_call+0xb9/0x1f0

[36829.102663] [<ffffffff8101d3ee>] arch_cpu_idle+0xe/0x30

[36829.110936] [<ffffffff810bf3a5>] cpu_startup_entry+0xc5/0x290

[36829.119716] [<ffffffff810415ed>] start_secondary+0x21d/0x2d0

[36829.128387] Code: 48 89 d1 48 2d c8 1f 00 00 0f 01 c8 0f ae f0 65 48 8b 04 25 30 b8 00 00 48 8b 80 38 e0 ff ff a8 08 75 08 b1 01 4c 89 e

 

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Если кто получил стабильную работу ppp на ядрах > 3.2 сообщите, пожалуйста.

ppp ~ # uname -r
3.12.59
ppp ~ # uptime 
09:40:13 up 93 days,  6:17,  1 user,  load average: 0.00, 0.01, 0.05
ppp ~ # accel-cmd show stat
uptime: 93.06:17:18
cpu: 0%

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

pppoe заломали где-то с 3.19. добавив в него асинхронности, из-за чего полезли грабли с race condition при опускании ифейса. вроде как пытаются лечить в более свежих ветках, в честности - должен был появиться параметр модуля указывающий кто обрабатывает PADT - юзерспейс (для accel) или модуль ядра (rp-pppoe PADT не умеет), грабля лезла при двойном одновременном дестрое ифейса юзерспейсом и ядром.

 

в 3.14 были проблемы с race condition при опускании ифейса и прибивании на нем шейперов (вроде как лечилось профилактическим прибиванием шейперов не в ifdown, а в ifup).

 

pptp вроде стабилен на 3.10, новее не пробовал.

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

pptp вроде стабилен на 3.10, новее не пробовал.

Также на 3.12.59 все прекрасно с pptp и l2tp.

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

в честности - должен был появиться параметр модуля указывающий кто обрабатывает PADT - юзерспейс (для accel) или модуль ядра (rp-pppoe PADT не умеет), грабля лезла при двойном одновременном дестрое ифейса юзерспейсом и ядром.

 

На каких версиях такое должно появиться? А то на 4.7.2 никаких параметров у модуля pppoe не замечено

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

вроде в netdev'е проскакивало сполгода назад патчами. и вроде куда-то мерджили даже...

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

pptp вроде стабилен на 3.10, новее не пробовал.

Также на 3.12.59 все прекрасно с pptp и l2tp.

Поставил 3.12.62 (были до этого 4.4.x) будем тестить может норамально станет работать. Пока обратил внимание, что после замены ядра упала загрузка процессора примерно с 20% до 10% (смотрел htop). Zabbix говорит что это softirq.

Изменено пользователем dtcom

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Join the conversation

You can post now and register later. If you have an account, sign in now to post with your account.

Гость
Ответить в тему...

×   Вставлено в виде отформатированного текста.   Вставить в виде обычного текста

  Разрешено не более 75 смайлов.

×   Ваша ссылка была автоматически встроена.   Отобразить как ссылку

×   Ваш предыдущий контент был восстановлен.   Очистить редактор

×   Вы не можете вставить изображения напрямую. Загрузите или вставьте изображения по ссылке.