BUG: soft lockup - CPU#4 stuck for 22s

2016-03-15 Пенетрантность Korona Auto Ltd.\ Andrey N. Prokofiev

Добрый день. В консоль периодически вываливаются вот такие сообщения:

Message from syslogd@bitrix-corp at Mar 15 14:16:05 ...
kernel:[51027.970713] BUG: soft lockup - CPU#4 stuck for 22s! 
[scsi_eh_0:148]


Message from syslogd@bitrix-corp at Mar 15 14:16:33 ...
kernel:[51056.011697] BUG: soft lockup - CPU#4 stuck for 22s! 
[scsi_eh_0:148]


Message from syslogd@bitrix-corp at Mar 15 14:17:05 ...
kernel:[51088.058593] BUG: soft lockup - CPU#4 stuck for 22s! 
[scsi_eh_0:148]


Message from syslogd@bitrix-corp at Mar 15 14:17:33 ...
kernel:[51116.099671] BUG: soft lockup - CPU#4 stuck for 22s! 
[scsi_eh_0:148]


Message from syslogd@bitrix-corp at Mar 15 14:18:09 ...
kernel:[51152.152539] BUG: soft lockup - CPU#4 stuck for 23s! 
[scsi_eh_0:148]




При этом сервер практически не откликается на действия в консоли, 
LA>100+, помогает только физический ребут сервера.


Версия ядра: Linux bitrix-corp 3.16.0-4-amd64 #1 SMP Debian 
3.16.7-ckt11-1 (2015-05-24) x86_64 GNU/Linux


Что с этим делать и куда копать?


--
WBR, Andrey N. Prokofiev



Re: BUG: soft lockup - CPU#4 stuck for 22s

2016-03-15 Пенетрантность Vasiliy P. Melnik
Виртуалка?

15 марта 2016 г., 16:01 пользователь Korona Auto Ltd.\ Andrey N. Prokofiev <
a...@korona-auto.com> написал:

> Добрый день. В консоль периодически вываливаются вот такие сообщения:
>
> Message from syslogd@bitrix-corp at Mar 15 14:16:05 ...
> kernel:[51027.970713] BUG: soft lockup - CPU#4 stuck for 22s!
> [scsi_eh_0:148]
>
> Message from syslogd@bitrix-corp at Mar 15 14:16:33 ...
> kernel:[51056.011697] BUG: soft lockup - CPU#4 stuck for 22s!
> [scsi_eh_0:148]
>
> Message from syslogd@bitrix-corp at Mar 15 14:17:05 ...
> kernel:[51088.058593] BUG: soft lockup - CPU#4 stuck for 22s!
> [scsi_eh_0:148]
>
> Message from syslogd@bitrix-corp at Mar 15 14:17:33 ...
> kernel:[51116.099671] BUG: soft lockup - CPU#4 stuck for 22s!
> [scsi_eh_0:148]
>
> Message from syslogd@bitrix-corp at Mar 15 14:18:09 ...
> kernel:[51152.152539] BUG: soft lockup - CPU#4 stuck for 23s!
> [scsi_eh_0:148]
>
>
>
> При этом сервер практически не откликается на действия в консоли, LA>100+,
> помогает только физический ребут сервера.
>
> Версия ядра: Linux bitrix-corp 3.16.0-4-amd64 #1 SMP Debian 3.16.7-ckt11-1
> (2015-05-24) x86_64 GNU/Linux
>
> Что с этим делать и куда копать?
>
>
> --
> WBR, Andrey N. Prokofiev
>
>


RE: BUG: soft lockup - CPU#4 stuck for 22s

2016-03-15 Пенетрантность Pavel Marchenko
Не по теме, но у битриса есть своя ВМ настроенная. И обновляется с их репы.



-Исходное сообщение-
От: "Vasiliy P. Melnik" 
Отправлено: ‎15.‎03.‎2016 17:14
Кому: "Korona Auto Ltd.\ Andrey N. Prokofiev" 
Копия: "debian-russian" 
Тема: Re: BUG: soft lockup - CPU#4 stuck for 22s

Виртуалка?


15 марта 2016 г., 16:01 пользователь Korona Auto Ltd.\ Andrey N. Prokofiev 
 написал:

Добрый день. В консоль периодически вываливаются вот такие сообщения:

Message from syslogd@bitrix-corp at Mar 15 14:16:05 ...
kernel:[51027.970713] BUG: soft lockup - CPU#4 stuck for 22s! [scsi_eh_0:148]

Message from syslogd@bitrix-corp at Mar 15 14:16:33 ...
kernel:[51056.011697] BUG: soft lockup - CPU#4 stuck for 22s! [scsi_eh_0:148]

Message from syslogd@bitrix-corp at Mar 15 14:17:05 ...
kernel:[51088.058593] BUG: soft lockup - CPU#4 stuck for 22s! [scsi_eh_0:148]

Message from syslogd@bitrix-corp at Mar 15 14:17:33 ...
kernel:[51116.099671] BUG: soft lockup - CPU#4 stuck for 22s! [scsi_eh_0:148]

Message from syslogd@bitrix-corp at Mar 15 14:18:09 ...
kernel:[51152.152539] BUG: soft lockup - CPU#4 stuck for 23s! [scsi_eh_0:148]



При этом сервер практически не откликается на действия в консоли, LA>100+, 
помогает только физический ребут сервера.

Версия ядра: Linux bitrix-corp 3.16.0-4-amd64 #1 SMP Debian 3.16.7-ckt11-1 
(2015-05-24) x86_64 GNU/Linux

Что с этим делать и куда копать?


-- 
WBR, Andrey N. Prokofiev

непонятка с сетью

2016-03-15 Пенетрантность Andrei Lomov
Прошу помощи.
Есть роутер, к нему подключаю проводком нетбук с кубунтой 14.04, сеть 
работает (dhcp).

Затем подключаю тем же проводком настольный компьютер с той же кубунтой, 
сети нет, по dhcp не заводится inet addr.

Прописал IP статически, сети нет, но вроде должна быть?:

# lspci
...
03:00.0 Ethernet controller: Realtek Semiconductor Co., Ltd. 
RTL8111/8168/8411 PCI Express Gigabit Ethernet Controller (rev 0c)
...


# cat /etc/network/interfaces
# interfaces(5) file used by ifup(8) and ifdown(8)
auto lo
iface lo inet loopback
auto eth0
iface eth0 inet static
address 192.168.1.13
netmask 255.255.255.0
gateway 192.168.1.1






 
# ifconfig
eth0  Link encap:Ethernet  HWaddr fc:aa:14:96:a0:d2 


 
  inet addr:192.168.1.13  Bcast:192.168.1.255  Mask:255.255.255.0   


 
  inet6 addr: fe80::feaa:14ff:fe96:a0d2/64 Scope:Link   


 
  UP BROADCAST RUNNING MULTICAST  MTU:1500  Metric:1


 
  RX packets:3 errors:0 dropped:0 overruns:0 frame:0


 
  TX packets:0 errors:0 dropped:47 overruns:0 carrier:0 


 
  collisions:0 txqueuelen:1000  


 
  RX bytes:555 (555.0 B)  TX bytes:0 (0.0 B)


 



 
loLink encap:Local Loopback 


 
  inet addr:127.0.0.1  Mask:255.0.0.0   


 
  inet6 addr: ::1/128 Scope:Host


 
  UP LOOPBACK RUNNING  MTU:65536  Metric:1  


 
  RX packets:273 errors:0 dropped:0 overruns:0 frame:0  


   

Re: непонятка с сетью

2016-03-15 Пенетрантность Andrei Lomov
Andrei Lomov wrote:

> Прошу помощи.
> Есть роутер, к нему подключаю проводком нетбук с кубунтой 14.04, сеть
> работает (dhcp).
> 
> Затем подключаю тем же проводком настольный компьютер с той же кубунтой,
> сети нет, по dhcp не заводится inet addr.

Еще факт, что если на этом десктопе запустить виндовз, то сеть поднимается, 
то есть дело вроде бы не в мак-адресе 

> # ifconfig
> eth0  Link encap:Ethernet  HWaddr fc:aa:14:96:a0:d2
> inet addr:192.168.1.13  Bcast:192.168.1.255  Mask:255.255.255.0
> inet6 addr: fe80::feaa:14ff:fe96:a0d2/64 Scope:Link
> UP BROADCAST RUNNING MULTICAST  MTU:1500  Metric:1
> RX packets:3 errors:0 dropped:0 overruns:0 frame:0
> TX packets:0 errors:0 dropped:47 overruns:0 carrier:0

Странные dropped пакеты


> collisions:0 txqueuelen:1000
> RX bytes:555 (555.0 B)  TX bytes:0 (0.0 B)
>   
>   
>   
>
> loLink encap:Local Loopback
> inet addr:127.0.0.1  Mask:255.0.0.0
> inet6 addr: ::1/128 Scope:Host
> UP LOOPBACK RUNNING  MTU:65536  Metric:1
> RX packets:273 errors:0 dropped:0 overruns:0 frame:0
> TX packets:273 errors:0 dropped:0 overruns:0 carrier:0
> collisions:0 txqueuelen:0
> RX bytes:19797 (19.7 KB)  TX bytes:19797 (19.7 KB)
>   
>   
>   
>
> 
> 
> # ping 192.168.1.1
> PING 192.168.1.1 (192.168.1.1) 56(84) bytes of data.
> From 192.168.1.13 icmp_seq=1 Destination Host Unreachable
> 


--
А.




Re: непонятка с сетью

2016-03-15 Пенетрантность Maxim Nikulin

15.03.2016 20:40, Andrei Lomov пишет:


сети нет, но вроде должна быть?:

03:00.0 Ethernet controller: Realtek Semiconductor Co., Ltd.
RTL8111/8168/8411 PCI Express Gigabit Ethernet Controller (rev 0c)


Видел что-то подобное с похожей картой в ноутбуке, но до конца не 
разобрался. Сложилось ощущение, что слишком сильно старалась беречь 
энергию. Если из suspend ноутбук выходил на аккумуляторе, то сеть не 
работала, если был подключен блок питания, то обычно сеть поднималась 
без проблем. Попытки выгрузить/загрузить модуль если и приводили к 
успеху, то не часто.





Re: BUG: soft lockup - CPU#4 stuck for 22s

2016-03-15 Пенетрантность Aleksandr Sytar
15 марта 2016 г., 17:01 пользователь Korona Auto Ltd.\ Andrey N. Prokofiev <
a...@korona-auto.com> написал:

> Версия ядра: Linux bitrix-corp 3.16.0-4-amd64 #1 SMP Debian 3.16.7-ckt11-1
> (2015-05-24) x86_64 GNU/Linux


Ядро не реалтайм?


Re: непонятка с сетью

2016-03-15 Пенетрантность Tim Sattarov
Привет,

сорри за топ квотинг.


для отладки состояния сети попробуй проанализировать вывод команд:

mii-tool eth0

ip link show eth0

ip ro

dmesg

ping 192.168.1.13

ip neigh

tcpdump -nvvi eth0 все это время на отдельной консоли


попробуй отследить изменения arp таблицы в "ip neigh" попробуй ее
сбросить(ip neigh flush dev eth0; ip neigh help для общего понимания)


On 15/03/16 10:40 AM, Andrei Lomov wrote:
> Прошу помощи.
> Есть роутер, к нему подключаю проводком нетбук с кубунтой 14.04, сеть 
> работает (dhcp).
>
> Затем подключаю тем же проводком настольный компьютер с той же кубунтой, 
> сети нет, по dhcp не заводится inet addr.
>
> Прописал IP статически, сети нет, но вроде должна быть?:
>
>



Re: непонятка с сетью

2016-03-15 Пенетрантность Федот Куракин

15.03.2016 17:57, Maxim Nikulin пишет:

15.03.2016 20:40, Andrei Lomov пишет:


сети нет, но вроде должна быть?:

03:00.0 Ethernet controller: Realtek Semiconductor Co., Ltd.
RTL8111/8168/8411 PCI Express Gigabit Ethernet Controller (rev 0c)


Видел что-то подобное с похожей картой в ноутбуке, но до конца не 
разобрался. Сложилось ощущение, что слишком сильно старалась беречь 
энергию. Если из suspend ноутбук выходил на аккумуляторе, то сеть не 
работала, если был подключен блок питания, то обычно сеть поднималась 
без проблем. Попытки выгрузить/загрузить модуль если и приводили к 
успеху, то не часто.



После виндоуса надо полностью отключать питание компа (выдёргивать шнур 
из блока питания).




Re: непонятка с сетью

2016-03-15 Пенетрантность Anton Stratonnikov
Для просветления: в кубунте 14.04 syystemd? а Nework Manager?

хотелось бы посмотреть на выхлоп ifconfig -a, когда в
/etc/network/interfaces нет упоминаний про eth0.

Кроме того в interfaces рекомендуют добавлять
allow-hotplug eth0

ну и последний пункт -- пакет firmware-realtek (не знаю, какой и где он
в кубунте) установлен? ядро не жалуется на недостаток файла прошивки?

15.03.2016 17:40, Andrei Lomov пишет:
> Прошу помощи.
> Есть роутер, к нему подключаю проводком нетбук с кубунтой 14.04, сеть 
> работает (dhcp).
>
> Затем подключаю тем же проводком настольный компьютер с той же кубунтой, 
> сети нет, по dhcp не заводится inet addr.
>
> Прописал IP статически, сети нет, но вроде должна быть?:
>
> # lspci
> ...
> 03:00.0 Ethernet controller: Realtek Semiconductor Co., Ltd. 
> RTL8111/8168/8411 PCI Express Gigabit Ethernet Controller (rev 0c)
> ...
>
>
> # cat /etc/network/interfaces
> # interfaces(5) file used by ifup(8) and ifdown(8)
> auto lo
> iface lo inet loopback
> auto eth0
> iface eth0 inet static
> address 192.168.1.13
> netmask 255.255.255.0
> gateway 192.168.1.1
>
>
>
>   
>   
>   
>
> # ifconfig
> eth0  Link encap:Ethernet  HWaddr fc:aa:14:96:a0:d2   
>   
>   
>
>   inet addr:192.168.1.13  Bcast:192.168.1.255  Mask:255.255.255.0 
>   
>   
>
>   inet6 addr: fe80::feaa:14ff:fe96:a0d2/64 Scope:Link 
>   
>   
>
>   UP BROADCAST RUNNING MULTICAST  MTU:1500  Metric:1  
>   
>   
>
>   RX packets:3 errors:0 dropped:0 overruns:0 frame:0  
>   
>   
>
>   TX packets:0 errors:0 dropped:47 overruns:0 carrier:0   
>   
>   
>
>   collisions:0 txqueuelen:1000
>   
>   
>
>   RX bytes:555 (555.0 B)  TX bytes:0 (0.0 B)  
>   
>   
>
>   
>   
>   
>
> loLink encap:Local Loopback   
>   
>   
>
>   inet addr:127.0.0.1  Mask:255.0.0.0 
>   
>   
>
>   inet6 addr: ::1/128 Scope:Host  
>   
>   
>