On Tue, 2021-01-12 at 08:19 +0000, Loic LADREYT wrote:
> Bonjour. Merci à tous pour vos réponses. Suite a pas mal de
> recherche, le problème viendrait d'un des QSFP utilisé. Nous sommes
> en train de diagnostiquer plus précisément le soucis. Je vous fait un
> retour dès que j'en sais plus.
> 
> Loic LADREYT - Ingénieur réseaux
> Direct : +33 4 27 01 88 01
> Mob : +33 6 02 57 38 98

Bonsoir Loic,

J'ai passé quelques jours a essayer de faire marcher un lien 40G
optique entre deux nexus C3064PQ (pas pour du vPC) et j'ai abandonné
apres avoir perdu le management et essuyé de grosses instabilité.
Symptome messages suivant en boucle :

%KERN-2-SYSTEM_MSG: [  153.662207] clk_flush: Couldn't Clear Bus -
kernel
%KERN-5-SYSTEM_MSG: [ 2527.166526] pfmclnt/12446 - Read command failed
for slot 0 card index 11060 bus 2 addr 0x74 command 1 err -14  - kernel

Apres recherche il s'agirait d'un soucis bus i2c et ce n'est pas clair
si CISCO a vraiment fixé ça comme dit dans les release notes :

https://bst.cloudapps.cisco.com/bugsearch/bug/CSCuo23668/?rfs=iqvred
N6K: errors "clk_flush: Couldn't Clear Bus" and console unresponsive

https://bst.cloudapps.cisco.com/bugsearch/bug/CSCvn34433/?rfs=iqvred
N3064: continue clk_flush: Couldn't Clear Bus - kernel and I2c access
failed - neutron_usd errors

https://bst.cloudapps.cisco.com/bugsearch/bug/CSCuq83575/?rfs=iqvred
Improve serviceability of message neutron_usd - failed to set mux addr

https://bst.cloudapps.cisco.com/bugsearch/bug/CSCts48380/?rfs=iqvred
%KERN-2-SYSTEM_MSG: pfm/4360 - SMBus failed (05). Resetting... - kernel

Essayé 7.0(3)I7(6) et 7.0(3)I7(8) mais avec le meme plantage.

Mes multiples liens 40G en DAC n'ont pas de soucis, en prod (LACP+vPC)
depuis plus d'un an.

Je suis finalement repassé en LACP avec des optiques 10G pour mon lien
et pas de soucis.

As-tu trouvé un moyen de faire marcher les optiques QSFP 40G sur tes
nexus ?

Sincèrement,

Laurent GUERBY

> 
> -----Message d'origine-----
> De : frnog-requ...@frnog.org <frnog-requ...@frnog.org> De la part de
> Sibiodon, Anthony
> Envoyé : lundi 11 janvier 2021 08:41
> Cc : frnog-misc <frnog-m...@frnog.org>
> Objet : Re: [FRnOG] [MISC] N3K-C3064PQ-10GX 40Gbps vPC
> 
> Bonjour,
> 
> J'utilisé le vPC sur ces switch et également le SNMP pour mon Cacti.
> 
> Pour le moment pas de problème.
> Merci.
> 
> Anthony
> 
> Le dim. 10 janv. 2021 à 15:55, Xavier Beaudouin <k...@oav.net> a
> écrit :
> 
> > Hello,
> > 
> > > > en 40 Gbps (hardware profile 48x10G+4x40G). Au bout d’un
> > > > certain 
> > > > temps
> > 
> > nous
> > > > remarquons que les deux
> > > > châssis ne remontent plus de variable environnement (power,
> > > > fan 
> > > > etc..)
> > 
> > et ne
> > > > répond plus en SNMP.
> > > 
> > > Jamais fait de vPC et pas tenté. A part çà c'est un switch
> > > populaire 
> > > en
> > 
> > broke,
> > > j'en ai plusieurs dans cette config 48x10G+4x40G avec du 
> > > etherchannel
> > 
> > 2x40G
> > > monochassis et aucun problème.
> > 
> > Il y a temps certain, sur du N7k en vPC et virtual chassis j'avais 
> > remarqué que le CPU en mousse n'arrivais pas a gérer les snmpbulk
> > avec 
> > 1000 ports...
> > Ou...  que
> > la ram / temps cpu aloué au process snmpd sur le linux embarqué
> > avais 
> > un peu des problèmes...
> > 
> > Perso j'évite les vPC sauf si c'est ABSOLUMENT indispensable et
> > les 
> > utiliser en switch basic avec de l'etherchannel -> bullet proof.
> > KISS 
> > est la règle.
> > 
> > Xavier
> > 
> > 
> > ---------------------------
> > Liste de diffusion du FRnOG
> > https://urldefense.proofpoint.com/v2/url?u=http-3A__www.frnog.org_&;
> > d=D
> > wIFaQ&c=1tDFxPZjcWEmlmmx4CZtyA&r=LnEORwIoc4qm9FufFv_lThAcJ5p1o1JzGW
> > 5u9
> > oAv3_Y&m=WW00eIbT8iaU9vymBw95o_E0lXFzSTClyI5ySUVLU-
> > M&s=mU8iAi4MrnLN-1-
> > BuI-uD0aFrg0GTTla2aHB97yY91c&e=
> > 
> 
> ---------------------------
> Liste de diffusion du FRnOG
> https://urldefense.proofpoint.com/v2/url?u=http-3A__www.frnog.org_&d=
> DwIFaQ&c=1tDFxPZjcWEmlmmx4CZtyA&r=LnEORwIoc4qm9FufFv_lThAcJ5p1o1JzGW5
> u9oAv3_Y&m=WW00eIbT8iaU9vymBw95o_E0lXFzSTClyI5ySUVLU-
> M&s=mU8iAi4MrnLN-1-BuI-uD0aFrg0GTTla2aHB97yY91c&e= 
> 
> ---------------------------
> Liste de diffusion du FRnOG
> http://www.frnog.org/


---------------------------
Liste de diffusion du FRnOG
http://www.frnog.org/

Répondre à