Nexus 9500-R, Nexus 3000-R : Dépannez les écarts d'entrée · Trouvez votre port congestionné par de sortie de la valeur non vide de file d'attente : Si la file d'attente est 303,

Nexus 9500-R, Nexus 3000-R : Dépannez lesécarts d'entrée Contenu

IntroductionInformations généralesGestionnaire du trafic entrant (ITM)Mémoire tampon du d'entrée VOQProgramme et contrôle de fluxCauses classiquesMatériel applicableDépannez les écarts d'entréeScénario commun - 10G à la circulation 1G - baisses constantes :Étape 1. Vérifiez que la file d'attente est affecté sur votre interface d'écarts d'entrée.Étape 2. Vérifiez la représentation graphique de Broadcom des compteurs utilisés pour desdiagnostics :Étape 3. Trouvez à quel ASIC et quel port de Jéricho votre port de panneau avant éprouvantl'entrée jette appartient :Étape 4. Comprenez quel connecteur VOQ et VOQ votre port d'entrée a.Étape 5. Vérifiez du point de vue du BCM, qui s'alignent sont spécifiquement non vides ; c.-à-d.congestionné.Étape 6. Trouvez votre port congestionné par de sortie de la valeur non vide de file d'attente :Étape 7. Vérifiez qui le port de panneau avant est dans ASIC 1 et trace à Jéricho le port 9 basésur votre trouver précédent.Commandes supplémentairesEssais en laboratoire supplémentaires :Étape 1. Écarts d'entrée avec les interfaces congestionnées plusieurs par de sortie.Étape 2. Écarts d'entrée devant RÉPARTIR.Étape 3. Écarts d'entrée devant trafiquer le Pin de cheveux.Étape 4. Envoyez les paquets avec un IP de destination qui est inconnu.Étape 5. L'entrée jette tandis que des transitions d'un port d'Access/joncteur réseau dans l'étatd'expédition STPÉtape 6. Les écarts d'entrée dus à Eth1/9 dépassant la ligne évaluent.

Introduction

Ce document décrit les causes de et les solutions pour l'entrée jette pour Cisco Nexus 9500-REoR et le massif de roche du Nexus 3000-R. Un écart d'entrée indique le nombre de paquetsabandonnés dans la file d'attente d'entrée en raison de l'encombrement. Ce nombre inclut lesbaisses qui sont provoqué par par la perte de destination et le Détection précoce directe pondérée(WRED).

Si vous éprouvez (c.-à-d. plus ne se produisant) baisses aléatoires/sporadiques/historiques,contactez s'il vous plaît Cisco TAC pour des recherches plus approfondies. Cette revue du projet

est utile quand des écarts d'entrée sont incrémentés fréquemment.

Informations générales

L'architecture du d'entrée VOQ d'utilisations de R-gamme. L'architecture VOQ émule des filesd'attente de sortie dans la mémoire tampon d'entrée avec les files d'attente virtuelles. Chaque portde sortie a huit files d'attente pour le trafic unicast et huit files d'attente pour le trafic demultidiffusion. Le trafic peut être classifié dans des classes du trafic basées sur la valeur deClasse de service (Cos) ou de Differentiated Services Code Point (DSCP) dans les paquets etalors alignées dans la file d'attente virtuelle correspondante pour cette classe du trafic.

La R-gamme emploie un mécanisme distribué de crédit pour transférer le trafic sur la matrice.Avant qu'un paquet soit programmé pour laisser le VOQ, le programmateur de mémoire tampond'entrée demande un crédit pour le port spécifique et la priorité dans le tampon de sortie. Le créditest demandé à un programmateur de crédit d'entrée pour la destination port et la priorité. Sil'espace de mémoire tampon est disponible, les concessions de programmateur de sortieaccèdent à et envoient la concession de crédit au programmateur de mémoire tampon d'entrée. Siaucun espace de mémoire tampon n'est disponible dans le tampon de sortie, le programme desortie n'octroie pas un crédit, et le trafic est mis en mémoire tampon dans le VOQ jusqu'à ce quele prochain crédit soit disponible.

Est ci-dessous le pipeline de transfert de paquet pour - la plate-forme R. Sur cet article, vous vousconcentrez sur le composant de gestionnaire du trafic entrant. Plus de détails sur l'architecture àce lien

Gestionnaire du trafic entrant (ITM)

Le gestionnaire du trafic entrant (ITM) est un bloc dans le pipeline d'entrée. Il exécute des étapesrapportées pour aligner le trafic dans VOQ, pour programmer le trafic pour la transmission au-dessus de la matrice, et pour gérer des crédits.

Mémoire tampon du d'entrée VOQ

Le bloc de mémoire tampon du d'entrée VOQ gère la mémoire tampon de sur-puce et le tamponde paquets hors puce. Les deux mémoires tampons utilisent l'architecture VOQ, et le trafic estaligné a basé sur les informations de l'IRPP (processeur de paquet de récepteur d'entrée). Untotal de 96,000 VOQs sont disponibles pour l'unicast et le trafic de multidiffusion.

/content/en/us/products/collateral/switches/nexus-9000-series-switches/white-paper-c11-738392.html

/content/en/us/products/collateral/switches/nexus-9000-series-switches/white-paper-c11-738392.html

Programme et contrôle de flux

Avant qu'un paquet soit transmis du pipeline d'entrée, le paquet doit être programmé pour letransfert sur la matrice. Le programmateur d'entrée envoie une demande de crédit auprogrammateur de sortie situé dans le bloc de gestionnaire du trafic en sortie. Quand legestionnaire du trafic entrant reçoit le crédit, il commence envoyer le trafic au d'entrée pourtransmettre le processeur de paquet. Si le tampon de sortie est plein, le trafic sera mis enmémoire tampon dans la file d'attente dédiée représentée par la classe de port de sortie et detrafic.

Causes classiques

Généralement, des écarts d'entrée ont pu être vus pour des raisons ci-dessous à travers le diversmatériel de Nexus

La circulation congestionnant des interfaces de sortie (telles que d'entrée 10G et de sortie1G)

●

Le port de destination Oversubscribed d'ENVERGURE s'applique aux types de matérielspécifiques.

●

Matériel applicablePIDN9K-X9636C-RN9K-X9636Q-RN9K-X9636C-RXN9K-X96136YC-RN3K-C36180YC-RN3K-C3636C-R

Dépannez les écarts d'entrée

Scénario commun - 10G à la circulation 1G - baisses constantes :

Dans tout cet article, la valeur pour le compteur de la « entrée jette » et n'importe quel HW lecompteur qu'interne que met en référence la même chose changera que les erreursincrémentaient tout en testant et des commandes appropriées doit être vivant saisi.

Étape 1. Vérifiez que la file d'attente est affecté sur votre interface d'écarts d'entrée.

Cette étape est livré dans plus tard pratique.

Dans notre cas, c'est la file d'attente 7, la file d'attente par défaut - il y a 8 files d'attente semontent sur le d'entrée :

Étape 2. Vérifiez la représentation graphique de Broadcom des compteurs utilisés pour desdiagnostics :

Nexus-R# bcm-shell mod 1 "diag counters g"

|

/|\

| J E R I C H O N E T W O R K I N T E

R F A C E |

\|/

|

+-------------------------------------------+-------------------------------------------+-------

------------------------------------+-------------------------------------------+

| NBI

|

| RX_TOTAL_BYTE_COUNTER = 10,616,663,796 |

TX_TOTAL_BYTE_COUNTER = 41,136 |

| RX_TOTAL_PKT_COUNTER = 10,659,301 |

TX_TOTAL_PKT_COUNTER = 606 |

| RX_TOTAL_DROPPED_EOPS = 0 |

|

+-------------------------------------------+-------------------------------------------+-------

------------------------------------+-------------------------------------------+

| IRE |

EPNI |

| CPU_PACKET_COUNTER = 606 |

|

| NIF_PACKET_COUNTER = 10,659,302 |

EPE_BYTES_COUNTER = 41,136 |

| OAMP_PACKET_COUNTER = 0 |

EPE_PKT_COUNTER = 606 |

| OLP_PACKET_COUNTER = 0 |

EPE_DSCRD_PKT_CNT = 0 |

| RCY_PACKET_COUNTER = 0 |

|

| IRE_FDT_INTRFACE_CNT = 0 |

|

+-------------------------------------------+-------------------------------------------+-------

------------------------------------+-------------------------------------------+

| IDR |

EGQ |

| |

|

| MMU_IDR_PACKET_COUNTER = 10,659,302 |

FQP_PACKET_COUNTER = 606 |

| IDR_OCB_INTERFACE_COUNTER = 0 |

PQP_UNICAST_PKT_CNT = 606 |

| |

PQP_DSCRD_UC_PKT_CNT = 0 |

| |

PQP_UC_BYTES_CNT = 48,408 |

+-------------------------------------------+-------------------------------------------|

PQP_MC_PKT_CNT = 0 |

| IQM |

PQP_DSCRD_MC_PKT_CNT = 0 |

| |

PQP_MC_BYTES_CNT = 0 |

| ENQUEUE_PKT_CNT = 1,403,078 |

EHP_UNICAST_PKT_CNT = 606 |

| DEQUEUE_PKT_CNT = 1,403,078 |

EHP_MC_HIGH_PKT_CNT = 0 |

| DELETED_PKT_CNT = 0 |

EHP_MC_LOW_PKT_CNT = 0 |

| ENQ_DISCARDED_PACKET_COUNTER = 9,256,829 |

DELETED_PKT_CNT = 0 |

| Rejects: PORT_AND_PG_STATUS |

|

| |

RQP_PKT_CNT = 606 |

| |

RQP_DSCRD_PKT_CNT = 0 |

| |

PRP_PKT_DSCRD_TDM_CNT = 0 |

| |

PRP_SOP_DSCRD_UC_CNT = 0 |

| |

PRP_SOP_DSCRD_MC_CNT = 0 |

| |

PRP_SOP_DSCRD_TDM_CNT = 0 |

| |

EHP_MC_HIGH_DSCRD_CNT = 0 |

| |

EHP_MC_LOW_DSCRD_CNT = 0 |

| |

ERPP_LAG_PRUNING_DSCRD_CNT = 0 |

| |

ERPP_PMF_DISCARDS_CNT = 0 |

| |

ERPP_VLAN_MBR_DSCRD_CNT = 0 |

+-------------------------------------------+-------------------------------------------+-------

------------------------------------+-------------------------------------------+

| |

FDA |

| |

CELLS_IN_CNT_P1 = 0 | CELLS_OUT_CNT_P1 = 0 |

| |


+-------------------------------------------+-------------------------------------------|


| IPT |

CELLS_IN_TDM_CNT = 0 | CELLS_OUT_TDM_CNT = 0 |

| |

CELLS_IN_MESHMC_CNT = 0 | CELLS_OUT_MESHMC_CNT = 0 |

| EGQ_PKT_CNT = 606 -->

CELLS_IN_IPT_CNT = 606 | CELLS_OUT_IPT_CNT = 606 |

| ENQ_PKT_CNT = 1,403,084 |

EGQ_DROP_CNT = 0 |

| FDT_PKT_CNT = 1,402,472 |

EGQ_MESHMC_DROP_CNT = 0 |

| CRC_ERROR_CNT = 0 |

EGQ_TDM_OVF_DROP_CNT = 0 |

| CFG_EVENT_CNT = 606 * |

|

| CFG_BYTE_CNT = 48,408 |

|

+-------------------------------------------+-------------------------------------------+-------

------------------------------------+-------------------------------------------+

| FDT |

FDR |

| IPT_DESC_CELL_COUNTER = 5,609,892 |

P1_CELL_IN_CNT = 0 |

| IRE_DESC_CELL_COUNTER = 0 |


| |


| TRANSMITTED_DATA_CELLS_COUNTER = 5,609,892 |

CELL_IN_CNT_TOTAL = 0 |

+-------------------------------------------+-------------------------------------------+-------

------------------------------------+-------------------------------------------+

|

/|\

| J E R I C H O F A B R I C I N T E R

F A C E |

\|/

|

Un QUEUE_DELETED_PACKET_COUNTER étant plus grand que zéro indiquerait que despaquets ONT ÉTÉ SUPPRIMÉS par l'afterenqueue IQM (gestionnaire de files d'attente d'entrée).Ce serait dû à une file d'attente active ne recevant aucun crédit qui suggérerait une mauvaiseconfiguration du schéma de établissement du programme. Vous vérifieriez ceci par l'intermédiairedu modèle X le « getReg IQM_QUEUE_DELETED_PACKET_COUNTER » de BCM-shell

ENQ_DISCARDED_PACKET_COUNTER signifie que des paquets ont été jetés AVANT mettenten file d'attente. Vous pouvez voir que le ce parent le positionnement dans le BCM aussi bien (lacommande est effacée sur lu) :

Vous pouvez toujours noter ces derniers rapidement avec le module X d'erreurs internes dematériel d'exposition (la commande efface sur lu) :

Étape 3. Trouvez à quel ASIC et quel port de Jéricho votre port de panneau avant éprouvantl'entrée jette appartient :

Affichage d'Eth1/33 pour cet exemple. Dans un réseau réel, vous ne connaîtrez pas le port desortie congestionné encore.

Étape 4. Comprenez quel connecteur VOQ et VOQ votre port d'entrée a.

Cette commande montre nous détails pour l'écoulement pour le d'entrée VoQ pour un portspécifique. Supplémentaire, il nous affiche l'équilibre de crédit en compte du VoQ.

Le VOQ du port est dérivé de cette façon :

Les LCS sont 0 basé - Le module 1 est 0, le module 2 est 1, etc.

Il y a 256 id de port de système par LC

ID = (LC * ID de port de système) + nombre point de gelEth1/9 = (0 * 256) + 9 = 9ID VOQ = 32 + (ID de port de système * 8)Eth1/9 = 32 + (9 * 8) = 104

Notre VOQ pour Eth1/9 sera donc 104 qui apparie la sortie précédemment recueillie

Étape 5. Vérifiez du point de vue du BCM, qui s'alignent sont spécifiquement non vides ; c.-à-d.congestionné.

Étape 6. Trouvez votre port congestionné par de sortie de la valeur non vide de file d'attente :

Si la file d'attente est 303, rappelez-vous que ces files d'attente sont réellement une plage ainsielle peut être 303 + 7 ou 303-7 - la question est-elle, que le port a un VOQ qui s'assortit sur uneplage de 296-303 ou alternativement, 303-310 ?

On le sait que la file d'attente 7 sur Eth1/9 est congestionnée, ainsi 303 est réellement le plusélevé dans sa plage ainsi la plage de 296-303 est une conjecture instruite.

Affichez la même chose pour 0 asic - Non affiché ici par souci de concision ; vous noteriez sous lacolonne de Voq que votre plage d'intérêt n'est pas dans cet ASIC

Notez quelques choses sur la sortie ci-dessus :

Notre port congestionné par de sortie est sur ASIC 1.●

Notre port congestionné par de sortie a un VOQ de 296 et de 303 égaliserait pour aligner 7sur ce port.

●

Notez la colonne de solde - Il y a très peu de crédits laissés sur cette interface pour accorderce qui est pourquoi notre d'entrée Eth1/9 commence la mise en mémoire tampon.

●

Étape 7. Vérifiez qui le port de panneau avant est dans ASIC 1 et trace à Jéricho le port 9 basésur votre trouver précédent.

En ce moment, vous avez trouvé le port congestionné par de sortie - déterminez s'il y a quelquechose qui éclate à tort dans le réseau, vous ont configuré l'ENVERGURE et votre destination portest 1G tandis qu'approvisionnement l'interface un ou plusieurs 10G ou si c'est une questiond'étranglement/conception.

Commandes supplémentaires

Ce sont plus avancés - Non nécessaire trouver le de sortie a congestionné le port sous lesscénarios normaux.


|

/|\


R F A C E |

\|/

|

+-------------------------------------------+-------------------------------------------+-------

------------------------------------+-------------------------------------------+

| NBI

|


TX_TOTAL_BYTE_COUNTER = 41,136 |


TX_TOTAL_PKT_COUNTER = 606 |


|

+-------------------------------------------+-------------------------------------------+-------

------------------------------------+-------------------------------------------+

| IRE |

EPNI |

| CPU_PACKET_COUNTER = 606 |

|


EPE_BYTES_COUNTER = 41,136 |


EPE_PKT_COUNTER = 606 |



| RCY_PACKET_COUNTER = 0 |

|


|

+-------------------------------------------+-------------------------------------------+-------

------------------------------------+-------------------------------------------+

| IDR |

EGQ |

| |

|


FQP_PACKET_COUNTER = 606 |


PQP_UNICAST_PKT_CNT = 606 |

| |


| |

PQP_UC_BYTES_CNT = 48,408 |

+-------------------------------------------+-------------------------------------------|


| IQM |


| |

PQP_MC_BYTES_CNT = 0 |


EHP_UNICAST_PKT_CNT = 606 |







| Rejects: PORT_AND_PG_STATUS |

|

| |

RQP_PKT_CNT = 606 |

| |

RQP_DSCRD_PKT_CNT = 0 |

| |

PRP_PKT_DSCRD_TDM_CNT = 0 |

| |

PRP_SOP_DSCRD_UC_CNT = 0 |

| |

PRP_SOP_DSCRD_MC_CNT = 0 |

| |

PRP_SOP_DSCRD_TDM_CNT = 0 |

| |

EHP_MC_HIGH_DSCRD_CNT = 0 |

| |

EHP_MC_LOW_DSCRD_CNT = 0 |

| |

ERPP_LAG_PRUNING_DSCRD_CNT = 0 |

| |

ERPP_PMF_DISCARDS_CNT = 0 |

| |

ERPP_VLAN_MBR_DSCRD_CNT = 0 |

+-------------------------------------------+-------------------------------------------+-------

------------------------------------+-------------------------------------------+

| |

FDA |

| |


| |


+-------------------------------------------+-------------------------------------------|


| IPT |

CELLS_IN_TDM_CNT = 0 | CELLS_OUT_TDM_CNT = 0 |

| |

CELLS_IN_MESHMC_CNT = 0 | CELLS_OUT_MESHMC_CNT = 0 |

| EGQ_PKT_CNT = 606 -->

CELLS_IN_IPT_CNT = 606 | CELLS_OUT_IPT_CNT = 606 |

| ENQ_PKT_CNT = 1,403,084 |

EGQ_DROP_CNT = 0 |

| FDT_PKT_CNT = 1,402,472 |

EGQ_MESHMC_DROP_CNT = 0 |

| CRC_ERROR_CNT = 0 |

EGQ_TDM_OVF_DROP_CNT = 0 |

| CFG_EVENT_CNT = 606 * |

|

| CFG_BYTE_CNT = 48,408 |

|

+-------------------------------------------+-------------------------------------------+-------

------------------------------------+-------------------------------------------+

| FDT |

FDR |

| IPT_DESC_CELL_COUNTER = 5,609,892 |


| IRE_DESC_CELL_COUNTER = 0 |


| |


| TRANSMITTED_DATA_CELLS_COUNTER = 5,609,892 |

CELL_IN_CNT_TOTAL = 0 |

+-------------------------------------------+-------------------------------------------+-------

------------------------------------+-------------------------------------------+

|

/|\

| J E R I C H O F A B R I C I N T E R

F A C E |

\|/

|

Essais en laboratoire supplémentaires :

Étape 1. Écarts d'entrée avec les interfaces congestionnées plusieurs par de sortie.

Considérez cette topologie où le générateur du trafic envoie 2G du trafic vers chaque serveur :

Vérifiez rapidement quelles files d'attente ne sont pas vides - l'avis là sont 4 :

Déterminez à quelles interfaces ces files d'attente appartiennent - le contrôle ASIC 0 d'abord (ilexplique seulement avec une interface) :

Répétez le même processus pour les autres valeurs de trois files d'attente : 247, 303 et 351.

Étape 2. Écarts d'entrée devant RÉPARTIR.

L'établissement d'Eth1/33 comme destination port d'ENVERGURE tout en plaçant Eth1/9 commesource d'ENVERGURE mettent en communication dans la direction RX

Étape 3. Écarts d'entrée devant trafiquer le Pin de cheveux.

L'envoi des paquets avec SRC 10.10.10.10 et DEST 192.168.10.10 où Eth1/9 est dans10.10.10.1/24 - ceci n'a pas comme conséquence un écart d'entrée ; cependant, vous voyez cecompteur :


| /|\

| J E R I C H O N E T W O R K I N T E R F A C E |

\|/ |

+-------------------------------------------+-------------------------------------------+-------

------------------------------------+-------------------------------------------+

_PACKET_COUNTER = 0 | DELETED_PKT_CNT = 12,027,201 |

| | Discards: INVALID_OTM SRC_EQUAL_DEST

+-------------------------------------------+-------------------------------------------+-------

------------------------------------+-------------------------------------------+

Étape 4. Envoyez les paquets avec un IP de destination qui est inconnu.

Envoyez les paquets avec SRC 10.10.10.10 et DEST 192.168.10.10 où Eth1/9 est dans10.10.10.1/24 et Eth1/33 est un port L3 dans le sous-réseau 172.16.0.1/30 - aucun compteur debaisse, aucune entrée ne jette même lorsque la destination est inconnue.

Étape 5. L'entrée jette tandis que des transitions d'un port d'Access/joncteur réseau dans l'étatd'expédition STP

Envoyez les paquets où Eth1/9 est juste un joncteur réseau large (ou port d'accès) - ceci estenregistré comme écart d'entrée tandis que les transitions de port dans un état d'expédition STP.

Nexus-R(config)# int e1/9

Nexus-R(config-if)# switchport mode trunk

Nexus-R# bcm-shell mod 1 "diag counters g" | i i --|IQM|ENQ_DISCARD|Rejects

+-------------------------------------------+-------------------------------------------+-------

------------------------------------+-------------------------------------------+

+-------------------------------------------+-------------------------------------------+-------

------------------------------------+-------------------------------------------+

+-------------------------------------------+-------------------------------------------+-------

------------------------------------+-------------------------------------------+

+-------------------------------------------+-------------------------------------------|

PQP_MC_PKT_CNT = 1,678,949 |

| IQM |

PQP_DSCRD_MC_PKT_CNT = 11,369,033 |


DELETED_PKT_CNT = 11,369,081 |

| Rejects: QUEUE_NOT_VALID_STATUS |

Discards: SRC_EQUAL_DEST |

+-------------------------------------------+-------------------------------------------+-------

------------------------------------+-------------------------------------------+

Nexus-R# show span int e1/9

Vlan Role Sts Cost Prio.Nbr Type

---------------- ---- --- --------- -------- --------------------------------

VLAN0001 Desg BLK 2 128.9 P2p

VLAN0010 Desg BLK 2 128.9 P2p

<snip>

QUEUE_NOT_VALID_STATUS est une baisse due à la décision du processeur de paquet (pp) derelâcher ou une destination non valide reçue des blocs du processeur de paquet (pp).

Étape 6. Les écarts d'entrée dus à Eth1/9 dépassant la ligne évaluent.

Envoie 10G+ dans Eth1/9 aurait comme conséquence un type différent de baisse pendant quevous maxing Eth1/9 dans l'endroit de poing - compte toujours comme écart d'entrée :

bcm-shell.0> diag counters g

|

/|\


R F A C E |

\|/

|

+-------------------------------------------+-------------------------------------------+-------

------------------------------------+-------------------------------------------+

| NBI

|


TX_TOTAL_BYTE_COUNTER = 1,164,231 |


TX_TOTAL_PKT_COUNTER = 17,029 |


|

+-------------------------------------------+-------------------------------------------+-------

------------------------------------+-------------------------------------------+

| IRE |

EPNI |

| CPU_PACKET_COUNTER = 17,010 |

|


EPE_BYTES_COUNTER = 5,721,307 |


EPE_PKT_COUNTER = 50,703 |



| RCY_PACKET_COUNTER = 16,837 |

|


|

+-------------------------------------------+-------------------------------------------+-------

------------------------------------+-------------------------------------------+

| IDR |

EGQ |

| |

|


FQP_PACKET_COUNTER = 50,703 |


PQP_UNICAST_PKT_CNT = 50,683 |

| |


| |

PQP_UC_BYTES_CNT = 5,216,716 |

+-------------------------------------------+-------------------------------------------|


| IQM |


| |

PQP_MC_BYTES_CNT = 2,079 |


EHP_UNICAST_PKT_CNT = 50,683 |







| Rejects: VOQ_MX_QSZ_STATUS |

|

<snip>

Documents

Nexus 9500-R, Nexus 3000-R : Dépannez les écarts d'entrée · Trouvez votre port congestionné par de sortie de la valeur non vide de file d'attente : Si la file d'attente est 303,