「Catalyst 9000 トラブルシューティング」の版間の差分

提供: hkatou_Lab
ナビゲーションに移動 検索に移動
 
(同じ利用者による、間の36版が非表示)
27行目: 27行目:
  
 
== Catalyst 9400 , 9500 , 9600 ==
 
== Catalyst 9400 , 9500 , 9600 ==
 +
 +
=== LED ===
 
ポート LED が'''消灯'''しているときは、有効化しているがリンクアップしていないことを示しています。
 
ポート LED が'''消灯'''しているときは、有効化しているがリンクアップしていないことを示しています。
  
46行目: 48行目:
 
* 入力時に FCS などのエラーを検出してドロップ
 
* 入力時に FCS などのエラーを検出してドロップ
  
 +
==== ポート LED リファレンス ====
 +
Catalyst 9400 : [https://www.cisco.com/c/en/us/td/docs/switches/lan/catalyst9400/hardware/install/b_c9400_hig/b_c9400_hig_chapter_01001.html#id_54006 Table 3. Cisco Catalyst 9400 Series Line Card LEDs]
 +
 +
Catalyst 9500 : [https://www.cisco.com/c/en/us/td/docs/switches/lan/catalyst9500/hardware/install/b_catalyst_9500_hig/9500-leds.html#Cisco_Reference.dita_3338ad14-bbb0-45b6-b7b9-e4b03992a5cc Table 5. Meaning of Switch LED Colors in Different Modes]
 +
 +
Catalyst 9500 High Performance : [https://www.cisco.com/c/en/us/td/docs/switches/lan/catalyst9500/hardware/install/b_catalyst_9500_hig/9500-leds.html#Cisco_Reference.dita_3338ad14-bbb0-45b6-b7b9-e4b03992a5cc Table 5. Meaning of Switch LED Colors for Port Status LED]
  
−
=== ポート LED リファレンス ===
+
Catalyst 9600 : [https://www.cisco.com/c/en/us/td/docs/switches/lan/catalyst9600/hardware/install/b_9600_hig/b_9600_hig_appendix_01000.html#concept_fnp_c3d_zgb Table 4. Line Card LEDs]
−
Catalyst 9500 : [https://www.cisco.com/c/en/us/td/docs/switches/lan/catalyst9500/hardware/install/b_catalyst_9500_hig/m-9500-understanding-the-leds.html#Cisco_Reference.dita_3338ad14-bbb0-45b6-b7b9-e4b03992a5cc Table 4. Meaning of Switch LED Colors in Different Modes]
 
  
−
Ca[https://www.cisco.com/c/en/us/td/docs/switches/lan/catalyst9500/hardware/install/b_catalyst_9500_hig/m-9500-understanding-the-leds.html#Cisco_Reference.dita_3338ad14-bbb0-45b6-b7b9-e4b03992a5cc k]talyst 9500 High Performance : [https://www.cisco.com/c/en/us/td/docs/switches/lan/catalyst9500/hardware/install/b_catalyst_9500_hig/m-9500-understanding-the-leds.html#Cisco_Reference.dita_3338ad14-bbb0-45b6-b7b9-e4b03992a5cc Table 5. Meaning of Switch LED Colors for Port Status LED]
+
=== 1G ポートが使用できません ===
 +
C9500X / C9600X などの Silicon One ASIC 搭載機は、1 , 2.5 , 5 Gbps のポートをサポートしません。 <ref>[https://tmgmatrix.cisco.com/?si=C9500X-28C8D Cisco Optics-to-Device Compatibility Matrix]</ref> <ref>[https://www.cisco.com/c/en/us/td/docs/switches/lan/catalyst9600/hardware/install/b-c9600-lc-installation-note.html#concept_thx_gg5_ljb Cisco Catalyst 9600 Series Line Card Installation Note]
  
 +
With C9600-SUP-1,
 +
 +
・Provides 48 10G, 5G, 2.5G, 1G, 100 Mbps and 10 Mbps interfaces by default. These ports can be interchangeably used as 10G, 5G, 2.5G, 1G, 100 Mbps and 10 Mbps ports.
 +
 +
・All the 48 ports support 10G, 5G, 2.5G, 1G, 100 Mbps and 10 Mbps speeds.
 +
 +
With C9600X-SUP-2, provides 48 ports of 10G speed.</ref>
  
 
== コマンドリスト ==
 
== コマンドリスト ==
95行目: 110行目:
 
|show switch
 
|show switch
 
show switch detail
 
show switch detail
 +
 +
show logging onboard switch 1 uptime detail
 
|スイッチ優先度など
 
|スイッチ優先度など
 
|-
 
|-
 
|[https://www.cisco.com/c/en/us/td/docs/switches/lan/catalyst9500/software/release/16-12/configuration_guide/int_hw/b_1612_int_and_hw_9500_cg/configuring_interface_characteristics.html Interface]
 
|[https://www.cisco.com/c/en/us/td/docs/switches/lan/catalyst9500/software/release/16-12/configuration_guide/int_hw/b_1612_int_and_hw_9500_cg/configuring_interface_characteristics.html Interface]
−
|show interfaces status
+
|show interface
 +
show interfaces status
 
show interfaces counters
 
show interfaces counters
  
108行目: 126行目:
  
 
show sdm prefer
 
show sdm prefer
−
|インターフェースの状態
+
|インターフェース
 +
状態
 
カウンタ
 
カウンタ
  
161行目: 180行目:
 
|-
 
|-
 
| rowspan="4" |Layer3
 
| rowspan="4" |Layer3
−
|Common
+
|[https://www.cisco.com/c/en/us/td/docs/switches/lan/catalyst9500/software/release/16-12/configuration_guide/lyr2/b_1612_lyr2_9500_cg.html Common]
 
|show ip arp
 
|show ip arp
−
show ip interface
 
−
 
 
show ip interface brief
 
show ip interface brief
  
 
show ipv6 neighbors
 
show ipv6 neighbors
 
|ARP エントリ
 
|ARP エントリ
−
IP インターフェース
+
IP インターフェース一覧
−
 
 
−
↑ 一覧
 
  
 
IPv6 ネイバー
 
IPv6 ネイバー
 
|-
 
|-
−
|Security
+
|[https://www.cisco.com/c/en/us/td/docs/switches/lan/catalyst9500/software/release/16-12/configuration_guide/sec/b_1612_sec_9500_cg.html Security]
 
|show ip access-lists
 
|show ip access-lists
 
show ipv6 access-list
 
show ipv6 access-list
200行目: 215行目:
  
 
show ipv6 ospf neighbor
 
show ipv6 ospf neighbor
−
 
−
show ipv6 dhcp interface
 
−
 
−
show ipv6 interface
 
  
 
show ipv6 interface brief
 
show ipv6 interface brief
211行目: 222行目:
 
OSPF ネイバー
 
OSPF ネイバー
  
−
BGP ピア一覧
+
BGP IPv4 ピア一覧
  
 
特定ピアの BGP 広報ルート
 
特定ピアの BGP 広報ルート
221行目: 232行目:
 
IPv6 OSPF ネイバー
 
IPv6 OSPF ネイバー
  
−
IPv6 DHCP インターフェース
+
IPv6 インターフェース一覧
−
 
 
−
IPv6 インターフェース
 
−
 
 
−
↑ 一覧
 
  
 
すべての BGP アドレスファミリの一覧
 
すべての BGP アドレスファミリの一覧
240行目: 247行目:
 
SWV DAD
 
SWV DAD
 
|-
 
|-
−
| rowspan="2" |Catalyst 9000
+
| rowspan="3" |Catalyst 9000
−
|[[Cisco Catalyst 9000 スイッチング プラットフォーム QoS and キューイング ホワイトペーパー|QoS]]
+
|[https://www.cisco.com/c/ja_jp/support/docs/switches/catalyst-9500-series-switches/217703-understand-hardware-resources-on-catalys.html TCAM]
 +
|<nowiki>show platform hardware fed [switch]<number|active|standby> fwd-asic resource tcam utilization</nowiki>
 +
show platform hardware fed switch active fwd-asic resource rewrite utilization
 +
|TCAM 容量確認
 +
fed のあとに switch キーワードがあったりなかったりする
 +
|-
 +
|[https://www.cisco.com/c/en/us/td/docs/switches/lan/catalyst9500/software/release/16-12/configuration_guide/qos/b_1612_qos_9500_cg.html QoS]
 
|show policy-map interface  
 
|show policy-map interface  
−
show platform hardware fed active qos ipf interface <interface-id> dscp-map
+
show platform hardware fed switch active qos dscp-cos counters interface <interface-id>
  
 
show platform hardware fed [switch] [active] qos queue config interface <interface-id>
 
show platform hardware fed [switch] [active] qos queue config interface <interface-id>
249行目: 262行目:
 
show platform hardware fed [switch] [active] qos queue stats interface <interface-id>
 
show platform hardware fed [switch] [active] qos queue stats interface <interface-id>
 
|ポリシーマップ インタフェース
 
|ポリシーマップ インタフェース
−
QoS の DSCP マップ
+
QoS の DSCP-CoS マップのカウンタ
  
 
QoS のポート設定
 
QoS のポート設定
  
 
QoS のポート統計情報
 
QoS のポート統計情報
 +
 +
カウンタのクリアは [[2024-03-13_Catalyst3850_9000_スイッチ_QoS_設定・検証]] を参照してください
 
|-
 
|-
 
|[https://www.cisco.com/c/en/us/td/docs/switches/lan/catalyst9500/software/release/16-12/configuration_guide/vxlan/b_1612_bgp_evpn_vxlan_9500_cg/configuring_evpn_vxlan_layer_2_overlay_network.html EVPN]
 
|[https://www.cisco.com/c/en/us/td/docs/switches/lan/catalyst9500/software/release/16-12/configuration_guide/vxlan/b_1612_bgp_evpn_vxlan_9500_cg/configuring_evpn_vxlan_layer_2_overlay_network.html EVPN]
285行目: 300行目:
  
 
# Input Marking の class で vlan や IP ACL で match させ、DSCP=46 に Remarking する
 
# Input Marking の class で vlan や IP ACL で match させ、DSCP=46 に Remarking する
−
# Output Class で ToS=5 を match させ、Output Queueing でそのクラスを Priority Queue にする
+
# Output Class-map で ToS=5 を match させ、policy-map の Output Queueing でそのクラスを Priority Queue にする
 +
#* ToS=5 を Priority Queue とした場合、StackWise Virtual の SVL わたりで Priority Queueing されない可能性が高いと思われます。
  
 
といった方法があります。QoS の NW 全体設計で、IP Precense or DSCP のどちらかに統一する方針を決めるのが良いでしょう。
 
といった方法があります。QoS の NW 全体設計で、IP Precense or DSCP のどちらかに統一する方針を決めるのが良いでしょう。
294行目: 310行目:
  
  
−
Sasquatch ASIC 系で旧世代の 2960 / 3560(-X) / 3750(-X) では、IP Precedense ベースの出力キュー割当のため、ToS=5 = DSCP=40 が Critical のクラスと定義 <ref>[https://www.cisco.com/c/en/us/td/docs/switches/lan/catalyst3750x_3560x/software/release/12-2_53_se/configuration/guide/3750xscg/swqos.html#53646 Table 39-11 Default DSCP Output Queue Threshold Map]</ref> されています。このため DSCP=40-47 が Priority Queue の Queue1 に入ります。
+
Sasquatch ASIC 系で旧世代の 2960 / 3560(-X) / 3750(-X) では、IP Precedense ベースの出力キュー割当のため、'''ToS=5 = DSCP=40 が Critical のクラスと定義''' <ref>[https://www.cisco.com/c/en/us/td/docs/switches/lan/catalyst3750x_3560x/software/release/12-2_53_se/configuration/guide/3750xscg/swqos.html#53646 Table 39-11 Default DSCP Output Queue Threshold Map]</ref> されています。このため DSCP=40-47 が Priority Queue の Queue1 に入ります。
  
−
リプレースの際は、動作が異なることを理解した上でコンフィグを変更する必要があります。<syntaxhighlight lang="diff">
+
リプレースの際は Catalyst 9000 と動作が異なることを理解した上で、コンフィグを変更する必要があります。<syntaxhighlight lang="diff">
 
show mls qos maps dscp-output-q
 
show mls qos maps dscp-output-q
  
318行目: 334行目:
 
[https://www.cisco.com/c/ja_jp/support/docs/switches/catalyst-9300-switch/216236-troubleshoot-output-drops-on-catalyst-90.html#anc15 出力ドロップを解決するためのバッファの変更] により、共有プールのバッファ割当を 100 -> 1200 に増加させます。
 
[https://www.cisco.com/c/ja_jp/support/docs/switches/catalyst-9300-switch/216236-troubleshoot-output-drops-on-catalyst-90.html#anc15 出力ドロップを解決するためのバッファの変更] により、共有プールのバッファ割当を 100 -> 1200 に増加させます。
  
−
マイクロバーストに対して有効な対策ですが、すべてのポートに発生するバーストに対しては役立ちません。
+
高速なポートについては、大きなバッファが割り当てられるようになっています。
 +
 
 +
マイクロ バースト トラフィックに対して有効な対策ですが、すべてのポートに発生するバーストに対しては役立ちません。
 +
 
 +
* softmax が小さい : すべてのポートにバースト発生する状況で有効、ポートごとのバッファ割当は小さい
 +
* softmax が大きい : 少数のポートに大きなバーストが発生する状況で有効、ポートごとのバッファ割当が大きい
 +
 
 +
Platform / Version により、1200 (UADP2.0) が最大値のものと 4800 (UADP3.0) が最大値のものがあります。
  
−
Platform / Version により、1200 が最大値のものと 4800 が最大値のものがあります。
 
  
  
327行目: 349行目:
 
* 3.6.6 以前 : policy-map を適用したポートに softmax コマンドが有効になる
 
* 3.6.6 以前 : policy-map を適用したポートに softmax コマンドが有効になる
 
* 3.6.6 以降 : policy-map を適用していないポートにも softmax コマンドが有効になる  
 
* 3.6.6 以降 : policy-map を適用していないポートにも softmax コマンドが有効になる  
 +
Catalyst 9000 は 3850 後継機のため、後者の挙動になると考えられます。
  
 
=== パケットドロップ対策のリファレンス ===
 
=== パケットドロップ対策のリファレンス ===
332行目: 355行目:
  
 
Cisco.com : [https://www.cisco.com/c/en/us/support/docs/switches/catalyst-3850-series-switches/200594-Catalyst-3850-Troubleshooting-Output-dr.html#anc15 Catalyst 3850: Troubleshooting Output drops]
 
Cisco.com : [https://www.cisco.com/c/en/us/support/docs/switches/catalyst-3850-series-switches/200594-Catalyst-3850-Troubleshooting-Output-dr.html#anc15 Catalyst 3850: Troubleshooting Output drops]
 +
 +
[https://www.cisco.com/c/ja_jp/support/docs/switches/catalyst-9600-series-switches/220491-understand-output-drops-on-high-speed-in.html Catalyst 9000スイッチの高速インターフェイスでの出力廃棄について]
 +
 +
[https://www.cisco.com/c/ja_jp/support/docs/switches/catalyst-9600-series-switches/217413-understand-why-fcs-errors-input-errors.html マルチギガビットイーサネットポートに接続されたデバイスでのFCSエラー、入力エラー、またはパケット損失の理解]
  
 
hkatou Lab : [[Cisco Catalyst 9000 スイッチング プラットフォーム QoS and キューイング ホワイトペーパー#.E3.82.AD.E3.83.A5.E3.83.BC .E3.83.90.E3.83.83.E3.83.95.E3.82.A1|キュー バッファ]]
 
hkatou Lab : [[Cisco Catalyst 9000 スイッチング プラットフォーム QoS and キューイング ホワイトペーパー#.E3.82.AD.E3.83.A5.E3.83.BC .E3.83.90.E3.83.83.E3.83.95.E3.82.A1|キュー バッファ]]
 +
 +
== StackWise-160 , 320 , 480 , 1T ==
 +
 +
=== 新しいスイッチを導入してスタックケーブルを接続したら、既設で動作中のスイッチが再起動されました 何故ですか ? ===
 +
'''スタックのマージ'''は、以下の条件に該当するスイッチが再起動されます。
 +
 +
# スイッチ優先度の低いスイッチ
 +
# 高い MAC アドレスのを持つスイッチ
 +
 +
この質問の例では以下の条件に当てはまったと考えられます。
 +
 +
* 既設のほうがスイッチ優先度が低い
 +
* スイッチ優先度は同じだが、新しいスイッチが高い MAC アドレスを持っていた
 +
 +
Active が複数台ある場合、電源 On の状態でスタックケーブルをつなぐのは、非推奨です。
 +
 +
電源 Off 状態でスタックケーブルを接続、電源 On するのが推奨です。
 +
 +
* 起動時にスタックケーブル経由で Active スイッチを探し (SDP : Stack Discovery Protocol) て、Standby や Member で起動します。
 +
 +
=== リファレンス ===
 +
[https://www.cisco.com/c/ja_jp/support/docs/switches/catalyst-9300l-switch-stack/218083-troubleshoot-catalyst-9200-9300-reloads.html スタックの問題によるCatalyst 9200/9300のリロードのトラブルシューティング]
 +
 +
[https://www.cisco.com/c/ja_jp/td/docs/switches/lan/catalyst9300/software/release/17-6/configuration_guide/stck_mgr_ha/b_176_stck_mgr_ha_9300_cg/managing_switch_stacks.html#reference_htk_dbg_11b スイッチ スタックの設定のシナリオ]
 +
 +
[[Cisco Catalyst 9300 StackWise システム アーキテクチャ ホワイトペーパー]]
 +
 +
* [[Cisco Catalyst 9300 StackWise システム アーキテクチャ ホワイトペーパー#.E3.82.B9.E3.82.BF.E3.83.83.E3.82.AF.E3.81.AE.E9.81.8B.E7.94.A8|スタックの運用]] がおすすめ
 +
[https://www.cisco.com/c/ja_jp/support/docs/switches/catalyst-9300-series-switches/217684-verify-and-troubleshoot-stackwise-on-cat.html Catalyst 9200/9300 での StackWise の検証とトラブルシューティング]
  
 
== StackWise Virtual ==
 
== StackWise Virtual ==
 +
単体記事に移動しました。
 +
 +
[[2023-08-30 Cisco StackWise Virtual まとめ]]
 +
 +
== 高 CPU 使用率 ==
 +
[https://www.cisco.com/c/ja_jp/support/docs/ios-nx-os-software/ios-xe-16/213549-troubleshoot-high-cpu-usage-in-catalyst.html IOS-XE 16.xを実行するCatalystスイッチプラットフォームでCPU使用率が高い場合のトラブルシューティング]
 +
 +
== CoPP ==
 +
 +
=== DHCP リレーエージェントを設定したんだけど、なんか IP が取れたり取れなかったりするのは何故 ? ===
 +
ICMP を CoPP で Drop しているからかも。
 +
 +
リンク : [https://www.cisco.com/c/ja_jp/support/docs/switches/catalyst-9300-series-switches/217429-troubleshoot-slow-or-intermittent-dhcp-o.html Catalyst 9000 DHCPリレーエージェントでのDHCPの低速または断続的な問題のトラブルシューティング]
 +
 +
== パケットキャプチャ ==
 +
Catalyst 9000 では大きく分けて 3 種類のパケット キャプチャ方法が存在します。
 +
 +
=== SPAN / RSPAN ===
 +
スイッチによくあるポートミラーリングです。ASIC でパケットをミラーリングする機能で、destination ポートに PC を接続し、PC の Wireshark でキャプチャします。
 +
 +
Catalyst 9000 では ACL SPAN が実装されており、ACL でフィルタリングしたパケットのみキャプチャすることが可能です。PC は通常 1G のため、10G 以上は 1G の PC でキャプチャしきれないため、ACL でフィルタしてキャプチャします。
 +
 +
* フィルタリングで重要なパケットを取得対象から外してしまう可能性があります
 +
 +
深刻なトラブルの場合は、専用機ですべてキャプチャさせます。
 +
 +
基本的にはスイッチで使用できる機能のため、ルータではサポートされません。
 +
 +
* Unknown Unicast を Flood やブロードキャストするのと一緒で、パケットを別ポートにコピーする機能が ASIC に存在する
 +
* ルータは通常 ASIC を搭載せず、あってもスイッチとは異なる実装を持つ
 +
 +
 +
destination interface を指定したポートは、他のポートと通信できなくなるため、注意が必要。<syntaxhighlight lang="diff">
 +
configure terminal
 +
monitor session 1 source interface Gi1/0/x both
 +
monitor session 1 destination interface Gi1/0/y
 +
endx
 +
</syntaxhighlight>
 +
=== EPC (Embeded Packet Capture) ===
 +
バッファに保存されたパケットをファイルに保存することが可能です。IOS / IOS-XE に実装。
 +
 +
おそらく ASIC のパケット バッファは対応不可で、CPU 処理されるパケットが対象になると思います。
 +
 +
ちょっとコマンドがややこしいのがたまにキズ。
 +
 +
外部リンク : [https://www.cisco.com/c/ja_jp/support/docs/ios-nx-os-software/ios-embedded-packet-capture/116045-productconfig-epc-00.html ソフトウェアでの組み込みパケットの設定とキャプチャ] [https://www.cisco.com/c/ja_jp/support/docs/switches/catalyst-3850-series-switches/117639-configure-wireshark-00.html 組み込みWiresharkを使用したCatalyst 3850シリーズスイッチの設定]
 +
 +
=== FED (Forwarding Engine Driver) キャプチャ (=FED トレース) ===
 +
CPU を in or out するパケットをキャプチャすることが可能です。
 +
 +
Catalyst 9000 スイッチでは共通して使用可能ですが、IOS-XR や Nexus NX-OS では使用できません。
 +
 +
外部リンク : [https://www.cisco.com/c/ja_jp/support/docs/ios-nx-os-software/ios-xe-gibraltar-16121/216746-configure-punt-inject-fed-packet-capture.html Catalyst 9000スイッチでのFED CPUパケットキャプチャの設定]
 +
 +
== DHCP Snooping ==
 +
リンク : [https://www.cisco.com/c/ja_jp/support/docs/ip/dynamic-host-configuration-protocol-dhcp-dhcpv6/217055-operate-and-troubleshoot-dhcp-snooping.html Catalyst 9000スイッチでのDHCPスヌーピングの操作とトラブルシューティング]
 +
 +
== MTU / MSS ==
 +
[https://www.cisco.com/c/ja_jp/td/docs/switches/lan/catalyst9300/software/release/17-6/configuration_guide/ip/b_176_ip_9300_cg/configuring_tcp_mss_adjustment.html TCP MSS 調整の設定]
  
−
=== 設定ガイドライン ===
+
* 16.8.1a から TCP MSS が調整可能になりました
 +
* 例) MTU 1500 なら tcp adjust-mss を 1460 に設定する
 +
** 計算式) MTU 1500 - IP ヘッダ 20 バイト - TCP ヘッダ 20 バイト = MSS 1460
  
−
* 初期のリリースでは C9500 のアップリンク モジュールで SVL が使用できません
+
== バージョンアップ ==
−
* SVL は 8 ポートまで
 
−
* 設定できるポートに制限あり
 
−
** C9500-16X , 40X : 10G はアップリンクモジュールと混在可能、40G は混在不可
 
−
*** 40G アップリンクモジュールは、オンボードの 10G と速度が異なるため、SVL に混在できません
 
−
** C9500-32C : 1-16 ポートのみ設定可能
 
−
** ブレークアウト , QSA アダプタは SVL , DAD ポートでサポートされません <ref>[https://www.cisco.com/c/en/us/td/docs/switches/lan/catalyst9500/software/release/17-10/release_notes/ol-17-10-9500/limitations_and_restrictions.html#rn-limitations-restrictions-1710x.xml Limitations and Restrictions]
 
  
−
On Cisco Catalyst 9500 Series Switches, when Cisco StackWise Virtual is configured, breakout ports using 4X10G breakout cables, or the Cisco QSFP to SFP or SFP+ Adapter (QSA) module can only be used as data ports; they cannot be used to configure StackWise Virtual links (SVLs) or dual-active detective (DAD) links.</ref>
+
=== バージョンアップした後、しばらくほっておいたら勝手に再起動したんだけど ? ===
−
* SVL の速度は同一である必要があります
+
ISSU との関係で、バージョンアップ後は新バージョンを '''commit で確定する必要'''があります。
−
** 10G / 25G 両対応ポートでは、トランシーバを搭載することでモードが確定するため、25G の場合は搭載しないと設定ができません
 
−
* C9500-24Y4C , 48Y4C で 25G ポートを SVL に使用できます
 
−
* 増速などの設定変更時、再起動が必要です
 
−
* Network Advantage ライセンスが必要です
 
  
−
==== Vlan ID ====
+
commit しない場合、7200 秒後に自動で旧バージョンで再起動されます。 <ref><code>[https://www.cisco.com/c/en/us/td/docs/switches/lan/catalyst9300/software/release/17-6/configuration_guide/sys_mgmt/b_176_sys_mgmt_9300_cg/performing_device_setup_configuration.html *Oct 30 20:15:56.572: %IOSXE-5-PLATFORM: Switch 1 R0/0: Oct 30 20:15:56 rollback_timer.sh:
 +
%INSTALL-5-INSTALL_AUTO_ABORT_TIMER_PROGRESS: Install auto abort timer will expire in 7200 seconds
 +
Install will reload the system now!]</code> </ref>
  
−
* 4094 は使用できません
+
* そもそも install コマンドの最後に commit をつけて確定バージョンアップする
 +
* バージョンアップ後に show install summary で Uncommitted になっていないか確認する
  
−
==== その他の制限 ====
+
を実施しましょう。
−
[https://www.cisco.com/c/en/us/td/docs/switches/lan/catalyst9500/software/release/17-3/configuration_guide/ha/b_173_ha_9500_cg/configuring_cisco_stackwise_virtual.html#reference_kph_hgh_nlb Restrictions for Cisco StackWise Virtual]
 
  
 
== オプティクス ==
 
== オプティクス ==
371行目: 480行目:
  
 
SFP-10G-T-X supports 100Mbps/1G/10G speeds based on auto negotiation with the peer device. You cannot force speed settings from the transceiver.</ref>
 
SFP-10G-T-X supports 100Mbps/1G/10G speeds based on auto negotiation with the peer device. You cannot force speed settings from the transceiver.</ref>
 +
* C9300 はアップリンク モジュールを含め、2024/04 現在サポートされていません
 +
** 最新情報は [https://tmgmatrix.cisco.com/ Cisco Optics-to-Device Compatibility Matrix] を参照してください
  
 
=== ブレークアウト ===
 
=== ブレークアウト ===
377行目: 488行目:
  
 
Breakout is supported only on 24 ports of the C9500-32C switch model.</ref>
 
Breakout is supported only on 24 ports of the C9500-32C switch model.</ref>
 +
 +
=== GLC-T 関係 ===
 +
1 or 10G ポートに GLC-T を挿した場合、1 Gbps で動作するため、10/100 Mbps では基本的に動作しません。
 +
 +
10/100 Mbps に対応しているか、リリースノートで確認する必要があります。
 +
 +
例えば C9300L の場合、16.11.1c から対応<ref>[https://www.cisco.com/c/en/us/td/docs/switches/lan/catalyst9300/software/release/16-11/release_notes/ol-16-11-9300.html#id_116184 Hardware Features in Cisco IOS XE Gibraltar 16.11.1c]
 +
 +
'''Feature Name'''
 +
 +
Cisco Catalyst 9300 Series Switches (C9300L)—Supported Transceiver Modules
 +
 +
'''Description and Documentation Link'''
 +
 +
isco SFP Modules for Gigabit Ethernet
 +
 +
GLC-T (10/100/1000Mbps support)
 +
 +
GLC-TE (10/100/1000Mbps support)</ref>しています。
 +
 +
* 参考 : [[イーサネット トランシーバ TIPS]]
 +
 +
この件についての [https://tmgmatrix.cisco.com/ Optics Compatibility Matrix] は情報が間違っているため、エビデンスになりません。
 +
 +
また、Silicon One ASIC (9500X , 9600X) の場合、10G 以降のみ対応します。5G 以前はリンクアップしません。
  
 
== FAQ ==
 
== FAQ ==
  
 
=== Q1 : Catalyst 3850 / 9000 で QoS の統計情報を取得すると、カウンターの増え方が大きいのはなぜですか ? ===
 
=== Q1 : Catalyst 3850 / 9000 で QoS の統計情報を取得すると、カウンターの増え方が大きいのはなぜですか ? ===
−
A1 : バイト数をカウントするため、値が大きいからです。他のプラットフォームではパケット数のため、比較すると大きい値がカウントされます。
+
A1 : バイト数をカウントするため、値が大きいからです。他のプラットフォームではフレーム数のため、比較すると大きい値がカウントされます。
  
 
MTU 1500 の場合 1 フレームは最大 1522 バイトとなるため、フレーム数カウントと比較して 64 - 1500 倍の比率で大きくなります。
 
MTU 1500 の場合 1 フレームは最大 1522 バイトとなるため、フレーム数カウントと比較して 64 - 1500 倍の比率で大きくなります。
  
−
他のプラットフォームと動作を合わせたい場合など、IOS-XE 16.6.3- 以降では CSCve59640 の変更により、qos queue-stats-frame-count コマンドでフレーム単位のカウンターに変更できます。 <ref>Catalyst 3650 / Catalyst 3850 / Catalyst 9000 :「qos queue-stats-frame-count」コマンドについて https://community.cisco.com/t5/%E3%83%8D%E3%83%83%E3%83%88%E3%83%AF%E3%83%BC%E3%82%AF%E3%82%A4%E3%83%B3%E3%83%95%E3%83%A9%E3%82%B9%E3%83%88%E3%83%A9%E3%82%AF%E3%83%81%E3%83%A3-%E3%83%89%E3%82%AD%E3%83%A5%E3%83%A1%E3%83%B3%E3%83%88/catalyst-3650-catalyst-3850-catalyst-9000-qos-queue-stats-frame/ta-p/4270480</ref>
+
他のプラットフォームと動作を合わせたい場合は、CSCve59640 の変更により IOS-XE 16.6.3- 以降で、qos queue-stats-frame-count コマンドでフレーム単位のカウンターに変更できます。 <ref>Catalyst 3650 / Catalyst 3850 / Catalyst 9000 :「qos queue-stats-frame-count」コマンドについて https://community.cisco.com/t5/%E3%83%8D%E3%83%83%E3%83%88%E3%83%AF%E3%83%BC%E3%82%AF%E3%82%A4%E3%83%B3%E3%83%95%E3%83%A9%E3%82%B9%E3%83%88%E3%83%A9%E3%82%AF%E3%83%81%E3%83%A3-%E3%83%89%E3%82%AD%E3%83%A5%E3%83%A1%E3%83%B3%E3%83%88/catalyst-3650-catalyst-3850-catalyst-9000-qos-queue-stats-frame/ta-p/4270480</ref>
 +
 
 +
=== Q2 : ip default-gateway と ip route 0.0.0.0 はどちらを使うのが正しいですか ? ===
 +
A2 : L2SW は ip default-gateway でデフォルトゲートウェイ、L3SW は ip route 0.0.0.0 でデフォルトルートを使用するのが正しいです。
 +
 
 +
ただし L2SW で Gi0/0 の管理ポートを使用する場合は vrf Mgmt-vrf を使用するため、
  
 +
ip routing で L3SW に変更し、ip route 0.0.0.0 を使用する必要があります。
  
 +
* vrf は ip routing を有効にして L3SW にしないと動作しないため
 
== その他リファレンス ==
 
== その他リファレンス ==
 +
[https://community.cisco.com/t5/tkb-tac-tips-%E3%83%89%E3%82%AD%E3%83%A5%E3%83%A1%E3%83%B3%E3%83%88/%E3%82%88%E3%81%8F%E3%81%82%E3%82%8B%E8%B3%AA%E5%95%8F%E3%81%A8%E8%A7%A3%E6%B1%BA%E6%96%B9%E6%B3%95-tac-sr-collection/ta-p/3215391 よくある質問と解決方法 (TAC SR Collection)]
 +
 +
* TAC 問い合わせする前や、設計・構築前に見ると幸せになれるページ
 +
 
英語版 : [https://www.cisco.com/c/en/us/support/docs/switches/catalyst-9500-series-switches/217703-understand-hardware-resources-on-catalys.html Understand Hardware Resources on Catalyst 9000 Switches]
 
英語版 : [https://www.cisco.com/c/en/us/support/docs/switches/catalyst-9500-series-switches/217703-understand-hardware-resources-on-catalys.html Understand Hardware Resources on Catalyst 9000 Switches]
  
394行目: 541行目:
  
 
* Catalyst9000 で FIB の限界を超えたときに、確認するべきコマンドやエラーメッセージが記載されたページ
 
* Catalyst9000 で FIB の限界を超えたときに、確認するべきコマンドやエラーメッセージが記載されたページ
 +
 +
 +
 +
英語版 : [https://www.cisco.com/c/en/us/support/docs/switches/catalyst-9300-series-switches/217714-understand-ipv4-hardware-resources-on-ca.html Understand IPv4 Hardware Resources on Catalyst 9000 Switches]
 +
 +
日本語版 : [https://www.cisco.com/c/ja_jp/support/docs/switches/catalyst-9300-series-switches/217714-understand-ipv4-hardware-resources-on-ca.html Catalyst 9000スイッチのIPv4ハードウェアリソースについて]
 +
 +
* IPv4 で消費量の増減を確認する方法
 +
* 上記ハードウェア リソース確認の詳細版
 +
 +
 +
 +
英語版 : [https://www.cisco.com/c/en/us/support/docs/switches/catalyst-9400-series-switches/217933-validate-layer-2-hardware-on-catalyst-90.html Validate Layer 2 Hardware on Catalyst 9000 Series Switches]
 +
 +
日本語版 : [https://www.cisco.com/c/ja_jp/support/docs/switches/catalyst-9400-series-switches/217933-validate-layer-2-hardware-on-catalyst-90.html Catalyst 9000シリーズスイッチでのレイヤ2ハードウェアの検証]
 +
 +
* Layer2 TCAM エントリの確認方法
 +
 +
 +
 +
英語版 : [https://www.cisco.com/c/en/us/support/docs/switches/catalyst-9200-series-switches/218446-understand-qos-hardware-resources-on-cat.html Understand QoS Hardware Resources on Catalyst 9000 Switches]
 +
 +
日本語版 : [https://www.cisco.com/c/ja_jp/support/docs/switches/catalyst-9200-series-switches/218446-understand-qos-hardware-resources-on-cat.html Catalyst 9000スイッチのQoSハードウェアリソースについて]
  
  
403行目: 573行目:
 
* SSDP マルチキャストによる NW 機器への影響と対策について
 
* SSDP マルチキャストによる NW 機器への影響と対策について
  
 +
英語版 : [https://www.cisco.com/c/en/us/support/docs/switches/catalyst-9300-series-switches/217684-verify-and-troubleshoot-stackwise-on-cat.html Verify and Troubleshoot Stackwise on Catalyst 9200/9300]
  
 +
日本語版 : [https://www.cisco.com/c/ja_jp/support/docs/switches/catalyst-9300-series-switches/217684-verify-and-troubleshoot-stackwise-on-cat.html Catalyst 9200/9300でのStackwiseの確認とトラブルシューティング]
  
 
英語版 : [https://www.cisco.com/c/en/us/support/docs/switches/catalyst-9300-switch/216236-troubleshoot-output-drops-on-catalyst-90.html Troubleshoot Output Drops on Catalyst 9000 Switches]
 
英語版 : [https://www.cisco.com/c/en/us/support/docs/switches/catalyst-9300-switch/216236-troubleshoot-output-drops-on-catalyst-90.html Troubleshoot Output Drops on Catalyst 9000 Switches]
418行目: 590行目:
  
  
 +
英語版 : [https://www.cisco.com/c/en/us/support/docs/interfaces-modules/catalyst-9600-series-supervisor-engine-1/216193-replace-a-supervisor-module-or-stack-mem.html Replace a Supervisor Module or Stack Member of Catalyst 9000 in HA]
 +
 +
日本語版 : [https://www.cisco.com/c/ja_jp/support/docs/interfaces-modules/catalyst-9600-series-supervisor-engine-1/216193-replace-a-supervisor-module-or-stack-mem.html HAでのCatalyst 9000のスーパーバイザモジュールまたはスタックメンバーの交換]
 +
 +
 +
日本語版 : [https://community.cisco.com/t5/%E3%83%8D%E3%83%83%E3%83%88%E3%83%AF%E3%83%BC%E3%82%AF%E3%82%A4%E3%83%B3%E3%83%95%E3%83%A9%E3%82%B9%E3%83%88%E3%83%A9%E3%82%AF%E3%83%81%E3%83%A3-%E3%83%89%E3%82%AD%E3%83%A5%E3%83%A1%E3%83%B3%E3%83%88/catalyst-3650-catalyst-3850-catalyst-9000-qos-queue-stats-frame/ta-p/4270480 Catalyst 3650 / Catalyst 3850 / Catalyst 9000 :「qos queue-stats-frame-count」コマンドについて]
 +
 +
 +
 +
英語版 : [https://www.cisco.com/c/en/us/support/docs/switches/catalyst-9300-series-switches/216231-upgrade-guide-for-cisco-catalyst-9000-sw.html Upgrade Guide for Catalyst 9000 Switches]
 +
 +
日本語版 : [https://www.cisco.com/c/ja_jp/support/docs/switches/catalyst-9300-series-switches/216231-upgrade-guide-for-cisco-catalyst-9000-sw.html Catalyst 9000スイッチアップグレードガイド]
 +
 +
 +
英語版 : [https://www.cisco.com/c/en/us/support/docs/switches/catalyst-9300-series-switches/216837-extended-fast-software-upgrade-on-cataly.html Understand Extended Fast Software Upgrade on Catalyst 9300 Series Switches]
 +
 +
日本語版 : [https://www.cisco.com/c/ja_jp/support/docs/switches/catalyst-9300-series-switches/216837-extended-fast-software-upgrade-on-cataly.html Catalyst 9300シリーズスイッチでのExtended Fast Software Upgradeについて]
 +
 +
 +
英語版 : [https://www.cisco.com/c/en/us/support/docs/switches/catalyst-9500-series-switches/217233-troubleshoot-mtu-on-catalyst-9000-series.html Troubleshoot MTU on Catalyst 9000 Series Switches]
 +
 +
日本語版 : [https://www.cisco.com/c/ja_jp/support/docs/switches/catalyst-9500-series-switches/217233-troubleshoot-mtu-on-catalyst-9000-series.html Catalyst 9000 シリーズ スイッチでの MTU のトラブルシューティング]
  
−
英語版 : [https://www.cisco.com/c/en/us/support/docs/switches/catalyst-9400-series-switches/217933-validate-layer-2-hardware-on-catalyst-90.html Validate Layer 2 Hardware on Catalyst 9000 Series Switches]
 
  
−
日本語版 : [https://www.cisco.com/c/ja_jp/support/docs/switches/catalyst-9400-series-switches/217933-validate-layer-2-hardware-on-catalyst-90.html Catalyst 9000シリーズスイッチでのレイヤ2ハードウェアの検証]
 
  
−
* Layer2 TCAM エントリの確認方法
+
英語版 : [https://www.cisco.com/c/en/us/td/docs/ios-xml/ios/17_xe/syslogs/17-11-x/b-system-message-guide-17-11-x.html System Message Guide for Cisco IOS XE Dublin 17.11.x]
  
 +
日本語版 : [https://www.cisco.com/c/ja_jp/td/docs/ios-xml/ios/17_xe/syslogs/17-11-x/b-system-message-guide-17-11-x.html Cisco IOS XE Dublin 17.11.x システムメッセージガイド]
  
−
[https://community.cisco.com/t5/%E3%83%8D%E3%83%83%E3%83%88%E3%83%AF%E3%83%BC%E3%82%AF%E3%82%A4%E3%83%B3%E3%83%95%E3%83%A9%E3%82%B9%E3%83%88%E3%83%A9%E3%82%AF%E3%83%81%E3%83%A3-%E3%83%89%E3%82%AD%E3%83%A5%E3%83%A1%E3%83%B3%E3%83%88/catalyst-3650-catalyst-3850-catalyst-9000-qos-queue-stats-frame/ta-p/4270480 Catalyst 3650 / Catalyst 3850 / Catalyst 9000 :「qos queue-stats-frame-count」コマンドについて]
+
[https://www.cisco.com/c/ja_jp/support/docs/switches/catalyst-9300-series-switches/220367-troubleshoot-etherchannels-on-catalyst-9.html Catalyst 9000スイッチでのEtherChannelのトラブルシューティング]
 +
 +
[https://www.cisco.com/c/ja_jp/support/docs/switches/catalyst-9200-series-switches/220197-use-iperf-on-catalyst-9000-switches-to-p.html Catalyst 9000スイッチでのiPerfを使用した帯域幅テストの実行]
 +
[https://www.cisco.com/c/ja_jp/support/switches/catalyst-9300-series-switches/products-tech-notes-list.html トラブルシューティング テクニカルノーツ]
  
 
== 引用 ==
 
== 引用 ==
 
[[カテゴリ:Catalyst 9000]]
 
[[カテゴリ:Catalyst 9000]]
 
[[カテゴリ:Catalyst]]
 
[[カテゴリ:Catalyst]]

2024年4月23日 (火) 14:23時点における最新版

Catalyst 9200 , 9300

ポート LED が消灯しているときは、リンクアップしていない、または管理シャットダウンしていることを示しています。


ポート LED がアンバー (オレンジ) に点灯したときは、フレーム・パケットが転送できないことを示しています。

Layer 2 プロトコルで転送が停止されている

  • Access ポートに設定した Vlan が作成されていない
  • STP で BLK
  • FlexLink で Backup


ポート LED がグリーンとアンバー (オレンジ) で点滅しているときは、エラーが発生していることを示しています。

  • 入力時に FCS などのエラーを検出してドロップ


ポート LED がグリーンと消灯で点滅しているときは、フレーム・パケットを転送していることを示しています。

ポート LED リファレンス

Catalyst 9200 : Table 6. Meaning of Switch LED Colors in Different Modes

Catalyst 9300 : Table 12. Meaning of Switch LED Colors in Different Modes


Catalyst 9400 , 9500 , 9600

LED

ポート LED が消灯しているときは、有効化しているがリンクアップしていないことを示しています。

  • Catalyst 9200 , 9300 とは異なり、管理シャットダウン時は消灯しません


ポート LED がアンバー (オレンジ) に点灯したときは、フレーム・パケットが転送できないことを示しています。

  1. 管理シャットダウンしている
    • 9400 , 9500 , 9600 はディストリビューション層・コア層で使用され、不要なポートはシャットダウンするのが一般的であるため、管理シャットダウンが明示的にわかるようになっています
  2. Layer 2 プロトコルで転送が停止されている
    • Access ポートに設定した Vlan が作成されていない
    • STP で BLK
    • FlexLink で Backup


ポート LED がグリーンとアンバー (オレンジ) で点滅しているときは、エラーが発生していることを示しています。

  • 入力時に FCS などのエラーを検出してドロップ

ポート LED リファレンス

Catalyst 9400 : Table 3. Cisco Catalyst 9400 Series Line Card LEDs

Catalyst 9500 : Table 5. Meaning of Switch LED Colors in Different Modes

Catalyst 9500 High Performance : Table 5. Meaning of Switch LED Colors for Port Status LED

Catalyst 9600 : Table 4. Line Card LEDs

1G ポートが使用できません

C9500X / C9600X などの Silicon One ASIC 搭載機は、1 , 2.5 , 5 Gbps のポートをサポートしません。 [1] [2]

コマンドリスト

作業日、全作業の事前・事後ログに取りたいコマンドのリスト。

作業中はコンフィグを変更する機能に絞って、変更前と変更後に取得して、Winmerge で比較し差分が妥当であるか確認します。

Catalyst 9000 シリーズ 事前・事後ログリスト
大区分 小区分 コマンド 備考
ターミナル設定 terminal exec prompt timestamp

terminal length 0

サポート show tech-support password
Common System Management show version

show running-config

show log

show ntp associations

IOS-XE Version , ライセンス

動作中のコンフィグ

メモリに保存された log

NTP 同期

Layer1 Hardware show switch

show switch detail

show logging onboard switch 1 uptime detail

スイッチ優先度など
Interface show interface

show interfaces status show interfaces counters

show interfaces counters error

show interfaces transceiver

show controllers utilization

show sdm prefer

インターフェース

状態 カウンタ

エラーカウンタ

トランシーバの DOM 取得

ポートの使用率

SDM テンプレート

Layer2 Common show vlan

show mac address-table

show mac address-table  aging-time

show interfaces trunk

show udld

show udld neighbors

Vlan

MAC アドレステーブル

↑ エージングタイム

トランクの状態

UDLD

UDLD 対向側

Security show storm-control ストームコントロール
Redundancy Protocol show etherchannel summary

show etherchannel load-balance

show spanning-tree

show rep topology

イーサチャネル

負荷分散メソッド

スパニングツリー

REP トポロジ

Layer3 Common show ip arp

show ip interface brief

show ipv6 neighbors

ARP エントリ

IP インターフェース一覧

IPv6 ネイバー

Security show ip access-lists

show ipv6 access-list

IPv4 アクセスリスト

IPv6 アクセスリスト

Addressing Services - FHRP show standby brief

show vrrp brief

HSRP 一覧

VRRP 一覧

Routing show ip route

show ip ospf neighbor

show ip bgp summary

show ip bgp neighbor x.x.x.x advertised-routes

show ip bgp neighbor x.x.x.x received-routes

show ipv6 route

show ipv6 ospf neighbor

show ipv6 interface brief

show bgp all summary

IPv4 ルート

OSPF ネイバー

BGP IPv4 ピア一覧

特定ピアの BGP 広報ルート

特定ピアの BGP 受信ルート

IPv4 ルート

IPv6 OSPF ネイバー

IPv6 インターフェース一覧

すべての BGP アドレスファミリの一覧

Catalyst 9500 StackWise Virtual show stackwise-virtual

show stackwise-virtual link

show stackwise-virtual dual-active-detection

StackWise Virtual (SWV)

SVLink

SWV DAD

Catalyst 9000 TCAM show platform hardware fed [switch]<number|active|standby> fwd-asic resource tcam utilization

show platform hardware fed switch active fwd-asic resource rewrite utilization

TCAM 容量確認

fed のあとに switch キーワードがあったりなかったりする

QoS show policy-map interface

show platform hardware fed switch active qos dscp-cos counters interface <interface-id>

show platform hardware fed [switch] [active] qos queue config interface <interface-id>

show platform hardware fed [switch] [active] qos queue stats interface <interface-id>

ポリシーマップ インタフェース

QoS の DSCP-CoS マップのカウンタ

QoS のポート設定

QoS のポート統計情報

カウンタのクリアは 2024-03-13_Catalyst3850_9000_スイッチ_QoS_設定・検証 を参照してください

EVPN show l2vpn evpn peers vxlan

show nve peers

show l2vpn evpn mac

show bgp l2vpn evpn all

show platform software fed switch active matm macTable vlan

EVPN L2VPN のピア

NVE インタフェースのピア

EVPN L2VPN の MAC アドレス

BGP L2VPN アドレスファミリ

TCAM の MAC アドレステーブル


QoS

Q1 : IP Precedense 5 (ToS=5) のパケットを受信しても、output policy に指定した Priority Queue に入りません

UADP ASIC の 3650 / 3850 / 9000 では、DSCP ベースの出力キュー割当になった [3] ため、Priority Queue は Expedited Forwarding (EF) の DSCP=46 に割り当てられています。これは ToS=5 の DSCP=40 と異なるため、Priority Queue には入りません。


VoIP パケットを生成する機器が IP Precense ベースで実装されている場合、ToS を trust しても Priority Queue に入りません。対応方法としては、

  1. Input Marking の class で vlan や IP ACL で match させ、DSCP=46 に Remarking する
  2. Output Class-map で ToS=5 を match させ、policy-map の Output Queueing でそのクラスを Priority Queue にする
    • ToS=5 を Priority Queue とした場合、StackWise Virtual の SVL わたりで Priority Queueing されない可能性が高いと思われます。

といった方法があります。QoS の NW 全体設計で、IP Precense or DSCP のどちらかに統一する方針を決めるのが良いでしょう。

ACL をメンテナンスしなくて良くなるため、状況が許せば Vlan で marking するのが楽です。



Sasquatch ASIC 系で旧世代の 2960 / 3560(-X) / 3750(-X) では、IP Precedense ベースの出力キュー割当のため、ToS=5 = DSCP=40 が Critical のクラスと定義 [4] されています。このため DSCP=40-47 が Priority Queue の Queue1 に入ります。

リプレースの際は Catalyst 9000 と動作が異なることを理解した上で、コンフィグを変更する必要があります。

show mls qos maps dscp-output-q

   Dscp-outputq-threshold map:
     d1 :d2    0     1     2     3     4     5     6     7     8     9
     ------------------------------------------------------------
      0 :    02-01 02-01 02-01 02-01 02-01 02-01 02-01 02-01 02-01 02-01
      1 :    02-01 02-01 02-01 02-01 02-01 02-01 03-01 03-01 03-01 03-01
      2 :    03-01 03-01 03-01 03-01 03-01 03-01 03-01 03-01 03-01 03-01
      3 :    03-01 03-01 04-01 04-01 04-01 04-01 04-01 04-01 04-01 04-01
      4 :    01-01 01-01 01-01 01-01 01-01 01-01 01-01 01-01 04-01 04-01
      5 :    04-01 04-01 04-01 04-01 04-01 04-01 04-01 04-01 04-01 04-01
      6 :    04-01 04-01 04-01 04-01

d1 が 10 桁目、d2 が 1 桁目で、DSCP=40 なら d1 が 4 の行、d2 が 0 の列を確認し、

交点の 01-01 が、Queue 1 Threshold 1 を意味します。

パケットドロップ対策

パケットバッファの割当を増加

出力ドロップを解決するためのバッファの変更 により、共有プールのバッファ割当を 100 -> 1200 に増加させます。

高速なポートについては、大きなバッファが割り当てられるようになっています。

マイクロ バースト トラフィックに対して有効な対策ですが、すべてのポートに発生するバーストに対しては役立ちません。

  • softmax が小さい : すべてのポートにバースト発生する状況で有効、ポートごとのバッファ割当は小さい
  • softmax が大きい : 少数のポートに大きなバーストが発生する状況で有効、ポートごとのバッファ割当が大きい

Platform / Version により、1200 (UADP2.0) が最大値のものと 4800 (UADP3.0) が最大値のものがあります。


Catalyst 3850 の場合、CSCuz86625 の実装変更前後で挙動が異なります。

  • 3.6.6 以前 : policy-map を適用したポートに softmax コマンドが有効になる
  • 3.6.6 以降 : policy-map を適用していないポートにも softmax コマンドが有効になる

Catalyst 9000 は 3850 後継機のため、後者の挙動になると考えられます。

パケットドロップ対策のリファレンス

Cisco.com : Command Reference qos queue-softmax-multiplier

Cisco.com : Catalyst 3850: Troubleshooting Output drops

Catalyst 9000スイッチの高速インターフェイスでの出力廃棄について

マルチギガビットイーサネットポートに接続されたデバイスでのFCSエラー、入力エラー、またはパケット損失の理解

hkatou Lab : キュー バッファ

StackWise-160 , 320 , 480 , 1T

新しいスイッチを導入してスタックケーブルを接続したら、既設で動作中のスイッチが再起動されました 何故ですか ?

スタックのマージは、以下の条件に該当するスイッチが再起動されます。

  1. スイッチ優先度の低いスイッチ
  2. 高い MAC アドレスのを持つスイッチ

この質問の例では以下の条件に当てはまったと考えられます。

  • 既設のほうがスイッチ優先度が低い
  • スイッチ優先度は同じだが、新しいスイッチが高い MAC アドレスを持っていた

Active が複数台ある場合、電源 On の状態でスタックケーブルをつなぐのは、非推奨です。

電源 Off 状態でスタックケーブルを接続、電源 On するのが推奨です。

  • 起動時にスタックケーブル経由で Active スイッチを探し (SDP : Stack Discovery Protocol) て、Standby や Member で起動します。

リファレンス

スタックの問題によるCatalyst 9200/9300のリロードのトラブルシューティング

スイッチ スタックの設定のシナリオ

Cisco Catalyst 9300 StackWise システム アーキテクチャ ホワイトペーパー

Catalyst 9200/9300 での StackWise の検証とトラブルシューティング

StackWise Virtual

単体記事に移動しました。

2023-08-30 Cisco StackWise Virtual まとめ

高 CPU 使用率

IOS-XE 16.xを実行するCatalystスイッチプラットフォームでCPU使用率が高い場合のトラブルシューティング

CoPP

DHCP リレーエージェントを設定したんだけど、なんか IP が取れたり取れなかったりするのは何故 ?

ICMP を CoPP で Drop しているからかも。

リンク : Catalyst 9000 DHCPリレーエージェントでのDHCPの低速または断続的な問題のトラブルシューティング

パケットキャプチャ

Catalyst 9000 では大きく分けて 3 種類のパケット キャプチャ方法が存在します。

SPAN / RSPAN

スイッチによくあるポートミラーリングです。ASIC でパケットをミラーリングする機能で、destination ポートに PC を接続し、PC の Wireshark でキャプチャします。

Catalyst 9000 では ACL SPAN が実装されており、ACL でフィルタリングしたパケットのみキャプチャすることが可能です。PC は通常 1G のため、10G 以上は 1G の PC でキャプチャしきれないため、ACL でフィルタしてキャプチャします。

  • フィルタリングで重要なパケットを取得対象から外してしまう可能性があります

深刻なトラブルの場合は、専用機ですべてキャプチャさせます。

基本的にはスイッチで使用できる機能のため、ルータではサポートされません。

  • Unknown Unicast を Flood やブロードキャストするのと一緒で、パケットを別ポートにコピーする機能が ASIC に存在する
  • ルータは通常 ASIC を搭載せず、あってもスイッチとは異なる実装を持つ


destination interface を指定したポートは、他のポートと通信できなくなるため、注意が必要。

configure terminal
monitor session 1 source interface Gi1/0/x both
monitor session 1 destination interface Gi1/0/y
endx

EPC (Embeded Packet Capture)

バッファに保存されたパケットをファイルに保存することが可能です。IOS / IOS-XE に実装。

おそらく ASIC のパケット バッファは対応不可で、CPU 処理されるパケットが対象になると思います。

ちょっとコマンドがややこしいのがたまにキズ。

外部リンク : ソフトウェアでの組み込みパケットの設定とキャプチャ 組み込みWiresharkを使用したCatalyst 3850シリーズスイッチの設定

FED (Forwarding Engine Driver) キャプチャ (=FED トレース)

CPU を in or out するパケットをキャプチャすることが可能です。

Catalyst 9000 スイッチでは共通して使用可能ですが、IOS-XR や Nexus NX-OS では使用できません。

外部リンク : Catalyst 9000スイッチでのFED CPUパケットキャプチャの設定

DHCP Snooping

リンク : Catalyst 9000スイッチでのDHCPスヌーピングの操作とトラブルシューティング

MTU / MSS

TCP MSS 調整の設定

  • 16.8.1a から TCP MSS が調整可能になりました
  • 例) MTU 1500 なら tcp adjust-mss を 1460 に設定する
    • 計算式) MTU 1500 - IP ヘッダ 20 バイト - TCP ヘッダ 20 バイト = MSS 1460

バージョンアップ

バージョンアップした後、しばらくほっておいたら勝手に再起動したんだけど ?

ISSU との関係で、バージョンアップ後は新バージョンを commit で確定する必要があります。

commit しない場合、7200 秒後に自動で旧バージョンで再起動されます。 [5]

  • そもそも install コマンドの最後に commit をつけて確定バージョンアップする
  • バージョンアップ後に show install summary で Uncommitted になっていないか確認する

を実施しましょう。

オプティクス

SFP-10G-T-X

  • シャーシごとに 8 ポートまで使用可能 [6]
  • オートネゴシエーションのみサポート、固定速度はサポートされません [7]
  • C9300 はアップリンク モジュールを含め、2024/04 現在サポートされていません

ブレークアウト

  • C9500-32C はブレークアウト非対応ポートがあります [8]

GLC-T 関係

1 or 10G ポートに GLC-T を挿した場合、1 Gbps で動作するため、10/100 Mbps では基本的に動作しません。

10/100 Mbps に対応しているか、リリースノートで確認する必要があります。

例えば C9300L の場合、16.11.1c から対応[9]しています。

この件についての Optics Compatibility Matrix は情報が間違っているため、エビデンスになりません。

また、Silicon One ASIC (9500X , 9600X) の場合、10G 以降のみ対応します。5G 以前はリンクアップしません。

FAQ

Q1 : Catalyst 3850 / 9000 で QoS の統計情報を取得すると、カウンターの増え方が大きいのはなぜですか ?

A1 : バイト数をカウントするため、値が大きいからです。他のプラットフォームではフレーム数のため、比較すると大きい値がカウントされます。

MTU 1500 の場合 1 フレームは最大 1522 バイトとなるため、フレーム数カウントと比較して 64 - 1500 倍の比率で大きくなります。

他のプラットフォームと動作を合わせたい場合は、CSCve59640 の変更により IOS-XE 16.6.3- 以降で、qos queue-stats-frame-count コマンドでフレーム単位のカウンターに変更できます。 [10]

Q2 : ip default-gateway と ip route 0.0.0.0 はどちらを使うのが正しいですか ?

A2 : L2SW は ip default-gateway でデフォルトゲートウェイ、L3SW は ip route 0.0.0.0 でデフォルトルートを使用するのが正しいです。

ただし L2SW で Gi0/0 の管理ポートを使用する場合は vrf Mgmt-vrf を使用するため、

ip routing で L3SW に変更し、ip route 0.0.0.0 を使用する必要があります。

  • vrf は ip routing を有効にして L3SW にしないと動作しないため

その他リファレンス

よくある質問と解決方法 (TAC SR Collection)

  • TAC 問い合わせする前や、設計・構築前に見ると幸せになれるページ

英語版 : Understand Hardware Resources on Catalyst 9000 Switches

日本語版 : Catalyst 9000スイッチのハードウェアリソースについて

  • Catalyst9000 で FIB の限界を超えたときに、確認するべきコマンドやエラーメッセージが記載されたページ


英語版 : Understand IPv4 Hardware Resources on Catalyst 9000 Switches

日本語版 : Catalyst 9000スイッチのIPv4ハードウェアリソースについて

  • IPv4 で消費量の増減を確認する方法
  • 上記ハードウェア リソース確認の詳細版


英語版 : Validate Layer 2 Hardware on Catalyst 9000 Series Switches

日本語版 : Catalyst 9000シリーズスイッチでのレイヤ2ハードウェアの検証

  • Layer2 TCAM エントリの確認方法


英語版 : Understand QoS Hardware Resources on Catalyst 9000 Switches

日本語版 : Catalyst 9000スイッチのQoSハードウェアリソースについて


英語版 : Implement SSDP Best Practices on Catalyst 9000 Series Switches

日本語版 : Catalyst 9000シリーズスイッチでのSSDPベストプラクティスの実装

  • SSDP マルチキャストによる NW 機器への影響と対策について

英語版 : Verify and Troubleshoot Stackwise on Catalyst 9200/9300

日本語版 : Catalyst 9200/9300でのStackwiseの確認とトラブルシューティング

英語版 : Troubleshoot Output Drops on Catalyst 9000 Switches

日本語版 : Catalyst 9000スイッチでの出力廃棄のトラブルシューティング

  • QoS のキューごとに入ったバイト数 or フレーム数や、ドロップ数を確認する方法など


英語版 : Verify and Troubleshoot Stackwise on Catalyst 9200/9300

日本語版 : Catalyst 9200/9300でのStackwiseの確認とトラブルシューティング


英語版 : Replace a Supervisor Module or Stack Member of Catalyst 9000 in HA

日本語版 : HAでのCatalyst 9000のスーパーバイザモジュールまたはスタックメンバーの交換


日本語版 : Catalyst 3650 / Catalyst 3850 / Catalyst 9000 :「qos queue-stats-frame-count」コマンドについて


英語版 : Upgrade Guide for Catalyst 9000 Switches

日本語版 : Catalyst 9000スイッチアップグレードガイド


英語版 : Understand Extended Fast Software Upgrade on Catalyst 9300 Series Switches

日本語版 : Catalyst 9300シリーズスイッチでのExtended Fast Software Upgradeについて


英語版 : Troubleshoot MTU on Catalyst 9000 Series Switches

日本語版 : Catalyst 9000 シリーズ スイッチでの MTU のトラブルシューティング


英語版 : System Message Guide for Cisco IOS XE Dublin 17.11.x

日本語版 : Cisco IOS XE Dublin 17.11.x システムメッセージガイド

Catalyst 9000スイッチでのEtherChannelのトラブルシューティング

Catalyst 9000スイッチでのiPerfを使用した帯域幅テストの実行 トラブルシューティング テクニカルノーツ

引用

  1. ↑ Cisco Optics-to-Device Compatibility Matrix
  2. ↑ Cisco Catalyst 9600 Series Line Card Installation Note With C9600-SUP-1, ・Provides 48 10G, 5G, 2.5G, 1G, 100 Mbps and 10 Mbps interfaces by default. These ports can be interchangeably used as 10G, 5G, 2.5G, 1G, 100 Mbps and 10 Mbps ports. ・All the 48 ports support 10G, 5G, 2.5G, 1G, 100 Mbps and 10 Mbps speeds. With C9600X-SUP-2, provides 48 ports of 10G speed.
  3. ↑ 2P6Q3T with WTD or WRED: Wired Port Egress Queuing Model P.65
  4. ↑ Table 39-11 Default DSCP Output Queue Threshold Map
  5. ↑ [https://www.cisco.com/c/en/us/td/docs/switches/lan/catalyst9300/software/release/17-6/configuration_guide/sys_mgmt/b_176_sys_mgmt_9300_cg/performing_device_setup_configuration.html *Oct 30 20:15:56.572: %IOSXE-5-PLATFORM: Switch 1 R0/0: Oct 30 20:15:56 rollback_timer.sh: %INSTALL-5-INSTALL_AUTO_ABORT_TIMER_PROGRESS: Install auto abort timer will expire in 7200 seconds Install will reload the system now!]
  6. ↑ Limitations and Restrictions Installation restriction for SFP-10G-T-X module on C9500-24Y4C and C9500-48Y4C— Only eight SFP-10G-T-X modules are supported at a time.
  7. ↑ Limitations and Restrictions SFP-10G-T-X supports 100Mbps/1G/10G speeds based on auto negotiation with the peer device. You cannot force speed settings from the transceiver.
  8. ↑ Port Mapping for Cisco Catalyst 9500 Series High Performance Switches Breakout is supported only on 24 ports of the C9500-32C switch model.
  9. ↑ Hardware Features in Cisco IOS XE Gibraltar 16.11.1c Feature Name Cisco Catalyst 9300 Series Switches (C9300L)—Supported Transceiver Modules Description and Documentation Link isco SFP Modules for Gigabit Ethernet GLC-T (10/100/1000Mbps support) GLC-TE (10/100/1000Mbps support)
  10. ↑ Catalyst 3650 / Catalyst 3850 / Catalyst 9000 :「qos queue-stats-frame-count」コマンドについて https://community.cisco.com/t5/%E3%83%8D%E3%83%83%E3%83%88%E3%83%AF%E3%83%BC%E3%82%AF%E3%82%A4%E3%83%B3%E3%83%95%E3%83%A9%E3%82%B9%E3%83%88%E3%83%A9%E3%82%AF%E3%83%81%E3%83%A3-%E3%83%89%E3%82%AD%E3%83%A5%E3%83%A1%E3%83%B3%E3%83%88/catalyst-3650-catalyst-3850-catalyst-9000-qos-queue-stats-frame/ta-p/4270480
「http://hkatou.net/index.php?title=Catalyst_9000_トラブルシューティング&oldid=1944」から取得