Faulted link observed during MUPdate with limited retrospective debugging
メンテナーはふだん 2 日以内に返信
@rcgoodfellow がすでに取り組んでいます。
2026年4月1日 から。
評価
この issue はまだ評価されていません。
説明
We observed failures during initial manufacturing MUPdate of sled 22 in a rack. I'm leaving the issue title here open ended since I am relatively unfamiliar with the system. The things we'd like are (1) a mechanism to understand why a link (e.g. rear22/0) is in a Faulted state and (2) a mechanism (e.g. logs) to get this retrospectively - for example, after ignition cycle when links are back up.
See internal ticket for details here: https://github.com/oxidecomputer/mfg-troubleshooting/issues/926.
/staff/adam/dendrite-fault-rear22/ contains the output of swadm link history and the dendrite service logs.
adam@atrium ~ $ find /staff/adam/dendrite-fault-rear22/ -type f
/staff/adam/dendrite-fault-rear22/XXXXXXXX/swadm-link-history-rear220.txt
/staff/adam/dendrite-fault-rear22/XXXXXXXX/oxide-dendrite:default.log
/staff/adam/dendrite-fault-rear22/YYYYYYYY/oxide-dendrite:default.log
/staff/adam/dendrite-fault-rear22/YYYYYYYY/swadm-link-history-rear220.txt
MUPdate was hung downloading installinator because both links were down:
XXXXXXXX # dladm
LINK CLASS MTU STATE BRIDGE OVER
cxgbe0 phys 1500 down -- --
cxgbe1 phys 1500 down -- --
bootstrap\_stub0 etherstub 9000 up -- --
bootstrap0 vnic 1500 up -- bootstrap\_stub0
XXXXXXXX #
swadm link ls in the switch zones showed rear22/0 in a Faulted state.
support@oxz_switch0:~$ swadm link ls
...
rear22/0 Copper 100G RS true true Faulted xx:xx:xx:xx:xx:xx
...
We ignition cycled multiple times and XXXXXXXX / 22 rebooted with all links up:
XXXXXXXX # dladm
LINK CLASS MTU STATE BRIDGE OVER
cxgbe0 phys 9000 up -- --
cxgbe1 phys 9000 up -- --
XXXXXXXX #
Likewise, we lost the Faulted state in swadm link ls:
support@oxz_switch0:~$ swadm link ls
...
rear22/0 Copper 100G RS true true Up xx:xx:xx:xx:xx:xx
...
dendrite logs show the link transitioning out of Faulted:
20:17:41.822Z DEBG dpd: Link update
link_id = 0
new = Up
old = Faulted
port_id = rear22
state = LinkUp
unit = callback_handler
swadm link history showed loops of:
14241983 PortFSM Idle -
14242053 PortFSM Abort -
14247600 PortFSM WaitAutoNegLinkTrainingDone -
14250248 PortFSM WaitAutoNegDone -
until ignition cycles resulted in the link going up:
Time Class Subclass Channel Details
3746629 PortFSM LinkUp -
3746639 PortFSM LinkDown -
3747009 PortFSM WaitAutoNegLinkTrainingDone -
4197483 PortFSM WaitAutoNegDone -
4198486 PortFSM Idle -
- 主要言語
- Rust
- スター
- 21
- フォーク
- 3
- 平均マージ
- 2日 23時間
- マージ済み PR（30日）
- 6
環境構築
このプロジェクトには開発コンテナ、Dockerfile、コントリビューションガイドがありません。まず README を読み、一般的な手順ははじめてのコントリビューションガイドを参照してください。
はじめの一歩
- issue を最後まで読み、次にプロジェクトのコントリビューションガイドを読みます。
- 着手することを issue にコメントします — 二人が同じ作業をするのを防げます。
- リポジトリをフォークし、ブランチを切って変更します。
- issue 番号を参照したプルリクエストを送ります。
oxidecomputer/dendrite のほかの issue
-
難易度 4/5 3〜5日 初心者へのやさしさ 35/100
oxidecomputer/dendrite#404 · コメント 1 件 · リアクション 1 件 ·
メンテナーはふだん 2 日以内に返信
-
難易度 3/5 1〜2日 初心者へのやさしさ 45/100
oxidecomputer/dendrite#402 ·
メンテナーはふだん 2 日以内に返信
-
難易度 4/5 3〜5日 初心者へのやさしさ 35/100
oxidecomputer/dendrite#384 · コメント 1 件 ·
メンテナーはふだん 2 日以内に返信
-
難易度 3/5 1〜2日 初心者へのやさしさ 65/100
oxidecomputer/dendrite#375 ·
メンテナーはふだん 2 日以内に返信
-
難易度 5/5 1週間以上 初心者へのやさしさ 35/100
oxidecomputer/dendrite#369 · コメント 1 件 ·
メンテナーはふだん 2 日以内に返信
oxidecomputer/dendrite の issue をすべて見る
似ている issue
-
founders_reward panics on a configured Testnet when the slow-start subsidy is not a multiple of 5オープンexternal-contribution
難易度 2/5 1〜3時間 初心者へのやさしさ 78/100
ZcashFoundation/zebra#11792 ·
メンテナーはふだん 1 日以内に返信
-
area/cli bug
難易度 2/5 1〜3時間 初心者へのやさしさ 85/100
-
難易度 2/5 1〜3時間 初心者へのやさしさ 67/100
bherbruck/solvecraft#2167 ·
-
難易度 2/5 1〜3時間 初心者へのやさしさ 88/100
メンテナーはふだん 1 日以内に返信
-
bug
難易度 2/5 1〜3時間 初心者へのやさしさ 72/100
bitcoindevkit/bdk-cli#357 ·
メンテナーはふだん 3 日以内に返信