Provisioning paused: driver package failed validation
プロビジョニングパイプライン
タイムライン
-
解決済み
Resolved at 18:02 UTC. Duration: 33 minutes. 4 orders were delivered late; each customer has been told, and the delay is added to their term.
-
監視中
Provisioning has resumed and the queue is clearing. Each affected node is being re-provisioned from scratch.
-
原因特定
The package was corrupted on our mirror during a sync. We have re-fetched it from the upstream source and its checksum matches.
-
調査中
New provisioning is paused since 17:29 UTC: the NVIDIA driver package (580.65.06) failed its checksum validation on every node it was applied to. We stop rather than ship a machine with an unverified driver.
事後レビュー ·
発生した事象と変更内容
原因
A sync from the upstream driver mirror was interrupted and left a truncated 580.65.06 package with a stale checksum file, which our validation step then rejected on every node.
影響度
Provisioning stopped for 33 minutes. 4 orders were delivered late. No machine was shipped with a bad driver.
変更内容
- Mirror syncs are now atomic: a package and its checksum are published together or not at all.
- The provisioning pipeline retries a validation failure against the upstream source before stopping.
時刻はお使いのタイムゾーン()で表示されます。
関連ページ
- サービスステータスgpuserver.ioの全コンポーネントと全データセンターのライブステータス。5都市から60秒ごとに監視プローブで測定し、90日間の稼働率と2022年以降のインシデントログを掲載。
- インシデント履歴gpuserver.ioで2022年9月の監視開始以降に発生した、すべてのインシデントとメンテナンス時間帯を月別に掲載。タイムラインと事後レビューも収録しています。
- サービスレベル契約稼働率99.9%の約束：何がダウンタイムとみなされるか、外部からどう測定するか、失った1分につき契約期間を5分延長する仕組み、そして適用除外の全内容。
- ネットワーク最大25Gbit/sの無制限ポート、拠点ごとに2つのキャリアと1つのIX、常時稼働のDDoSフィルタリング、ルーテッドIPv6。そして、提供しない4つのことを最初に明示します。