1720237085
2024-07-05 18:51:20
2022年に1200万人が無線および有線サービスを利用できなくなったロジャーズ社の障害は人為的ミスが原因で、管理とシステムの「欠陥」によって状況が悪化したと、カナダの電気通信規制当局のために実施された独立調査で述べられている。
調査報告書ではまた、障害発生以降にロジャーズが講じた措置は「ロジャーズのネットワークの回復力と信頼性を向上させるとともに、2022年7月の障害の根本原因に対処するのに十分である」とも述べている。
26時間にわたる停電は7月8日の早朝に始まり、個人や企業は携帯電話、自宅の電話、インターネット、911サービスにアクセスできなくなった。
カナダ放送通信委員会(CRTC)は2023年9月に、障害の原因を調査し特定するようXona Partnersに委託した。
エンジニアリングコンサルタント会社には、停電以降にロジャーズ社が講じた対策が、新たな事故を防ぐのに十分であるかどうかを調査する任務も与えられている。
Xona Partnersの調査結果は、 レビュー報告書の要約は今月発表された。CRTCは、完全な報告書には機密情報が含まれており、日付は未定だが、編集された形で後日発表される予定だと述べている。
報告書の概要によると、障害発生前の数週間、ロジャーズはネットワークをアップグレードする 7 段階のプロセスを実行していた。障害はアップグレードの 6 番目の段階で発生した。
「2022年7月の停止は、ロジャースのIPネットワーク内の配信ルーターの設定エラーが原因である」と報告書は述べている。
報告書によると、ロジャーズのスタッフが情報を適切な宛先に送る制御フィルターを削除したことで、シャットダウンが引き起こされたという。
フィルターが設置されていなかったため、大量の情報がロジャースのコアネットワークに送信され、制御フィルターが削除されてから数分以内にシステムが過負荷になりクラッシュしました。
アルゴリズムはネットワークアップグレードを「低」リスクと判定
報告書によると、ロジャースのコアネットワークは、社内および社外の顧客やサービスプロバイダー向けに、無線および有線データを管理している。
「無線ネットワークと有線ネットワークの両方が共通の IP コア ネットワークを共有しているため、障害の範囲は極端で、すべてのサービスが壊滅的に失われる結果となった」と報告書は述べている。
報告書によると、無線サービスと有線サービスが同じネットワークを共有することは「多くのサービスプロバイダーに共通する」慣行であり、企業はこれを「コストとパフォーマンスのバランスをとる」効率的な方法だと考えているという。
ロジャーズはその後、古いコアネットワーク上で有線サービスを維持しながら、ワイヤレスシステム用に新しい独立したネットワークを開発すると発表した。報告書によると、作業は進行中だという。
このレビューでは、ネットワーク更新の最初の 5 つの段階が問題なく行われたため、「リスク評価アルゴリズムによって、アップグレードの第 6 段階のリスク レベルが引き下げられた」と述べられています。
第6段階のリスクを「低い」と指定したことで、ロジャーズのスタッフはアップグレードが進むにつれて、追加レベルの精査や承認を回避できたが、そうすることは「業界の規範に違反する」と報告書は述べている。
ロジャーズ社は、この問題に対処するために新たなリスク評価アルゴリズムを導入したと述べている。
Xona Partners のレビューの要約では、Rogers がコア ネットワークに流入する情報量を制限する「過負荷防止メカニズム」を備えていれば、「ネットワーク障害は防げた可能性がある」とも述べられています。
このレビューでは、カナダのすべての通信ネットワークがコアネットワークに過負荷保護メカニズムを実装することを推奨しています。
ネットワーク復旧の課題
システムがダウンした後、ロジャーズ社がシステムを復旧させる努力を妨げている主な問題は、同社が適切にコミュニケーションをとることができないことだった。
報告書によると、コアネットワークがダウンした際、遠隔地の従業員はロジャーズのシステムにアクセスしたりインターネットを使用したりすることができず、他のサービスプロバイダーを使用してオンラインに接続することもできなかったという。
「ロジャーズは影響を受けたルーターに物理的にアクセスするためにスタッフを遠隔地に派遣しなければならず、ネットワーク復旧作業が遅れた」と報告書は述べている。
それ以来、ロジャーズのインシデント対応および危機管理チームの全メンバーには、「停電時に通信機能を維持する」ためのバックアップのサードパーティによるインターネットアクセスが提供されている。
調査ではまた、ロジャーズのスタッフは停電開始から14時間後まで停電の根本原因を詳述する重大なエラーログにアクセスできず、「停電からの復旧作業に悪影響を及ぼした」とも述べている。
オタワの公共利益擁護センター事務局長ジョン・ローフォード氏は、ロジャーズ氏とCRTCに対し、停電に関する透明性を高めるよう求めてきた。
同氏は、停電に関する報告書の提出にCRTCが2年もかかったことを批判し、「CRTCとロジャーズ両社が責任を免れたという意味での隠蔽工作」だと述べた。
「報告書はロジャーズ氏が問題を正したと主張しているが、私にはそれを証明する証拠が不十分だ」とローフォード氏は述べた。「これはただ特定の専門家の見解にすぎない」
ロジャーズ氏はCBCニュースのインタビュー要請を断った。
ロジャーズの広報担当者は声明で、同社は「カナダ国民がいつでもどこでも接続できるよう、最も信頼性の高いネットワーク体験を提供することに引き続き注力していく」と述べた。
広報担当者は、 分析会社umaultの2023年8月のレポート調査期間中、ロジャーズはカナダで最も信頼性の高い無線ネットワークを保有していることが判明しました。
「当社はネットワークの全面的な見直しを完了し、ネットワークの回復力を強化し、この報告書の推奨事項をすべて実行しました。カナダ国民が世界最高のネットワークを享受できるよう、引き続き投資していきます」と広報担当者は述べた。
ロジャースへの手紙の中でCRTCは、同社が「ゾナ・パートナーズが推奨したすべての措置の実施を確認した」と述べた。
フランソワ・フィリップ・シャンパーニュ技術革新・科学産業大臣の広報担当者はCBCニュースに対し、ロジャーズは報告書のすべての勧告に対処しており、ネットワークの回復力強化への投資を継続していると語った。
#2022年のロジャーズ停電は人為的ミスが原因システムの欠陥が事態を悪化させたと報道