東京証券取引所で2020年10月1日に起きたシステム障害の全容が徐々に見えてきた。障害の原因は、富士通が納入したNAS（Network Attached Storage）のファームウエアの設定不備にあった。
2台構成のNASでメモリー故障に起因する障害パターンが発⽣した際、NASの冗長化が機能しない設定になっていた。東証で10月1日に起きたシステム障害は、全銘柄の売買を終日停止するという未曽有の事態を招いた。
東証が取引を全面的にシステム化した1999年以降、システム障害で全銘柄の売買を終日止めたのは初めて。これにより、3兆円規模の売買機会が失われた。NASのメモリー故障が発端
システム障害の発端は、東証の株式売買システム「arrowhead（アローヘッド）」のNASに搭載したメモリーの故障にあった。
業務サーバーで使うユーザー情報などを格納するNASは2台あり、Active-Active構成で冗長化していた。
このうちの1台のメモリーが故障し、本来なら1台のみの運用に自動で切り替わるはずが、うまくいかなかった。原因はNASのファームウエアの切り替え用設定値の不備にあった。
東証はarrowheadを2019年11月に刷新する際、事前のテストで2台のNASの死活監視を途絶えさせて、自動で切り替わることを確認していた。
だがその際、今回の設定不備は見抜けなかった。設定作業そのものは富士通が実施していたという。この記事は有料会員限定です。次ページでログインまたはお申し込みください。
- >>だがその際、今回の設定不備は見抜けなかった。設定作業そのものは富士通が実施していたという。
富士通のせいじゃん
- >>2
富士通が雇った奴がよんできちゃつがやとっt、6時受けぐらいだろ
でも多重派遣だから言えないwwww - 結局富士通やん
- テストもしてて駄目だったってどういうこと？
- >>4
今の予算の範囲内で起きるエラーがちゃんと検出されて回避出来るかを調べるテスト範囲外の想定を提案すると「そんなの起きるわけ無いだろ」と怒られて終わり
会社を揺るがすようなバグじゃ無い限りは本人も在職のまま、次の仕事に取りかかる - >>14
「そんな大津波が起きるわけないじゃないですか、良いですか、良い、い、いちょっと、私が話してるんですから」 - >>14
原発事故かよ - 本番始まっちゃうと、本番機そのもののfail over試験はそうそうできないからなぁ…
不治痛はザマァ！！！！！だけど、現場の連中には同情する - なんやそれ
- 弊社ではなく弊社の下請けの責任です
- それならそれでいいけどテストしろよ
- 尚、富士通は子会社に責任おっかぶせて逃げ切ります
- 3つにして3賢者ごっこしとけばこんなことには…
- わざとなんだろ？
NTT上場廃止があったからとか - 下請けの下請けの下請けの下請けの下請けの責任だろ！！！！！！！！！！！！！！！！！！！
- エラーを発生させるスイッチを作ってテストしないの？
- >>1
メモリはSamsung製らしいね - >>15
はいはい - 福島第一原発も東証もちゃんと機能すれば事故は防げた
普段からヨシ！しとけよ - この日経記者はちゃんと内容を理解して記事書いてるな
お前らはすぐ犯人探しｗ
東証が会見で自分達の責任って潔く認めてたのに馬鹿かよ - 富士通じゃん
東証は「我々の責任」って言ってたけどそう言わなきゃいけない会見の空気なんなん？
立派なのはそうだけど事実と異なること言うなら富士通は補償とか要らないのってなるで - >>18
東証が顧客に対して負う責任と、富士通が東証に負う責任は別
東証が富士通からどんな補償を受けようが俺らには関係ないこと - 辞めたSEが報復に仕込んだんだろうなぁこれは。
- 1代のコンピュータがぶっ壊れても
別のコンピュータに切り替わるはずが切り替わらなかったんだメモリがぶっ壊れたのが原因って
去年にシステム更新したばかりなのに
もうぶっ壊れるもんなのメモリって？？ - >>21
メモリーが最後までキッチリ刺さってなかったんだろ - >>25
パソコンのメモリと一緒にすんなよ
まあ釣りだろうけどさ - どうせ電源ぶっこ抜きパターンしかテストしてねんだろ
メモリに中性子線当てるテストやれよな - 富士通だから相当の保険金むしれるものな(´･ω･｀)
- 設定一つ一つ洗って検討してんのかよ
SEが個人の判断で適当にやってんじゃないだろうな - 何やらせてもダメだなここ
- 素直に報告できてえらいね！
- NASが完全死亡した場合の死活監視なら動いたが、メモリの故障だけだと死活監視では応答が返ってくるわけで生きてると判定されてたんだね
- >>30
メモリだけぶっ壊れるとか想定外だったんだろうな・・・パソコン使ってて思うのは
普通はハードディスクからぶっ壊れると思うんだが - NASってなんだよ
SANじゃないのかよ - 富士通どうすんのこれ
- メモリなんか滅多に壊れないよ
- >>35
メモリは結構壊れるぞ - 他で別の問題が起きるんだろうな
- ニュータニックスのせいだって人も居たけど
これ見ると完全にハードウェアの設計ミスだから
富士通のせいだな - 設定したかどうかじゃなく
シミュレーションに「その設定」はなかった
ということ - 富士通製のパソコンの初期不良かな？
バックアップに切り替わらなかったのは
ファームウェアの問題 - あれ？これ富士通が悪いんじゃね
- 富士通がわざわざ設定してたってことは事前にどっかから圧力がかかったか？
他人のせいにできるように丸投げしてたんなら自社ではやらんだろうしな - また想定外ｗ
津波も想定外ｗ
電源喪失も想定外ｗ何でもかんでも想定外ｗ
- これは富士通の過失だろ
- てかサーバーのシステムモニターとかで事前に不具合見つけられなかったのか
動作してる範囲でエラー吐くだろ？ - 故意じゃん
- また富士通か
- 富士通…
- なんだよそれ冗長不安定かよ
- active-activeってことはNexusつかってんのか
- 故障時の切り替えのテスト自体はしていたけれど
メモリが故障したときはファームの設定値異常でエラー通知されず
自動的に2号機に切り替わらなかったことかそれにしても再起動しても動かなかったから休場って何よ
2号機を手動で動かせよ - >>53
そういう簡単な問題じゃないから。
原因もわからないのに再起動して動かしたら余計酷いことになりかねないし、
各証券会社のシステムと連動してるんだから、調整もせずに勝手に再開したら問題が出る。 - その程度のテストケースも上げらなかったレベルの低さってやばくね？
- こんなんナローヘッドやんけ
- 損害賠償おいくら億円かなあ
- こんな国が核保有しても管理すらできず暴発させてしまうやろな
- この設定自体が仕様通りかどうか
- もうFM TOWNSかわない
- 富士通「ﾖｼｯ」
- ようわからんな
2台のうち1台が壊れたら冗長化を停止させて片方だけで動かすのではないのか - 冗長化とはなにか？
誰かおれに教えてほしい - そもそも設定段階で機能しない状態になっていたのに、何でテストでは機能していたの？
東証トラブル原因判明。メモリー障害時に「冗長化が機能しないよう」にファームウエアに設定されてたｗ
嫌儲
コメント