1: 稼げる名無しさん 2020/10/06(火) 11:19:43.53 ID:mHWZLexh9.net
【arrowhead】東証、システム障害の原因を特定「自動切り替えできない設定値になっていた」
東京証券取引所は10月5日、株式売買システム「arrowhead」(アローヘッド)で1日に発生した障害の原因を特定し、4日中に修正したと発表した。障害は、ストレージ内でメモリ故障が起き、サブ機にも切り替わらなかったことが原因。メモリ故障による障害が起きた際、自動切り替えできない設定値になっていたという。東証のニュースリリースよりarrowheadのユーザー情報などを格納するストレージ「共有ディスク装置」の1号機に搭載されたメモリが故障したことに起因。1号機が障害を検知すると、切り替え用設定値に従って自動で2号機に切り替わるはずが、切り替わらなかった。調査したところ、メモリ故障が原因の障害パターンが発生した際、自動切り替えできない設定値になっていたという。設定値を変更すれば、自動切り替えできることが判明。4日にシステムに適用し、自動切り替えが動作することを確認したという。稼働前のテストでは、1号機と2号機相互の死活監視を途絶えさせても、自動切り替えできていたという。1日の障害では、東証の全取引が終日停止した。
1001: 以下名無しさんに代わりまして管理人がお伝えします 1848/01/24(?)00:00:00 ID:money_soku
つまり仕方ないトラブルなんかじゃなく、完全に人災って事かお?
ハードウェアの故障は仕方がないが切り替えが正常に行われなかったのは人災だな。
これは責任者が詰められる案件になるかもしれない。
また富士通のDX営業も本格的にマズイ事になりかねないかと。
これは責任者が詰められる案件になるかもしれない。
また富士通のDX営業も本格的にマズイ事になりかねないかと。
1001: 以下名無しさんに代わりまして管理人がお伝えします 1848/01/24(?)00:00:00 ID:money_soku
現在よく読まれているニュース!:
以下2chの反応と管理人の反応です
3: 稼げる名無しさん 2020/10/06(火) 11:21:24.97 ID:qRKH1gbk0.net
その設定ファイル誰がイジったんだろう
4: 稼げる名無しさん 2020/10/06(火) 11:21:27.10 ID:fGgYG4e80.net
ズコーッ
5: 稼げる名無しさん 2020/10/06(火) 11:21:31.97 ID:ZRiN9kgt0.net
マヌケだな
これは責任問題になるんじゃないの?
これは責任問題になるんじゃないの?
7: 稼げる名無しさん 2020/10/06(火) 11:23:06.37 ID:vEsvHRMt0.net
なんでちゃんとテストしないのか 学校でと避難訓練とかしてるよ 誰か教えてあげて
9: 稼げる名無しさん 2020/10/06(火) 11:24:08.36 ID:Z4dz+iRs0.net
テスト仕様書作った奴の責任
13: 稼げる名無しさん 2020/10/06(火) 11:25:15.20 ID:94EVU6u60.net
>>9
指摘しなかったレビュアも同罪
指摘しなかったレビュアも同罪
10: 稼げる名無しさん 2020/10/06(火) 11:24:13.62 ID:wnuFp19A0.net
アホかよw
実際に故障を模してチェックしていなかった
ってことだわな。
実際に故障を模してチェックしていなかった
ってことだわな。
15: 稼げる名無しさん 2020/10/06(火) 11:25:39.43 ID:ncNd4fUz0.net
>>10
何を今更
Cocoaで散々見てるだろ
しっかり金入れない体質から来てるんだろなぁ
何を今更
Cocoaで散々見てるだろ
しっかり金入れない体質から来てるんだろなぁ
23: 稼げる名無しさん 2020/10/06(火) 11:27:28.32 ID:5rYQ2Cp40.net
>>10
本当これ
普通に考えたらメモリが壊れたときの試験くらいやるだろう
本当これ
普通に考えたらメモリが壊れたときの試験くらいやるだろう
31: 稼げる名無しさん 2020/10/06(火) 11:29:01.29 ID:dK+RAv710.net
>>23
メモリのフォールトインジェクションは難しいよ
ハード開発ならまだしも SI ではやってないケース多いと思う
メモリのフォールトインジェクションは難しいよ
ハード開発ならまだしも SI ではやってないケース多いと思う
88: 稼げる名無しさん 2020/10/06(火) 11:40:43.52 ID:BxO+r+i70.net
>>31
1日2兆円以上処理する、日本経済の心臓やで?
メモリー交換なんてホストコンピューターなら無停止で交換できるレベルだぞ?
出きんないんだったら、ホストコンピューターからリプレースするんじゃねーよ。
1日2兆円以上処理する、日本経済の心臓やで?
メモリー交換なんてホストコンピューターなら無停止で交換できるレベルだぞ?
出きんないんだったら、ホストコンピューターからリプレースするんじゃねーよ。
11: 稼げる名無しさん 2020/10/06(火) 11:24:58.80 ID:wCAym03X0.net
現場猫のIT版だな
他の人が設定チェックしたと思ったから
自分はチェックせずOK出した
他の人が設定チェックしたと思ったから
自分はチェックせずOK出した
14: 稼げる名無しさん 2020/10/06(火) 11:25:34.11 ID:285UV9Lv0.net
富士通は、何も責任取らないの?
東証は被害者?
東証は被害者?
26: 稼げる名無しさん 2020/10/06(火) 11:28:15.52 ID:FMK74fvs0.net
>>14
責任は感じるもの
責任は感じるもの
17: 稼げる名無しさん 2020/10/06(火) 11:26:01.12 ID:BFv4oEuc0.net
だから、何でそんな設定値になっていたの?
34: 稼げる名無しさん 2020/10/06(火) 11:30:00.24 ID:Z9VtS4AW0.net
>>17
私の推測では
テストするために設定値を書き換えて
テスト終了後に元に戻して無かったんじゃないかな?
私の推測では
テストするために設定値を書き換えて
テスト終了後に元に戻して無かったんじゃないかな?
37: 稼げる名無しさん 2020/10/06(火) 11:30:15.13 ID:vKpg23bp0.net
>>34
あるある
あるある
54: 稼げる名無しさん 2020/10/06(火) 11:34:19.04 ID:YqClLMvv0.net
>>34
それだな
それだな
18: 稼げる名無しさん 2020/10/06(火) 11:26:07.40 ID:Z9VtS4AW0.net
なんだか残念な話しだね
1001: 以下名無しさんに代わりまして管理人がお伝えします 1848/01/24(?)00:00:00 ID:money_soku
現在よく読まれている記事:
引用元:ai.2ch.sc/test/read.cgi/newsplus/1601950783/
コメント
コメント一覧 (43)
money_soku
がしました
diffとかせんかったんか?
money_soku
がしました
ヒューマンエラーほど防ぐのが大変なものは無い
money_soku
がしました
昔々、福島第一原発というものがあってだな。
money_soku
がしました
コレ富士通に莫大な損害賠償請求来てもおかしくない
money_soku
がしました
自分には絶対出来ん仕事だ
money_soku
がしました
・詳細設計者
・詳細設計レビュアー
・テスト設計者
・テスト設計レビュアー
・テスト実施レビュー者
・統括者
money_soku
がしました
チェックシートだけ増えていっても、惰性でチェックつけるでーになったら(普通はなるし、チェックしてないのにつけたりもありうる)こういう人災は起こる
「酸化防止の窒素ガス入れて内部圧確認」にチェック入ってるのに、実際はチェック作業してなくてガス入ってない製品を半日ぐらい生産しちゃったとかね
money_soku
がしました
普通だったら絶対できないわな。
どうやってメモリが壊れたっていう信号を出させるか・・だよ。
オンライン中にメモリモジュール引っこ抜くくらいしか思いつかん。
money_soku
がしました
money_soku
がしました
会社側が技術者を守る気がないというのなら、まともな技術者なんて寄り付かなくなるだろうに。
money_soku
がしました
日本の元請けはコミュニケーション能力に特化してるから、元請けの技術力責めるのはお門違いだろ
money_soku
がしました
money_soku
がしました
おおかた誤検知が多くて面倒だから変えたとか
money_soku
がしました
money_soku
がしました
開発環境の設定値が残ってて悪さするとか、よくあるべ。
※本番環境でゴリゴリテストできるのって環境から完全新規システムぐらいです。
切り替えテストは工場でやってうまくいったから動く。はずとか。
東証再現の負荷テストとかも開発で構築でき、、、。
たぶんコメ18さんが当たりだよ。
money_soku
がしました
money_soku
がしました
自爆スイッチに憧れた世代が作ったの?
money_soku
がしました
デフォの設定がおかしいと思うんだけど。
メモリ障害をノード単位の障害にしなかったってことでしょ?
もしかしたら言っちゃいけないことかもしれないけどね。
money_soku
がしました
バージョンアップ中に切り替わりが発生しないように勝手に設定変更→バージョンアップ→切り替わり設定戻しの一連のアップデートパッチの中の設定戻しの部分組み込み忘れてました、テヘッ。ってのが。
money_soku
がしました
money_soku
がしました
ソフト的な設定値なら入れ替えがあっても設定ファイルをコピーするだろうから
テストしたのに切り替わらないというのはおかしな話だが、
ハード的な設定値なら入れ替えとかがあったときに設定を忘れたりしてそう
money_soku
がしました
本番環境でこんなことありえるのか
手で書き換えるとかありえないからリリースファイルそのものが間違ってたとかか?
money_soku
がしました
money_soku
がしました
こんないいシステム入れてたのにねぇ… 納品した商品をユーザ側でテストする環境があっても一回も使われたことがなかったんじゃないかなぁ…w
money_soku
がしました
こんな凡ミスはにわかに信じがたい…いや、そうでもないかな?
money_soku
がしました
必要な性能があろうとそれを構築する人間がしょぼければしょぼい性能しか発揮できんよ
money_soku
がしました
money_soku
がしました
コメントする