「システム障害はなぜ二度起きたか」読んだ

みずほ銀行で過去に2度起こったシステム障害について解説し、これと類似のシステム障害もいくか紹介しつつ、システム障害を回避するためにはどうすべきかについてを日経コンピュータの視点で論説している。特に、大規模情報システムのあるべき姿について触れていて、これらは技術の問題ではなくマネジメントの問題だと力説している点が特徴的となっている。「システムはなぜダウンするのか」のシリーズ本になる・・・のかな。

2回目の障害になる、2011年3月に起こった義援金口座の管理ミスが原因のものを受けて、この障害を受けての今後の対応方針について大いに警鐘を鳴らしているのが特徴となっている。結果的には、みずほ銀行とみずほコーポレート銀行の合併を2013年7月に行っているけど、システム統合・・・というか新規作り直しはまだ先のようだ。一部では「みずほ銀行ATM停止なんて聞いてなかった」みたいなニュースで語られてますが、舞台裏はやっぱいろいろ大変だなぁと思い知らされる例です。ちなみに、システム障害については調査報告書がみずほ銀行(旧みずほフィナンシャルグループ・・・でいいのかな?)から出たりしている模様。

1回目の障害になる、2002年4月に起こった合併(日本興業銀行・第一勧業銀行・富士銀行)に端を発するシステム統合での失敗は、Wikipedia上にあった記事が「独自研究」で証拠不足で消されたりしていたりと、実はほとんど公開情報がない模様。とりあえずまとまってるとこを3つほど張っておこう。
2002年4月、みずほ銀行に何が起こったのか
von_yosukeyanの日記: みずほ銀行システム障害とは何だったのか?
失敗事例 > みずほフィナンシャルグループ大規模システム障害

「プログラム的な仕事は工数管理だとかいうマネジメントと合わないんじゃないか」の議論はよく見かけるものの、個人的には、100人を超えるような(==数名のスペシャルプログラマで片をつけることができない程度の)規模だとそういう工数管理のやり方をせざるを得ないのかなと思う。だって人多いと意思疎通取るだけで大変なんだもん。数席隣のやつの実力とかやってることとかすら把握できなくなるもん。組織だったやり方じゃないと開発すらできなくなっちゃうもん。「100人」なのか「50人」なのか「20人」なのかは意見の分かれるところだとは思うけど、少なくとも大規模開発だとマネジメントは必須かなと感じる。あとそういう規模だと「スーパープログラマ」みたいなのも不要かとも思う。不要というといいすぎだけど、そういう人は自分でコードを書く役割を果たすんじゃなくて、設計だけをひたすら請け負うような役割を果たさざるを得ないわけで、そういう意味でその人はもはや「スーパープログラマ」じゃないよねと。

あと考えさせられるのは、第9章に書かれている「全体が分かる技術者が減少」の話。本書的には、バブル崩壊に発するその後の景気低迷で企業がシステムを一新する機会を失って、その結果「やってみないと伝わらない」ような技術が後継者へと引き継がれなくなり、そのうち古くからいる現場人が引退して「全体が分かる技術者が減少」していると説明している。なんかそれってもろに、20年ごとに遷宮させることで技術伝承させてるんじゃないかという話の伊勢神宮の式年遷宮と一緒なのね。なんかこう、同じ担当者にやらせ続けた方が技術習得コストを抑えられていいよねと言い続けていたら、担当者が引退したり辞めちゃったり死んじゃったりして大混乱するトラックナンバー的な話に通じなくもない。「ジェネラリスト」「スペシャリスト」の話なのかもしれない。

もう1つ気になったのは、13章の「臨機応変に動くには高度なスキルが必要」の最後の段落。ちょっと引用すると

机や椅子が壊れている、打ち合わせしようにもホワイトボードすらない、緊急に連絡したくても携帯電話の電波が入らない、といった問題を見つけ、七十八拠点でオフィス機器を新調するなど職場環境の改善につなげた。

えぇ話やなぁー、・・・じゃなくて、、いくら忙しいからと言ってこういうとこを手を抜いてると本当に忙しい時にものすごく痛い目を見るんよねぇ。いつしかのスラドのコメントで見かけた「あまり仕事がはかどらないときはエディタの設定などのメンテをして堂々とさぼってる方がいざというときにちゃんと動けてトータルで効率よく仕事できる」という趣旨の話も理解できる。本当に忙しいときはどうしようもないけど、年がら年中忙しいのは本当に勘弁してほしい・・・目の前のバグつぶしで精一杯で開発環境整えるのすらままならないのは本当に勘弁してほしい・・・

・・・なんか最後の方はタダのグチになってしまいましたが、勘定系の情報システムでのトラブル事例を知るという意味では大いに意義のある本かと思います。ただどちらかというとマネジメントのあるべき論の話なので、そっちに全く興味ない人は読まなくてもいいかなとは思います。

このブログ記事について

このページは、らるるが2013年9月16日 01:52に書いたブログ記事です。

ひとつ前のブログ記事は「はつあぴ夏祭初音鑑行ってきた」です。

次のブログ記事は「ふぁぼはツイートほどにものを言う」です。

最近のコンテンツはインデックスページで見られます。過去に書かれたものはアーカイブのページで見られます。

月別 アーカイブ

ウェブページ

Powered by Movable Type 7.5.0