2012年8月1日の朝、アメリカの証券会社ナイト・キャピタルのコンピューターが、誰も頼んでいない株の注文を猛烈な勢いで出し始めました。止まるまでの約45分で生まれた損失は4億6000万ドル超、当時のレートで約360億円です。原因は、8台のサーバーのうち1台だけ新しいプログラムに入れ替わっていなかったこと。しかも、取引開始前に警告メールが97通届いていたのに、誰も気づきませんでした。 今日の知ってた? 💻 2012年8月1日、米ナイト・キャピタルの自動注文システムが暴走し、約45分で154銘柄・3億9700万株超を売買。最終的に4億6000万ドル超を失った 原因は、8台のサーバーのうち1台に新しいプログラムが入っていなかったことと、昔の機能のスイッチを別の用途に使い回したこと。取引開始前に警告メールが97通届いていたが、誰も読んでいなかった 背景:ナイト・キャピタルとはどんな会社だったのか ナイト・キャピタルは、ニュージャージー州ジャージーシティに本拠を置いていた証券会社です。日本ではほとんど知られていませんが、当時のアメリカ株式市場では欠かせない存在でした。米証券取引委員会(SEC)の命令書によると、2011〜2012年にナイトが扱った売買は、自社分と顧客分を合わせて米国の上場株の取引全体の約1割にあたります。 中心の仕事はマーケットメイクでした。個人投資家がネット証券で「この株を100株買いたい」と注文を出すと、その注文は取引所に直接行くのではなく、ナイトのような業者に回されることが多くあります。業者は自分が売り手や買い手になって、その場で取引を成立させます。買いたい人と売りたい人がちょうどそろうのを待たずに済むので、個人投資家はすぐに約定でき、業者は売値と買値のわずかな差で稼ぐ、という仕組みです。米NBCニュースは当時、ナイトを「ニューヨーク証券取引所とナスダックの上場株で、個人向けマーケットメイクの最大手」と紹介しています。 こうした業者の売買は、人間が1件ずつ判断しているわけではありません。ナイトにはSMARSという自動の注文振り分けシステムがあり、受け取った注文(親注文)を市場の状況に合わせて小分けにし、子注文として各取引所へ高速で送っていました。SMARS だけで米国の上場株取引の1%前後を占めていたといいます。あの朝、暴走したのはこのシステムです。 もう少し詳しく きっかけは、新しい取引制度への対応。2012年8月1日、ニューヨーク証券取引所で、個人投資家の注文を有利な値段で約定させる新制度「リテール・リクイディティ・プログラム(RLP)」が始まりました。ナイトは顧客をこの制度に参加させるため、SMARS に新しいプログラムを組み込むことにします。新しいプログラムは、SMARS の中で長年使われていなかった「パワー・ペグ」という古い機能のコードを置き換える形で入れられ、さらに以前はパワー・ペグを起動するのに使っていたフラグ(機能のオン・オフを切り替える目印)を、新機能の起動用に流用しました。フラグが「オン」なら、パワー・ペグではなく新しい RLP の機能が動く、という設計です。 眠っていた古いコードの欠陥。パワー・ペグは2003年に使われなくなっていましたが、コード自体は消されずにサーバーに残り、呼び出せば動く状態でした。もともとこの機能には、子注文が約定するたびに数量を数え、親注文の分がそろったら送信を止める仕組みがありました。ところが2005年、その数える部分がプログラムの別の場所へ移され、パワー・ペグ自体はその後一度も検証されていませんでした。つまり、もし呼び出されたら「どこで止まればいいか分からない」状態のコードが、7年間眠っていたわけです。 8台のうち1台だけ、入れ替え忘れ。ナイトは7月27日から、新しいプログラムを数日かけてサーバーへ順に配備(デプロイ)していきました。SMARS のサーバーは8台。ところが担当の技術者が、そのうち1台に新しいコードをコピーしていませんでした。作業を別の技術者が確かめる手順はなく、それを求める社内規定もなかったため、8台目のサーバーには古いパワー・ペグが残ったままになりました。 45分間に起きたこと。8月1日の取引開始後、新しいプログラムが入った7台は注文を正しく処理しました。しかし、流用したフラグが「オン」の注文が8台目に届くと、そこではパワー・ペグが目を覚まします。数量を数える部分が移されていたため、すでに約定していても子注文を止めずに送り続けました。わずか212件の親注文から数百万件の子注文が出され、約45分で154銘柄・400万回を超える約定、3億9700万株超の売買になりました。気づいたときには、80銘柄で約35億ドルの買い越し、74銘柄で約31.5億ドルの売り越しという、誰も望んでいない巨大な持ち高を抱えていました。これを処分して確定した損失が4億6000万ドル超です。SEC によると、75銘柄ではナイトの売買が出来高の2割を超えて株価を5%以上動かし、そのうち37銘柄では値動きが10%を超えました。 97通の警告メールと、裏目に出た対処。実は取引開始より前、午前8時1分ごろから、社内のシステムが「Power Peg disabled(パワー・ペグ無効)」というエラーを含む自動メールを担当者のグループに送っていました。午前9時30分の取引開始までに届いたのは97通。ただし、これはもともと警報として作られたメールではなく、ふだんから誰も読んでいませんでした。さらに取引中、原因を探していた技術チームは、正しく動いていた7台から新しいプログラムを外してしまいます。その結果、7台でも古いパワー・ペグが動き出し、事態はかえって悪化しました。システムの出口で注文の数を照らし合わせる仕組みも、異常なときに市場から切り離す手順も、会社全体の資金の上限で注文を止める仕組みもなかったと、SEC は指摘しています。 その後のナイト。損失は会社の存続を揺るがしました。NBCニュースによると、事故の5日後の8月6日、ジェフリーズ、ブラックストーン、ゲッコー(GETCO)など6社から4億ドルの出資を受けて救済が決まりましたが、引き換えに出資者が7割超の持ち分を握ることになりました。事故の3週間前には12ドルを超えていた株価は、事故2日後の金曜の終値が4.05ドル。救済が発表された月曜の取引開始前には、さらに2.85ドルまで下がりました。翌2013年7月、ナイトはゲッコーと統合して KCG ホールディングスになりました。同年10月、SEC は2010年に定めた「マーケット・アクセス・ルール」(市場に注文を出す業者にリスク管理を義務づける規則)に基づく初めての処分として、ナイトに1200万ドルの制裁金を科しています。 この一件は、いまでもソフトウェア開発の現場で「デプロイ(本番環境への反映)の失敗が会社を傾けた例」として繰り返し語られています。プログラムの1行が間違っていたというより、使われないコードを放置したこと、フラグを使い回したこと、配備を人の手に任せて確認しなかったこと、警告を読む仕組みが無かったこと。小さな手抜かりが同じ朝に重なったところに、怖さがあります。 海外の反応 1. 海外の名無しさん これ、ソフトのリリース管理と品質管理の教科書に本当に載ってる事例だよ。要約すると、機能のオン・オフをフラグで切り替えてたんだけど、サーバー1台だけ更新されてなかった。しかも修正版で既存のフラグを別の意味に使い回してた。だから取り残された1台が新しいフラグを見て、昔の機能を全開で動かしちゃったわけ。 2. 海外の名無しさん(>>1への返信) 昔から、バグの大半はコードそのものじゃなくて、システム同士の噛み合わせで起きるんだよな。 3. 海外の名無しさん(>>2への返信) いや、その「システム同士の噛み合わせ」だってソフトウェアでしょ。 4. 海外の名無しさん(>>3への返信) 言いたいことは分かるだろ。部品単体のバグと、部品をつないだときに出るバグは別物だって話をしてるんだよ。揚げ足取りはやめとけ。 5. 海外の名無しさん 「修正版でフラグを別の意味に使い回した」って時点で邪悪すぎる。気持ちは分からなくもないけど、誰かが絶対にリスク評価をサボってる。 6. 海外の名無しさん(>>5への返信) そもそもフラグを使い回したくなる理由が分からない。フラグなんていくらでも増やせるだろうに。 7. 海外の名無しさん(>>6への返信) よくあるのは「上流のチームに新しいフラグを追加してもらうと、組織の事情で何週間もかかる。とりあえず別のやつを流用しよう、名前は全然違うけど」ってパターン。政府や銀行のシステムで「Aは今日からBの意味です」ってのを実際に見たことがある。ひどい理由だけど、システムは作った組織の姿をそのまま映すんだよ。 8. 海外の名無しさん いや、コードはちゃんとバグってるでしょ。フラグを使い回すなら、全サーバーが古い意味を知らないバージョンまで上がってるか確認するか、サーバー同士でバージョンを確かめ合って、食い違ったら動かないようにしておくべき。 9. 海外の名無しさん システム設計では、コード・設定・各種データ・テスト用のコードを分けて考える。今回は設定でもコードでも、どこか1か所違っていれば防げた。何百ものフラグの組み合わせを全部テストするなんて無理だから、本当の問題はフラグの割り当て方の手順のほうだと思う。 10. 海外の名無しさん ソフト開発者だけど、こういう事故の原因はいろいろある。安い開発者ばかり雇う、分析担当がいない、テスト用サーバーを使わない…。うちは接続先がテストを許してくれなかったから、相手のサーバーを真似たダミーを自作して検証したことがある。 11. 海外の名無しさん 金曜の夜にデプロイしておけば、市場が閉まってる週末のうちに直せたのにね。 12. 海外の名無しさん(>>11への返信) 金曜の夜のデプロイは、エンジニアの週末を全部溶かす呪文として有名なんだけど。 13. 海外の名無しさん 4億6000万ドル失ったって言っても、その値段で売らなければ損じゃないでしょ。持っておけばいつか上がるかも。 14. 海外の名無しさん(>>13への返信) SECの資料だと、45分で3億9700万株超を売買して何十億ドル分もの望まない持ち高を抱え、「最終的に」4億6000万ドル超を失ったとある。売って確定した損失だと思う。 15. 海外の名無しさん(>>13への返信) 何十億ドル分の要らない株を「上がるかもしれないから」で抱えておけと? あの規模だと売るだけで値段が下がるから、買ってすぐ売っても確実に損が出るんだよ。 16. 海外の名無しさん(>>13への返信) 売ったよ。当時、取引先の会社で働いてた。社内の反応は「うわぁ…」の一言。明日は我が身だと分かってたから、みんな冷や汗をかいてた。でもあれで業界の管理はかなり良くなったと思う。 17. 海外の名無しさん 細かいことを言うと、ここは自己資金で売買もしてた会社だから、失ったのは顧客の金じゃなくて自分たちの金なんだよね。 18. 海外の名無しさん(>>17への返信) とはいえ、株価が何十銘柄も勝手に動いたんだから、巻き込まれた側も相当いたはずだよ。得した人も損した人も。 19. 海外の名無しさん 97通も警告メールが来てたのに誰も読んでないってところが一番リアル。うちの会社の自動通知フォルダも未読が4桁ある。 20. 海外の名無しさん(>>19への返信) 毎日鳴ってる警報は、警報じゃなくてただの環境音になるんだよな。本当に大事なものだけ鳴らさないと意味がない。 21. 海外の名無しさん 今ならAIのせいにできたのに、2012年だと誰のせいにすればいいんだ? 22. 海外の名無しさん(>>21への返信) 1台だけコピーし忘れた担当者…と言いたいところだけど、確認する手順を作らなかった会社の責任だよ。人は必ずミスするんだから。 23. 海外の名無しさん 日本でも2005年に、証券会社が「61万円で1株売り」を「1円で61万株売り」と打ち間違えた有名な誤発注があった。人の手のミスか機械の暴走かの違いはあっても、止める仕組みがないと一瞬で大金が消えるのは同じだね。 24. 海外の名無しさん 正しく動いてた7台から新しいコードを外したら、全部が暴走し始めたって話が一番背筋が凍る。慌てて元に戻すのが正解とは限らないんだよな。 25. 海外の名無しさん(>>24への返信) まずは市場から切り離すボタンを押すべきだった。原因探しはそのあとでいい。止める手順が決まってなかったのが致命的だと思う。 まとめ 8台中1台の入れ替え忘れ、使われないまま残っていた古いコード、使い回したフラグ、誰も読まない97通の警告メール。一つひとつは小さな手抜かりが同じ朝に重なり、45分で4億6000万ドル超が消えました。コメント欄では「コードのバグか、仕組みのバグか」で議論が白熱する一方、「明日は我が身」と身につまされる開発者の声も多く、確認の手順と止める仕組みの大切さを改めて考えさせられる一件でした。 参考資料 米証券取引委員会(SEC)「ナイト・キャピタル・アメリカズに対する行政処分命令(Release No. 70694)」(2013年・英語・PDF) 米証券取引委員会(SEC)「SEC、マーケット・アクセス・ルール違反でナイト・キャピタルを処分」(2013年・英語) NBCニュース「ナイト・キャピタル、4億ドルの救済を受ける」(2012年・英語) 元ソース: 2012年、証券会社ナイト・キャピタルはソフトウェアの配備ミスで、わずか45分のうちに4億6000万ドル以上を失った。取引開始前にシステムは97通の警告メールを出していた 投稿 「45分で4億6000万ドル超が消えた」米証券会社の暴走、原因は8台のうち1台だけの入れ替え忘れだった は みんな知ってた?【海外の反応】 に最初に表示されました。…