1:
海江田三郎 ★2017/03/03(金) 13:07:16.84 ID:CAP_USER.net
AWSのS3クラウドストレージが4時間にわたってダウンした件は、当然ながら、強い批判を浴びた。
AWSは検証レポートを発表し、この事件について原因と経過を詳しく説明した。技術的情報と将来に向けての防止策も含まれている。
直接の原因は、やや平凡な理由だが、ヒューマンエラーだった。あるエンジニア―ここではジョー(仮名)と
呼んでおく―が間違ったコマンドを入力してしまったということだ。ジョーはあるサブシステムをシャットダウンするつもりだった。
それ自体は日常行われるオペレーションだった。しかし月曜日、バージニア州北部データセンターではルーチンワークが大変な問題を引き起こした。
ジョーは正規の特権ユーザーであるため、システムをシャットダウンするコマンドを入力する資格があった。
ただしこの作業はAmazonが「確立された手順書(established playbook)」に従ったもので、
ここではS3サブシステムの少数のサーバーを停止することが意図されていた。ところがジョーは誤って多数のサーバーを停止するコマンドを入力してしまった。
続きはソースで
http://jp.techcrunch.com/2017/03/03/20170302aws-cloudsplains-what-happend-to-s3-storage-on-monday/
引用元:http://anago.2ch.sc/test/read.cgi/bizplus/1488514036/
2: 名刺は切らしておりまして 2017/03/03(金) 13:09:18.13 ID:dVvNCxJH.net
ジョーは生きているか?
8: 名刺は切らしておりまして 2017/03/03(金) 13:17:23.32 ID:zqktoCwz.net
>>2
気の弱い奴だと自殺してもおかしくないよな
40: 名刺は切らしておりまして 2017/03/03(金) 18:33:13.73 ID:uBtTzOQe.net
>>2
それは読者の想像に任せると40年くらい前からちば先生が
3: 名刺は切らしておりまして 2017/03/03(金) 13:11:38.98 ID:HpSUjblh.net
掃除のおばちゃんね
4: 名刺は切らしておりまして 2017/03/03(金) 13:12:58.63 ID:IIpA1hQt.net
足首コンセント現象
9: 名刺は切らしておりまして 2017/03/03(金) 13:18:05.50 ID:BJDDoB4B.net
うちのPentium2も再起動に許容できない程の時間を要するわ
10: 名刺は切らしておりまして 2017/03/03(金) 13:19:04.26 ID:gIDScv2u.net
クラウドは今ひとつ信用出来ねぇわ
11: 名刺は切らしておりまして 2017/03/03(金) 13:19:17.51 ID:WmAAeQ7u.net
やっぱ粛清されるの?
16: 名刺は切らしておりまして 2017/03/03(金) 13:37:16.23 ID:R1HD4lOQ.net
こういうのやってるの、年俸2万ドル以下のワーカーだから、責任は問われない。
叱責はされるだろうけどね。
システムとマニュアルが不味かったという話になるだろうし、再起動が法外な時間かかったのは彼の所為ではない。
27: 名刺は切らしておりまして 2017/03/03(金) 14:25:18.04 ID:l+9lGnPy.net
>>16
amazonのシステムを停止できる、正規の特権ユーザーがそんな年俸のワケねーだろ
34: 名刺は切らしておりまして 2017/03/03(金) 16:57:49.63 ID:SwYX4rDO.net
>>27
Amazonのオペレーターなんか下請けだろ
28: 名刺は切らしておりまして 2017/03/03(金) 15:00:32.23 ID:siEoANEB.net
>>16
Amazonは知らんが日本だと外注に委託されてたりするんだよね
で、外注が損害金支払って飛ぶ
15: 名刺は切らしておりまして 2017/03/03(金) 13:35:44.76 ID:ERK3H/9q.net
いったいいつAI化するんだよ、こういう作業。
17: 名刺は切らしておりまして 2017/03/03(金) 13:41:12.96 ID:brIKy9gB.net
>全システムを再起動を行ったこともなかった
SEからするとこの状態からよく短時間で復旧したなと思う
普通は手順の確認だけで半日以上かかる
むしろどこから手をつけて良いか途方にくれてもおかしくない
19: 名刺は切らしておりまして 2017/03/03(金) 13:45:29.06 ID:vAgndHBJ.net
DB削除してバックアップも取れてなかったとかよりましか。
24: 名刺は切らしておりまして 2017/03/03(金) 13:54:29.82 ID:94QZi1K+.net
俺らがクラウドを馬鹿にしている間にAWSもAzureも失敗から学びながらどんどん進化していく。
26: 名刺は切らしておりまして 2017/03/03(金) 14:13:20.63 ID:7f6cbCvm.net
こういう他人の大チョンボの話聞くと
自分の過去の大失敗がフラッシュバックしませんか
29: 名刺は切らしておりまして 2017/03/03(金) 15:07:00.09 ID:mLKAaRbC.net
だからいつもいつもENTER押す前に画面に向けて指差し確認しろっつってんだろ
俺の言うこと聞いときゃこんなんならず済んだんだよ
31: 名刺は切らしておりまして 2017/03/03(金) 16:24:06.26 ID:TKQLaPJb.net
システムがちゃんと聞いてやれよw。
「ジョー、いいのかい?このコマンド入力したら
大変なことになるよ。職を賭して入力するんだろうねw? YES NO」
36: 名刺は切らしておりまして 2017/03/03(金) 17:11:44.12 ID:MTFd3vNa.net
たったひとつのコマンドで全世界に影響与えるって怖いな
38: 名刺は切らしておりまして 2017/03/03(金) 17:25:04.76 ID:c+rSUq2J.net
むしろそういうコマンドを権限有るとは言え容易に実行可能な環境に問題あるんじゃね?
39: 名刺は切らしておりまして 2017/03/03(金) 18:20:07.95 ID:s4Gy++nf.net
こういうミスを防ぐためのAIでもつくれば?
37: 名刺は切らしておりまして 2017/03/03(金) 17:13:44.48 ID:amOCLD2k.net
知ってる
掃除のおばちゃんがコンセント引っ掛けたんだろ
46: 名刺は切らしておりまして 2017/03/03(金) 22:02:40.37 ID:GbA0UKOc.net
まあこうやって問題をつぶしていって盤石になっていくんもんだろ
47: 名刺は切らしておりまして 2017/03/03(金) 22:11:24.26 ID:d8Z+GUhK.net
指差し声出しが基本だって言ってるのに守らない奴の多いこと
案の定ミスしやがるしなそういう奴は
まさにこれよ
49: 名刺は切らしておりまして 2017/03/03(金) 22:29:12.49 ID:hm8cMPoC.net
大規模にトラぶって4時間で回復とかむしろ神業かと思ったぜ。
56: 名刺は切らしておりまして 2017/03/04(土) 21:04:37.33 ID:7LdvWJpy.net
他人事じゃねー
54: 名刺は切らしておりまして 2017/03/04(土) 04:16:10.34 ID:SckSLxG2.net
コレが原因究明と防止策の見本だな
じいちゃん「お前の卒業祝いにPC買ったぞ」→驚きのスペックで俺困惑