1: 名無しさん 2017/02/02(木) 21:34:38.78 ID:CAP_USER
http://www.excite.co.jp/News/it_g/20170202/Slashdot_17_02_02_0847239.html

ソースコード管理サービスを提供するGitLab.comが1月31日、管理者の操作ミスにより本番DBの
データ300GBを誤ってディレクトリごと削除してしまい、サービス停止状態に陥ったことが明らかになった
(公式報告のGoogle Doc、Publickey、The Register、Slashdot)。

GitLab.comはオープンソースのソースコード/プロジェクト管理ソフトウェアGitLabを使った
ホスティングサービスを提供するクラウドサービスで、GitリポジトリやWiki、Issue管理といった機能を提供している。
報告によると、同社では31日、スパムユーザーの負荷によりセカンダリDBに異常が発生したことから、
セカンダリをクリーンしてからレプリケーションを復旧する作業を実施していたとのこと。しかし作業がうまくいかず、
再度セカンダリをクリーンしようとして、誤って残るプライマリをクリーンしてしまったという。同社は直ちにバックアップからの復旧を試みるも、
5系統あるはずのバックアップはいずれもエラーなどで実は機能していないという事が判明、一時騒然となった。
なお失われたDBはIssueやMergeリクエストのもので、Gitリポジトリ本体とWikiは無傷だという。
その後、たまたま作業の6時間前に取られていたスナップショットが思いだされ、これを元に復旧作業が進められているのだが、
タレコミ時点では何故かその様子がYouTubeでライブ配信されるという不思議なことになっている。
なおミスを起こしたYP氏は「もう今日は自分がこれ以上sudoコマンドを実行しない方がいいだろう」と語っているという。


4: 名無しさん 2017/02/02(木) 21:39:47.43 ID:3RHTvCNL
なんで故意にやったの?


6: 名無しさん 2017/02/02(木) 21:40:20.32 ID:UYcOOEpE
なんかちょっと前に似た話あったな


7: 名無しさん 2017/02/02(木) 21:40:32.42 ID:NpQBh5c7
本番消して真っ青あるある
派遣Webデザイナーに直打ちさせる職場でやらかしたわ


8: 名無しさん 2017/02/02(木) 21:43:04.90 ID:WA8Q/ah3
バックアップがことごとく取れてないってのは笑える
バックアップの書き出しの確認作業を怠ってたことと
書き出されたバックアップが実際に書き戻してエラーが起きないことを確認しないとな
この手のはバックアップ設定しただけで問題を終わらせた気になりがちなんだよな


13: 名無しさん 2017/02/02(木) 21:48:47.65 ID:/Y+CLkrW
本番プレイは注意は慎重に


15: 名無しさん 2017/02/02(木) 21:51:53.48 ID:ZOjotgG8
>再度セカンダリをクリーンしようとして、誤って残るプライマリをクリーンしてしまった
この文章下手な怪談より怖い
背筋がぞくっとする


17: 名無しさん 2017/02/02(木) 21:55:09.02 ID:IUexP50J
>>15
「検証環境だと思ってコマンド実行したら、本番環境だった。」


28: 名無しさん 2017/02/02(木) 22:04:10.02 ID:BF00pGPQ
>>17
ああああああああああああああああああああああああああああああああああああああああああああああああああ


88: 名無しさん 2017/02/02(木) 23:59:36.71 ID:tIdLHKkr
>>17
俺は逆をやらかした
本番環境に繋ぎ直さず、公開


16: 名無しさん 2017/02/02(木) 21:53:49.27 ID:S8rVr0gE
ファイルを上書きする奴ってすげー違和感ある
普通はファイル名をコピーして変更する

それをしない奴ってなんなの?

これも同じ。まずは今の正常な状態をどこかにコピー
そんで削除だろ
そうすれば間違ってファーストを削除してもその前にコピーしといたサードからコピーすればよい


68: 名無しさん 2017/02/02(木) 23:21:44.80 ID:X6GJWdzY
>>16
ヤバイ作業の前に現状のバックアップをとるのは基本動作ではあるけれども
何回か痛い目にあってやっと身につく高難易度のスキル


19: 名無しさん 2017/02/02(木) 21:55:38.83 ID:AkveCfSp
バックアップは自動化してても結果のチェックを怠ってたのかな
まともに保守できてなさそう


23: 名無しさん 2017/02/02(木) 21:58:28.46 ID:E5e5RB9f
おーう、読んでて背中が寒くなったぞ
予定外の作業ってのは本当に危ない。


24: 名無しさん 2017/02/02(木) 21:58:30.61 ID:RX5r4cGd
「本当にあった怖い話」


33: 名無しさん 2017/02/02(木) 22:08:28.16 ID:NPKcvwR7
色々な不運が重なっているように見えるが、
管理がお粗末という一言に尽きてしまう。


35: 名無しさん 2017/02/02(木) 22:16:58.14 ID:p+3ZU1Xg
あるあるwww
日本でも大騒ぎなってどうなったんだあれ


47: 名無しさん 2017/02/02(木) 22:35:23.67 ID:hbT7B4Ae
寝る前にこんなニュース見たらストレスでオネションしちゃうだろ止めてくれよ