【エンジニアの悪夢】日本HPE、京大スパコンのデータ77TBをLOST、全面謝罪▶理由を読んだ皆さん「インタプリタ怖い」「胃が痛くなる」
> この度のファイル消失は 100% 弊社の責であると考えており、補償につきましては、ユーザ 様、並びに、貴学のご意向に沿うようにいたします。 iimc.kyoto-u.ac.jp/services/comp/… こんなお詫びの文章初めて見た…… 77TB削除、29TBが復元不可能……
2021-12-29 00:48:10京大で恐ろしさに震える案件が発生…
スーパーコンピュータシステムのファイル消失のお詫び(京都大学学術情報メディアセンター)
2021年12月28日
[PDF] Lustre ファイルシステムのファイル消失について
日本ヒューレット・パッカード合同会社
2021年12月28日
京都大学の大事なデータ77TBをぶっ壊した責任でHPが大学の言い値で保証すると発表した話 iimc.kyoto-u.ac.jp/services/comp/…
2021-12-29 10:22:22クライアント(京大)の怒り具合も半端ないけどベンダー(HP)の全面降伏は中々見ないな。。。事象については他人事ではない。。。((((;゚Д゚))))ガクガクブルブル iimc.kyoto-u.ac.jp/ja/whatsnew/in… iimc.kyoto-u.ac.jp/services/comp/…
2021-12-29 10:46:11"(京大)確実に再発しない対策をした上で1月末までにはバックアップを再開する予定です." これがHPへの温情なのか違うのか、期間的には温情に見えるけど、、、
2021-12-29 10:50:20弊社 100%の責任って事は手順の承認とかは無かったってことなのかな?それとも手順道理にやってなかったのかな?「実行中のスクリプトが存在している状態でスクリプトの上書きによりリリース」ってなぜそんな事を?ちなみに77TBが消えたけど、そのうちの28Tが復元不可っぽい iimc.kyoto-u.ac.jp/services/comp/…
2021-12-29 11:15:29京大スパコンのデータ吹き飛ばした件。 全然当事者でもないのに、最初の2行読んだだけでも血の気が引いた😨 たったひとつのミスや、引数違うだけでも大惨事になるもんね。分かりみがすごくて… 運用チームの心身を案じつつ、再発防止策が問われますね… iimc.kyoto-u.ac.jp/services/comp/…
2021-12-29 11:01:57コレは厳しい iimc.kyoto-u.ac.jp/services/comp/… pic.twitter.com/JUEvVEX78W
2021-12-28 22:57:26シェルスクリプトをデプロイしたら実行中で、変数が初期化されずに全部消しましたってやつか😇 似たようなこと、2、3年前に昔やったなぁ😇 タマヒュンする😇 iimc.kyoto-u.ac.jp/services/comp/…
2021-12-28 23:59:58@mayakane これ、学校のサーバにしか保存していない卒論とかあったらどうするのかと、他人事ながらガクブルします。 システム担当者は辞表を書くレベルですね…
2021-12-29 08:51:17ヒューレッドパッカードさん、バックアップスクリプトでやらかしたのか。 京都大学で3,400万ファイル以上の消失。何億円の損失だろう。 でも民間企業だからプールの水道代みたいに個人に損害賠償はさせないだろうな。 iimc.kyoto-u.ac.jp/services/comp/…
2021-12-29 07:53:21京大でデータ全部吹っ飛ばすとかいう大やらかしが起きたらしい 自分でもrmする時には爆弾処理と同じくらいの緊張感があるので自分の身にも起こりそうで怖すぎる iimc.kyoto-u.ac.jp/services/comp/…
2021-12-29 00:17:16だ、大事件ですやんけ……。 (京都大学にて約77TBが過失により消失したとのこと。) 僕が担当者だったら、うんこ全部出して気絶しとるわ! そのあと無断で退職して失踪、最寄りのサービスエリアで号泣しとるわ! twitter.com/nahcnuj/status… pic.twitter.com/Xaf4RfkKvX
2021-12-28 22:16:57>途中から修正したシェルスクリプトの再読み込みが発生し、結果的に未定義の変数を含むfindコマンドが実行されてしまいました。 iimc.kyoto-u.ac.jp/services/comp/… おそろしや…
2021-12-28 21:42:22やばーい しかし復元不能な分はどうしたってどうしょうもないから、震えて年をこすしかないな iimc.kyoto-u.ac.jp/services/comp/…
2021-12-29 09:03:26Lustre ファイルシステムのファイル消失について iimc.kyoto-u.ac.jp/services/comp/… 担当者が年を越せなさそうな案件だ……
2021-12-29 10:51:46シェルスクリプトって扱いが雑なとこ多いよね
恐ろしすぎる… シェルスクリプトが、ではなく、実行中にファイル上書しちゃうかね… iimc.kyoto-u.ac.jp/services/comp/…
2021-12-29 10:41:59@Zinsei_Syuuryou あーあ。シェルスクリプトってテストなしでリリースされる風潮がある気がする。
2021-12-29 02:14:0277TB lost…。他の人も言及してたけど、シェルスクリプトって扱い雑なこと多いよね。今回は途中上書きらしいけど… iimc.kyoto-u.ac.jp/services/comp/…
2021-12-29 10:15:42iimc.kyoto-u.ac.jp/services/comp/… ああー、これで実行中の bash スクリプトを変更する話が出ていたのね。何回か出会ったことある...
2021-12-29 09:50:12そんなつもりなかったかもしれないけど、 実行中のスクリプト書き換えるのってエンジニア本能的に怖くないんかな iimc.kyoto-u.ac.jp/services/comp/…
2021-12-29 08:57:15