【絶望】モバイルSuica障害の原因、｢サーバーがある施設の工事でうっかり予定外のブレーカーを落としたから｣だった！！終わりだよこの国 [597533159]
■ このスレッドは過去ログ倉庫に格納されています
２４日未明からスマートフォンで利用できるＪＲ東日本の交通系ＩＣカード「モバイルＳｕｉｃａ（スイカ）」で発生していたシステム障害は同日午後１時ごろ、復旧した。
ＪＲ東によると、障害の原因は、屋内の電源工事で計画と異なるブレーカーを「切」としたことで、システムサーバーの電源が遮断されたためだったという。詳細は調査中としている。
ＪＲ東によると、同日午前０時３７分ごろから障害が発生。
残高チャージや駅の券売機、みどりの窓口でクレジットカードの利用ができなくなるシステム障害が発生。
インターネット予約サービス「えきねっと」でも、予約や変更などができなくなっていた。
ＪＲ東は「お客さまには大変ご迷惑をおかけし、誠に申し訳ございませんでした」としている。 これだとせっかく冗長構成取ってても駄目だな
ファシリティを軽視しすぎ 要するに「掃除のおばちゃんがコンセントにつまづいて引っこ抜いた」 絶対に落としてはいけないサーバーの電源がそんな簡単に落とせるようになってるのがおかしいのでは データセンターのブレーカーってそんな簡単に落とせるか？ やっぱりクレカ・デビットが一番安全か
交通系でどこまで使えるか知らんけど 通常は電源2重化されていて片側の系統の電源が落ちても大丈夫なはずなんだけど不思議 ベルトコンベアーの清掃のときは電源を確実に落とす
よし！ なんでもかんでも派遣にやらせてるかだろ
マイナンバーで登録ミスった役所の職員だってどうせ派遣だろ
つまりJRが悪い え、大規模な商用システムなのにフェイルセーフも用意してないんですか
ガイジ企業だろ 漏電ブレーカーのテスト用赤ボタン間違えて押すから無くせよと思う 設備系の工事って2人組でヨシっ！ってやると思うけどそれでもミスしたのかね ブレーカー落としてもヨシ！
↓
どうして どうして😭 家のパソコンでも重要データは二重化とかN+1は普通なのにあまりにもお粗末で笑いしか出ない あの、これさ…落雷で停電した場合も同じことが起きると言うことを言った！？もしかして… auの障害の時もそうだったけど、１箇所落ちたら全部アウトなのはよく分からん ( ´ᯅ` )(ヽ^ん^)うちはダブルチェック徹底しているので安全ですよ
(ヽﾟんﾟ)ヨシ！
( ´ᯅ` )・・・あの、これ
(ヽﾟんﾟ)あ！？
( ；´ᯅ` )よ、ヨシ！ >>96
そんなに大事なケーブルをなぜ剥き出しにしておくのか🤔
ジャップって知能ゼロなの？ >>97
データセンタのバッテリーは
自家発電装置が立ち上がるまでのつなぎ用だぞ。
あとUPSはコンセント断と同時にデータを
保存して安全にシャットダウンさせるための機械 個人サーバーでもUPSつける時代なのに
商用サーバーがブレーカーオフだけで止まるような運用してんの？ >>107
あれの根本原因は作業ミスによるコアルータ間のルーティングループっぽいからどうにもならん 実はジャップ以上に外国もこういうの酷かったりするぞ ていうかさ、ブレーカー落として終わるサーバーなんて、停電起きたらどうすんの？w
即死じゃんw そもそも業者のブレーカ操作はNGなんだよ
JRにそのルールがないとは思えないけど 多重請負で下請け下請けに丸投げしまくった結果がマジで出て来てるな >>120
そう
マイナンバーカードも同じリスクがある まさか掃除のおばちゃん案件じゃないよな
そんな訳あるわけねーだろw
からのこれかよ。マジで草 >>128
マイナンバーカードは逆にもう殺した方がいいのでは？ >>96
これだけ書いてあっても抜くやついるからな ３次下請け電気工事業者「ここ切っても良いすか？」
１次下請け設備担当者「知らん」
２次下請け電気主任技術者「知らん」
３次下請け電気工事業者「…. ええぃ！ままよ！」
設備担当者・電気主任技術者
「おれじゃない あいつがやった しらない すんだこと」
こんな感じだろ >>96
なにかあったらこれ狙えばええってすぐわかるな Suica自体をサーバー型に移行し始めてるみたいだけど、同様なことが今後起こるだろ >>133
客「おい何してくれてんだ！」
業者「パワハラです」 作業手順書どおりに作業したのか
作業前に作業対象マーキングと対象外マスキングしたのか
操作前に指差し確認したのか
なぜなぜ分析が熱い >>143
作業員は全員派遣で適当にやってるからな Suicaのシステムが停止するブレーカーがある部屋って鍵付きで担当者立ち会いでブレーカーを切るかと思ったら違うんだね >>141
そっからどうやってままよになったのか、まじで気になる >>142
根本的な原因は上の怠慢にあって下の現場に責任押し付けて
改善どころか改悪されてもっと酷くなるパターンな 派遣だろうが正規職員だろうがこんなもんはあるあるすぎる
大体からしてアメ公もやらかしてAWS止まったりするし いくらルールがあったって守らないなら意味ないぞ
安倍晋三みたいな奴にはルールは無力 >>132
こんだけ書いてあろうがこれは引っこ抜いたりした奴を責めるべきではない 下請け、孫請けが、メールできた指示書のコピー渡されて、やってんだし、
間違えても仕方ない >>96
いただ「く」きます、って貼り紙までテキトーだな >>153
今は怒るの禁止で怒ったら首だし怒るのは悪だからなw
そりゃあねw そういう重大ポイントを現場猫にやらせてたら
お前居る意味ないだろ
離職しろ >>164
IT関係者の仕事初めは神社へのお参りだろw どれが重要かも管理されてないわけか
かえってテロ対策になるかもしれんな
全部喪失したところで
社畜酷使しての人海戦術と
紙への固執がたるから大丈夫 インフラは居室系と管理系で電気系統から別にする設計が義務付けられてた気がするけど
ソースが出てこないや >>166
100点取り続けて当たり前、99点取ろうものなら陰口を叩かれ
90点なんて生きる価値なし
と、タダで提供しているものまで、これを求められるのに
給料激安だからまともなの居ないよ、俺含めてw 何で運用手順作ってないの？
普通こんな事起こらないように手順書に従って動くだけだろ >>96
これを初見とか言ってるやつは世間知らずだと思う >>171
運用さんの話じゃないからだろ
施設屋さんだから お前らものすごい巨大なサーバみたいなのを想像してんだろうけどこんなの一ラックに収まる程度だから、え？これ？みたいなもんだぞ。 >>69
簡単に落とせるようにしておかないと過電流などでシステム全体が破壊される恐れもある むしろ温かみがあって良いだろ。
ハッカーに狙われても、はいブレーカOFF残念でした～ｗって出来るんだぞ笑 >>171
無論作ってるだろ
構造が複雑すぎて全体を把握できるものがいないだけで >>63
これアスペの人だと逆に興味持って切っちゃいそうｗ どうせ、工事業者も素人派遣だらけで、まともに把握してる社員は業務過多で派遣に構ってる暇なくて、現場の判断で工事するのが常態化してたんだろ。
中抜き下請け丸投げ、素人派遣多用の末に広がる地獄。
マジで、数年後にはまともに運用できなくなって全てアナログ化してるよ。 >>123
12時間ブレーカー落としっぱなしだったのか・・・・ 期待するから苦しくなる
そう思って生きてきたがインフラみたいなものでこれは まあモバイルSuicaのインターフェースが進化しないのを見るとレガシーなシステムで動いてそうだよね 電源を落としても大丈夫な冗長性作れよ
ジャップにはそれくらい必要だわ サーバーは途中まで動いてたんじゃないの
空調が効いてないとじきダウンするでしょ 掃除のおばちゃんですらないのか
どうしようもないな >>195
大丈夫なようにしてたのに
バックアップも電源落としてしまった感じやろこれは この調子じゃあUPSがけたたましいアラーム音出していても気にするやつが誰もいなかったとかそんなレベルなんかなあ >>199
だからバカが電源落としても大丈夫なように別電源用意しとくくらいしろって話 どのブレーカーが間違ってるのか特定に時間かかるでしょ ﾒｲﾝ猫「はい、じゃー今日はブレーカー落としまーす対象名ﾖｼ！」
ﾁｪｯｸ猫「対象ﾖｼ！」
ﾒｲﾝ猫「よく見たら対象ちゃう😨」
ﾁｪｯｸ猫「あわわわわ😱」
ってなってそう 工場でメンテナンス中電源入れるなって張り紙剥がして電源入れて人ミンチにするタイプの人間が こういう下請けのやらかし起こりまくるの中抜き大国の末路って感じでほんとすき 「予定外作業は絶対にしないヨシ！」じゃなかったのかよ >>200
バッテリー切れるまでブレーカー切ったんやろなぁ >>211
こういうのは大抵渡した作業手順書がそもそも間違ってるとか
項目がゲームブックばりにあちこち飛びまくるクソ手順書とか
日常的に手順書が間違ってていつも現場で手書き修正してるとか
大体そんなパターンなので意外と現場猫案件ではなかったり 俺もそうなんだけど注意事項とか集められて説明されても聞いてないんだよね
全体周知のメッセージもまず見ない
なんだかんだメール連絡が一番確実な気がしてる
文字数少なめで >>212
やっぱその手の事故って当人以外がスイッチ入れて巻き込まれるパターンよな 派遣の弊害だよな
3次受けとか施設の中何も知らん一般人と変わらん 素人的な疑問だけど家のブレーカーじゃあるまいし予備はないの？ >>143
今更か
ゴミクズジャップは3.11で死んだんだよ
今は脳が死んだゾンビ
日本人「の様な動物」 検証という概念が、ジャップから無くなったなぁ、マジで
ヤベーレベルのクルクルパーばかり
これでマイナンバーカードへの危機感が出ないなら、日本はもう一度核で消し飛ばした方がマシ リスク管理、リスクの分散すら出来ないとか、どんだけ無能なんだよ ええ…モバイルSuicaなんてどう考えても影響範囲でかい大規模システムのくせに災対環境ないとかそんなことある？ >>184
労働者足りなくなるとインフラ維持困難になるっていうけどさ
金融インフラが壊れるのが一番ヤバいよな
預金や証券がまともに機能しなくなったらどうすんのこの国 昔友人がJR東日本のシステム請け負ってたが
線路際の倉庫みたいな所で仕事してるって言ってたな おばちゃんブレーカーをうっかり落とす(´･ω･`)b よくそんなもんに切るよな
簡単には切れない様になってるだろうに
本当は企業テロなんじゃね？ >>60
いや普通電源も異系収容にするからブレーカー落としまくらないとサーバ落ちないけどねぇ。
大規模工事だったのかもしれないけど。 >>236
もともと工事予定だったブレーカー側の系が仮にA系として、今回誤って落とした系をB系とした場合、
あらかじめ工事するの分かってるんだからA系に刺さってある方はPS（パワーサプライ）からケーブル抜くに決まってるじゃん
両系ささったままブレーカー落とさないよ。一瞬で電圧変わるから。
だから事故当時はA系の物理オフが済んだ状態でB系だけの単系になってたはず >>241
俺が関わってるデータセンターは抜いてないと思うけどな。大元の電源工事で連絡来たけど特に電源抜いたりはしなかった。途中で抜いてたのかも知らんが。
(キュービックに子ブレーカーもあるし抜くとは思えないけども)
そんな電圧の揺らぎでサーバ落ちてたら系異常に耐えられないし。
むしろ抜くくらい慎重ならクランプかけて電流見てから落とすだろうに。 うち製造業の工場でこんなポカミスあったら発生した職場のリーダーがずっと発生原因対策帳票かかされてる 掃除のおばちゃん「外してもバレないコンセント、知らないのね」 >>249
データセンターに入れてると、その設備は基本センターが用意だからな
その前提で金も出すし、じゃあUPSいらんねになる
UPSなんてシャットダウンするまでの繋ぎでしかないし、
継続運用するための機器じゃない こーゆーのって、ブレーカー異常監視系を全然別の通信回線で用意しなきゃ異常検出できないんだろうなぁ。
たとえばNTT系の施設なら下手すると国内回線全部潰れる前提で迂回路として衛星携帯のデータ回線使うとか こういうのって発注側のミスが多いんだよな
自分とこの設備すら把握してない JRのSI系通信会社は日本テレコム→禿電合併で
今はどこが主力なんだろう？
研究開発や企画・発注は鉄道総研みたいのが残ってるとして でもスイカの障害やたらおおいよな
設備に無理が来てんだろうな >>64
あたしじゃないのに。工事の人なのに。あたしじゃないのに。工事の人なのに。あたしじゃないのに。工事の人なのに。 >>89
UPSは長時間の停電時に給電を継続させる目的で構成するもんじゃ無いから Suicaがスタンドアロン処理だからまだ助かった
サーバー処理の次期Suicaだったら大事故だ >>246
某局舎のラックで
ラック内にあったファンユニット(10個くらいファンが搭載されてる1Uのブレード)を
がっちゃんと挿した瞬間
電圧降下してラック内の全収容機器が電源ダウンしたことがある どうせ下請けが上の空でいつも通りにやればいいでしょ的な作業したんだろう
あまりJRA責めてやるなよ 電源工事で現用待機を同時に作業すると思えんが単一障害点でもあったんかね
それか設計時の考慮不足で経路迂回しなかった？ 関係者は今頃JRE本社ビルに監禁されて対策作らされてるから安心しろ >>264
いろんな事情があるのだろうけども、後からそんなものを入れてる段階でエアフローも排熱設計もイマイチだと言う 事だろうし、突入電流の計算も出来ていなさそう。
一時的に容量超えたんじゃないの？
ラックメーカーにセットで付けてもらうファンとか時間差で始動するものなんだけどね。 こんな下らんヒューマンエラー1つで使えなくなるのかよ で？まさかお詫びで終わり？
なことね-よな？流石にメチャクチャ迷惑被った奴だらけじゃん？
何で補填してくれんの？ 電車の会社だから電車のことはすごく詳しいけどコンピュータのことはわからない >>277
お前ら詫び石大好きだから
線路の石でもぶつけてもらえよw >>275
月曜にメールボックス開いたら不適合速報が届いてて来月の部内会議で事例紹介あると ■ このスレッドは過去ログ倉庫に格納されています
