【Pay】楽天ペイの障害、原因判明　データセンターでUPS外して作業→停電→システム障害

**サーバル ★** · 2019/11/26(火) 21:03:20.86

無停電機能を外したまま電源設備を更新、楽天などに影響した九電系データセンター障害の原因判明
2019/11/26 14:55

　九州電力の通信子会社QTnet（福岡市）のデータセンターで障害が発生した問題について、2019年11月26日に停電の原因が判明した。11月23日朝、電源設備の更新作業中に通常時の電源が遮断したことで予備電源に切り替わったが、電源の切り替え時に作動する無停電機能を外して作業していた。その結果、7秒間ほど電源が停止し、利用各社のシステム障害につながった。

まだ22社が復旧できていない

[画像タップで拡大表示]

　今回の障害で、事業継続を安定させる目的で使うはずのデータセンターに、想定外の盲点があると明らかになった格好だ。QTnetによると、影響を受けた約260の企業・自治体の中で、2019年11月26日10時時点で22社が復旧できていないという。

　今回の障害の影響で、クレジットカードの楽天カードやスマホQR決済の楽天ペイが11月23日朝に利用できなくなった。楽天ペイは11月25日朝に一時的に使えなくなったり、楽天カードは現在も一部機能が利用できなかったりと、発生から3日経過後も電源停止の影響が残っている。

https://tech.nikkeibp.co.jp/atcl/nxt/news/18/06551/

**名無しさん＠１周年** · 2019/11/26(火) 21:03:34.15

素人か

**名無しさん＠１周年** · 2019/11/26(火) 21:03:53.30

転落ペイ

**名無しさん＠１周年** · 2019/11/26(火) 21:04:28.62

>>1
賠償金大変だこれ

**名無しさん＠１周年** · 2019/11/26(火) 21:04:43.10

結局人なんだよなあ

**名無しさん＠１周年** · 2019/11/26(火) 21:05:05.33

じゃあ人為ミスだな
大事なサーバーをUPSに繋げないなんてどういう神経してるんだろ

**名無しさん＠１周年** · 2019/11/26(火) 21:05:07.66

予備電源、予備電源

**名無しさん＠１周年** · 2019/11/26(火) 21:05:10.99

ゆとり乙

**名無しさん＠１周年** · 2019/11/26(火) 21:05:31.43

馬鹿じゃねーのというところだけど、なぜこんな馬鹿なミスが起きたのか、だな。信じられんミスだけど。
賠償は10億じゃ済まんのじゃないか？

**名無しさん＠１周年** · 2019/11/26(火) 21:05:35.86

さすが元国内信販（KCカード）

**名無しさん＠１周年** · 2019/11/26(火) 21:05:43.96

電源ヨシ！

**名無しさん＠１周年** · 2019/11/26(火) 21:06:02.73

楽天がやらかした➡まあそんなもんだろ

QTがやらかした➡えっマジか？

**名無しさん＠１周年** · 2019/11/26(火) 21:06:05.62

バカジャネーノ

**名無しさん＠１周年** · 2019/11/26(火) 21:06:06.11

血液同然のインフラでこのざまじゃねえーｗ

**名無しさん＠１周年** · 2019/11/26(火) 21:06:14.15

こんなレベルじゃ危なくて利用できない

**名無しさん＠１周年** · 2019/11/26(火) 21:06:16.70

アホじゃねーの

**名無しさん＠１周年** · 2019/11/26(火) 21:06:38.88

これって現場では予見できない事なのか？
担当者が特に無能だったわけではなく、システムの盲点で相当に気付きにくいものなの？

賠償金発生するんかな？

**名無しさん＠１周年** · 2019/11/26(火) 21:06:54.16

楽天叩いてた3Kどうすんのさ？

**名無しさん＠１周年** · 2019/11/26(火) 21:06:59.97

三木谷激怒

**名無しさん＠１周年** · 2019/11/26(火) 21:07:06.16

セブンイレブン同様にアプリが原因だったんだろ

**名無しさん＠１周年** · 2019/11/26(火) 21:07:18.87

予備系無いのかよ

**名無しさん＠１周年** · 2019/11/26(火) 21:07:27.60

>>17
災害じゃなく誤ってシャットダウン⇒システム障害

賠償だろ

**名無しさん＠１周年** · 2019/11/26(火) 21:07:46.62

何のためのＵＰＳなんだか

**名無しさん＠１周年** · 2019/11/26(火) 21:07:47.28

障害で儲けるスタイル

**名無しさん＠１周年** · 2019/11/26(火) 21:07:57.24

素人か。。
なら仕方ないな

**名無しさん＠１周年** · 2019/11/26(火) 21:08:03.68

また楽天障害やってんのか何回目だよ

**名無しさん＠１周年** · 2019/11/26(火) 21:08:24.89

馬鹿なの？

**名無しさん＠１周年** · 2019/11/26(火) 21:08:33.51

楽天ポイントだいぶ損した

**名無しさん＠１周年** · 2019/11/26(火) 21:08:39.26

>>17
できるでしょ
無停電電源装置をカットするのがおかしい

**名無しさん＠１周年** · 2019/11/26(火) 21:08:42.66

素人しか現場にいなかった

**名無しさん＠１周年** · 2019/11/26(火) 21:08:47.61

無停電とは

**名無しさん＠１周年** · 2019/11/26(火) 21:08:52.75

だめじゃん

分かっていても分かっていなくても
繋がっている機器を外していいわけねーだろ

**名無しさん＠１周年** · 2019/11/26(火) 21:09:04.73

人が育ってないんだろうな

**名無しさん＠１周年** · 2019/11/26(火) 21:09:05.23

これって
データセンタ全体の電源が停止
で
楽天のサーバーはUPSがなかったから
即死
ってこと？

**名無しさん＠１周年** · 2019/11/26(火) 21:09:09.15

熊襲はまともな仕事しろ

**名無しさん＠１周年** · 2019/11/26(火) 21:09:10.29

>>5
つつもたせ的な何かと読んでしまった

**名無しさん＠１周年** · 2019/11/26(火) 21:09:29.60

プロとは思えぬ

**名無しさん＠１周年** · 2019/11/26(火) 21:09:49.14

Apple Payにカード追加したいのに出来ないのはこの影響なのかな
調べても公式は特にアナウンスしてないし

**名無しさん＠１周年** · 2019/11/26(火) 21:10:01.27

>>34
作業するのに間違えてUPS外したんじゃねーかな、データセンターだから楽天は被害者

**名無しさん＠１周年** · 2019/11/26(火) 21:10:07.25

主電源+補助電源+予備電源
というシステムでないのか

**名無しさん＠１周年** · 2019/11/26(火) 21:10:08.11

昔だが、DC法定点検で一応待機してたが、UPSどころか非常電源刺さってなくて落ちて偉いことになった。

**名無しさん＠１周年** · 2019/11/26(火) 21:10:12.52

俺ソフト屋だからハードのことわかんねーよ、ってな?

**名無しさん＠１周年** · 2019/11/26(火) 21:10:30.48

何のためのDCか分からんような話だな。
もうQTnetは新規のホスティングは取れず、既存客は当分タダで運用だろ。

**名無しさん＠１周年** · 2019/11/26(火) 21:10:30.42

やったのって、下請けの下請けの下請けの・・・

**名無しさん＠１周年** · 2019/11/26(火) 21:10:41.35

killall

**名無しさん＠１周年** · 2019/11/26(火) 21:10:53.55

九電とかQTnetはお堅いイメージがあるけどなあ
下請けにパワハラ的な丸投げか？

**名無しさん＠１周年** · 2019/11/26(火) 21:10:54.63

**名無しさん＠１周年** · 2019/11/26(火) 21:11:14.95

どうせシナチョン奴隷使ったんだろｗ

**名無しさん＠１周年** · 2019/11/26(火) 21:11:21.76

https://i.imgur.com/uFUkjcc.jpg

**名無しさん＠１周年** · 2019/11/26(火) 21:11:38.48

名前のとおりに楽天すぎないか

**名無しさん＠１周年** · 2019/11/26(火) 21:11:39.23

ヤフージャパン子会社の
サーバーデータをバックアップごと消しちゃいましたﾃﾍｯ
っての思い出すな

**名無しさん＠１周年** · 2019/11/26(火) 21:11:47.82

さすがにもう使えるかなと思って、久しぶりに通販で払おうとしたら決済できんかった。
カードにハサミ入れようかな。　頭にきた。

**名無しさん＠１周年** · 2019/11/26(火) 21:11:57.95

>>46
貯水槽清掃のあれも孫請けかなんかだったしね

**名無しさん＠１周年** · 2019/11/26(火) 21:12:38.00

>>33
変わりの人材なんて幾らでも居る！　→　結果
これが今の日本の姿

**名無しさん＠１周年** · 2019/11/26(火) 21:12:45.41

楽天のモバイル環境開発手詰まり状態でハード資源とかもそこら中からかき集めてるって話だから
単純にミスってわけでじゃないよ

**名無しさん＠１周年** · 2019/11/26(火) 21:12:52.55

>>11
このやろお～ぅ！w

**名無しさん＠１周年** · 2019/11/26(火) 21:12:55.63

受けるｗｗｗ
大事な設備なのに金払わないで適当な業者にやらせたのかな

**名無しさん＠１周年** · 2019/11/26(火) 21:13:07.56

UPS外して作業?
UPS故障でもしない限りなくね?

**名無しさん＠１周年** · 2019/11/26(火) 21:13:13.36

https://i.imgur.com/pkDwbpP.jpg

**名無しさん＠１周年** · 2019/11/26(火) 21:13:15.47

なんだこれ楽天じゃなくて、その設備を更新していたQTネットとか言うところのチョンボですやん。
しかも九電の子会社って。おまえら電気のプロやないんか！

**名無しさん＠１周年** · 2019/11/26(火) 21:13:16.34

報告書は英語で提出ですか？

**名無しさん＠１周年** · 2019/11/26(火) 21:13:20.66

Googleみたいにサーバーごとに直接UPS接続してればこんなことにはならなかった

**名無しさん＠１周年** · 2019/11/26(火) 21:13:30.36

ウップス

**名無しさん＠１周年** · 2019/11/26(火) 21:13:35.16

俺は既に楽天排除してる

**名無しさん＠１周年** · 2019/11/26(火) 21:13:38.10

つーか非常電源ないのか？

**名無しさん＠１周年** · 2019/11/26(火) 21:13:40.73

ペイが付くやつらはなんかやらかさないといけない決まりでもあるのか

**名無しさん＠１周年** · 2019/11/26(火) 21:13:45.03

多くの企業がそうであるように、外注企業が作業したのかね？

**名無しさん＠１周年** · 2019/11/26(火) 21:13:56.25

QTnetは迷惑かけてる全ユーザーに損害賠償しろ！って楽天に言われてるんだろなー、いくらかかるんだろな

**名無しさん＠１周年** · 2019/11/26(火) 21:14:07.50

>>1
つまり掃除のおばちゃんがコンセント引っ掛けたってこと？

**名無しさん＠１周年** · 2019/11/26(火) 21:14:31.10

担当者が足ひっかけてそのままにしたんだろ

**名無しさん＠１周年** · 2019/11/26(火) 21:14:43.08

>>55
外部のデータセンターの設備交換なんて関係ないだろ

**名無しさん＠１周年** · 2019/11/26(火) 21:14:49.01

電気の流れを考慮せずに作業するからだろ
馬鹿ばかりだぜー

**名無しさん＠１周年** · 2019/11/26(火) 21:14:57.00

わざわざUPSを外して作業したのか
さぞ生真面目な作業員だったんだろねー（棒
工賃安いからって最低限の教育受けさせてない馬鹿現場に寄越すなよ

**名無しさん＠１周年** · 2019/11/26(火) 21:15:04.18

てきとーな作業ならともかく、予備電源外して作業なんてあり得ない

**名無しさん＠１周年** · 2019/11/26(火) 21:15:06.04

競合他社のスパイでも入り込んだんじゃないのか

**名無しさん＠１周年** · 2019/11/26(火) 21:15:07.82

ド素人なんだけど７秒電源がストップすると復旧もままならないくらいひどいことになるの？
「あれ、つながんねーなー」程度の話じゃなくて？

**名無しさん＠１周年** · 2019/11/26(火) 21:15:18.58

随分とデカい盲点だな

**名無しさん＠１周年** · 2019/11/26(火) 21:15:22.72

UPSはあるよ
４年経ったからバッテリー買い替えたら配線繋がってない事に気付いたとか

**名無しさん＠１周年** · 2019/11/26(火) 21:15:26.53

データセンターにもゆとり

**名無しさん＠１周年** · 2019/11/26(火) 21:15:29.45

>>55
おまえは何を言ってるんだ？

**名無しさん＠１周年** · 2019/11/26(火) 21:15:47.36

昨日昼使おうとしたのに

**名無しさん＠１周年** · 2019/11/26(火) 21:15:50.07

下請け任せにしてるんだろう

**名無しさん＠１周年** · 2019/11/26(火) 21:15:54.77

楽天の株価を下げるためにわざとやったとかw

**名無しさん＠１周年** · 2019/11/26(火) 21:15:58.04

>>75
楽天カードと同じ位置に並ぼうとしている会社なんてあるのかな？ｗ

**名無しさん＠１周年** · 2019/11/26(火) 21:16:23.13

な！キャッシュレスなんて当てにならないだろ

**名無しさん＠１周年** · 2019/11/26(火) 21:16:25.34

やっぱり英語で謝るの？

**名無しさん＠１周年** · 2019/11/26(火) 21:16:32.38

UPSなんかつかってるの？
平成の化石機具やないか

**名無しさん＠１周年** · 2019/11/26(火) 21:16:37.45

>>69
それならまだ理解できるんだけど、保守担当者(プロ)が抜いたっぽいね、この書き方見ると

**名無しさん＠１周年** · 2019/11/26(火) 21:16:53.42

逆にスゲー
無停電電源外すとかw発想が無いからな
むしろそいつを楽天で雇ったらどうだ？

**名無しさん＠１周年** · 2019/11/26(火) 21:16:55.08

慌ててるときも英語で喋るの？

**名無しさん＠１周年** · 2019/11/26(火) 21:17:11.90

>>1
知識の乏しい15次下請けあたりが作業してんだろうなぁ。南無阿弥陀仏。

**名無しさん＠１周年** · 2019/11/26(火) 21:17:14.34

っっって、QTかよ！
電力のプロじゃねーか！

楽天マジで被害者じゃん！
何のためのデータセンターなのか

**巫山戯為奴** ◆TYUDOUPoWE · 2019/11/26(火) 21:17:23.77

誰に何をされたんだろうwww

**名無しさん＠１周年** · 2019/11/26(火) 21:17:30.45

楽天は取引先を変えるかな

**名無しさん＠１周年** · 2019/11/26(火) 21:17:38.15

こんなんだからAmazonやMSのクラウドがシェアとるんだよ

**名無しさん＠１周年** · 2019/11/26(火) 21:17:39.65

お前ら純真無垢かよｗ世間向けの発表鵜呑みにしやがって

とある筋からの確からしい情報によると、これは掃除のおばちゃんがコードにつまづいたことが原因らしい
ガチで！

**名無しさん＠１周年** · 2019/11/26(火) 21:17:43.05

これ楽天のイメージに相当傷が付いたな。

**名無しさん＠１周年** · 2019/11/26(火) 21:17:50.11

>>69
DCにその辺に持ち込むのは作業PCで普通はラックの下に通常と非常電源あるだろ…
UPSとかありえん。
普通のPCでもサーバで使ってんのか？

**名無しさん＠１周年** · 2019/11/26(火) 21:17:55.11

バックアップ電源が切られたのち停電とか、ミッションインポッシブルみたいな奴らが侵入したんじゃないのか

**名無しさん＠１周年** · 2019/11/26(火) 21:17:57.26

技術力が世界で上から70位程度の国がやるとこうなるｗｗｗ