データセンターのコアルーターを落としたらどうなるの?っと
■ このスレッドは過去ログ倉庫に格納されています
エクイニクスLD8データセンターで大規模障害が発生
Posted on 2020年8月19日 by DC CAFE
UPS障害がネットワーク障害を誘発
エクイニクスのDocklands IBX LD8で発生したUPS (無停電電源装置)システムの故障に伴い、重大なネットワーク障害が発生しています。この障害は早朝(英国夏時間:BST)に始まり 、執筆時点(BST午後12時14分)でも進行中の状況です。
エクイニクスは 、障害発生後8時間経った12:04pm BSTに最初の公式声明を出しました。
障害で電源供給が止まったラックには、データセンターの全てを機能させるために必要なコアのJuniper MXルータやCisco LNSが搭載されていた。 これには、数多くの専用線接続の終端や、我々のvDCプラットフォームへの接続を提供していた。
弊社の全ての機器の電源は、データセンターから提供される「多様な」A + B電源により冗長給電されていた。しかし、今回の事故を受け、我々は レジリエンス 性の欠如を疑い、またこの重要箇所の停電は明らかに受け入れられない為、
事件の収束後、確実に問題提議を行っていく」
ロンドン・インターネット・エクスチェンジ(LINX)では現在、150社がこの停止の影響を受けており、この停止のスケールの大きさを報告している。
Epsilon、SiPalto、EX Networks、Fast2Host、ICUK.net、およびEvoke Telecomらは、SNS上でサービス停止を顧客に謝罪しました。BTも影響を受けたと考えられていますが、コメント要求には応じていません。
以前2016年にTelecityデータセンターで発生した停止もUPSの問題(原因詳細非公開)が原因でした。「これは限られた顧客にのみ影響を与え、サービスは数分以内に復旧した」とEquinix UKのMD Russell Poole氏は当時このように述べていました。
障害に巻き込まれた英プロバイダGiganetは、同社の障害報告ページ上では詳細情報が提供されています。「残念なことに復旧への想定時間はまだ案内されていない。これが最もイライラする 」とコメントしています。
Data Center Dynamics
https://cafe-dc.com/security/equinix-ld8-data-center-experiences-major-outage/ 適切に設計されたデータセンターなら、冗長化されてるので、単に電源落とすだけなら、切り替わって問題は少ない
設定ミスとかオペレーションミスとかバグのほうが怖い |゚Д゚)ノ 普通正副2系統最低でも用意するだろ?
|゚Д゚)ノ 同じラック内でも電源系統も別にするだろ
|゚Д゚)ノ 途中切り替え機入れたってこれも冗長化するだろ?
|゚Д゚)ノ 何やってんのよ? 所詮電気頼みってのが痛いところ
予備電源だの優先燃料供給だのがあっても、終わる時は終わる
とはいえ2011.3.11の時は生き延びたらしいがね
コアルーターってなんだか知らんが、電柱や地下経路でNTT及びその他通信会社の局舎とのルートを切られたら本格的に終わると思うがね 同じロンドンだったかな
数年前に火災訓練の警報音でサーバーのHDDが次々と共鳴して壊れて銀行巻き込む大障害が起きたよな リング状のネットワーク同士でさらにリング作れば二ヶ所切れても余裕 前にサーバー監視みたいな夜中の仕事してた時は、ひたすら無駄な確認の電話をさせられて本当に無駄な仕事だと思ってすぐ辞めた リダンダント電源+UPSでコケるって何やらかしたんだ また日〇リアルダストプロダクツが世間に迷惑掛けてる >>8
大規模データセンターの仕事やってたけど「え、なんで?」という障害は1,2年に1回は起こってた
サービス停止するケースは遭遇しなかったけどな こういう所のUPS ってバックアップって概念よりも、サーバーでいうクラスタ的に並列で何台も動いてるんじゃないの? マジレスすると、コアファイターがガンダムに換装できなくなる 冗長電源両方とも同じUPSに繋いでたのかね
中小企業の社内サーバならまあ…って感じだけどISPも内包するネットワークの基幹ルータならもうちょっと気を使った方が良かったね
担当者には合掌 福岡県警に告ぐ。
明朝から県内、また日本全国の暴力団の強制逮捕と整理を必ず行え。対象は、すぐに拳銃を出しているいわゆる暴力団員らだ。サングラス暴力団員、小柄で卑劣な暴力団員らだ。
電波幻聴が聞こえていて聞いていたら、とてもじゃないがとっくに正気に悪すぎる段階である。一般人ばかり犠牲になり続けている。
常人なら発狂する段階にとっくに入っている。大勢死に過ぎている。整理を始めない事が不正気だ。
暴力団ヤクザらによる日本国の被害金は少なくとも年10兆円はある。年90兆円から年110兆円はありそうだという見通しだ。日本国の出生数が年に60万人は足りていない事が主な原因だ。
非常に少なく見ても年10兆円は被害金が出ている。暴力団員数30000人未満で割れば、一人当たり年3億円は罰金刑に値している。
この金額の大きさは、間違いなく全暴力団員を一度強制逮捕し整理して当然である事を証明している。
明朝から県内、また日本全国の暴力団員の強制逮捕と整理を始めろ。
私田中寛喜の命令で構わない。私田中寛喜の命令として明朝から始めろ。
私田中寛喜の命令で必ず始めろ。常識的に考えて、まともならすぐにでも全ての暴力団員の強制逮捕と整理を始めている。 フェイルオーバーする対向のルーターが同じラックに収容されて同じ電源系だったらアウアウ 2012年のニフティのシステム障害もUPSが原因だったな。
冗長化はされてたけどホコリによるショートでその機能も働かなかったらしい。 コアルータ1台ぐらい落ちてもBGPとかで上流下流で即座に別経路選択しますわ
知らんけど 障害対策のはずのUPSが原因の障害多すぎ
交換頻度が多すぎ 何らかの障害で正副どちらか落ちてて、そこに電源故障が重なったのかな?
単一のUPS障害でサービス断は常識的な設計なら有り得ない 暑い日が続いてますので某データセンターの休憩室にて昼寝をしてます 大規模UPSはだいたいこんなシステム構成になってたはず。
完全に並列で動いてるから一斉停止は有り得ないと思うんだけどな。
https://i.imgur.com/Sxgz2ay.gif >>10
オプションで異経路収容もできるし他社併用もできたはず
あとは、ワイヤレスもバックアップ回線として併用してたりとか >>48
これは簡略したもので、実際は自家発電設備が加わると思う
負荷機器も可能なら別々の電力会社から引き込むし >>20
家庭レベルだけど、うちにある複数台のPCやサーバをUPSに繋げてた事があるんだけど、その期間はUPSの不具合でしょっちゅう全部のマシンが止まってたわ。
中途半端なら余計なもんはかまさない方が安全だと強く感じた。 >>57
DCの停電で現在も進行中って書いてるんだけど。
電源も複数系統から確保してるのに。とも書いてあるような。 >>57
うち程度のところでも2系統から受電してるのに同時に複数系統が死ぬって意図的な破壊工作
とか? |゚Д゚)ノ UPSのせいだっつってるから、UPS分けてなかったんじゃないの?
|゚Д゚)ノ ちょっと考えられない構成だけど
|゚Д゚)ノ スルーするはずが一緒に掴んで落ちてるとか UPSが冗長化されてても切り替える部分が不具合で正常に切り替わらなかったらアウト。 >>63
これで落ちたことはあるな。
CVCFはあるんだけど、停電対応で発電機への系統切替のときに給電が不安定になって
停電、みたいな。 あれか
倍返しだとか言って
退職者が仕掛けとくヤツか データセンターも冗長化され複数の拠点があるでしょう >>10
知らないのにここまで知ったかぶりで話せるのはある意味才能だわ。村八分にされるだろうけど頑張って生きろ。 >>18
今は電話が自動化されて、座ってるだけの仕事になってるよw
コアルーターが落ちちゃえば監視不可だろうに、現実は半端な所が落ちて忙しくしてくる…w 落とす高さにもよるが、ケースが凹んだり最悪中身が壊れるかな。 >>1
昔、サーバの冗長化電源
2系統共に同じUPSから取ってるの見つけて
報告したら
施工業者出禁になってワロタ ちゃんと冗長化されていれば全ての拠点員に同時テロでもなければそうそう止まらんやろ >>63
パワーシュートの設定の問題か不具合で落ちたことあるわ >>1はなんでエンドユーザーの回線が全て一台で繋がってると思い込んでるんだろうか コアルータ が アルコール に見えてしまった
酒がそろそろ切れてきたか 【ばらまきキャンペーン】
新規登録者全員に入金不要で
【100ドルをプレゼント】
完全招待制のオンラインカジノ
【XIGOLO】が本日待望のリリース!
貰った100ドルの賭け条件はたったの1倍
同額をベットすれば即出金可能○
↓登録はこちらから↓
https://ameblo.jp/casinavi/entry-12619072141.html UPSも冗長化してるけど、切り替わらなかったんだろうなあ。
悪夢だなあ。 切り替わるように設計して何度も試験したのに実際の障害で切り替わらないとかよくあるからな。 冗長してても壊れ方によっては切り替わらないのが怖いところ どんなに冗長くんでも、ダメなときはダメなんだよ
可用性100%に近づく努力はするが、100%にはならん 例えばストレージだと同じベンダーだった場合に同じ不具合で待機系も死んでるのってあるけど、UPSもそういうのあるの? >>55
うちもUPSがうるせーと言われて捨てたわw ■ このスレッドは過去ログ倉庫に格納されています