NEC「SSDが2台壊れても動きます!」大田区「アプデを怠り3台壊れた賠償480万」NEC「」 [754019341]
■ このスレッドは過去ログ倉庫に格納されています
大田区、NECに賠償金480万円を請求 10月のシステム障害巡り SSD3台の同時故障想定できず
https://www.itmedia.co.jp/news/spv/2404/17/news197.html
大田区は4月17日、2023年10月に発生したシステム障害の検証結果を公開し、システムの運用・保守を担っていたNECに対し損害賠償金486万8437円を請求すると発表した。
障害の原因はNECによる情報共有の不足と結論付けている。同社も結果や損害賠償に同意しているという。
(略)
えぇ… @t8Xv8nnxSr37UZa←この垢の本人なんだが女の子()が云々のツイートあるけどそれら全部ゴミだからね^^ コレ元々ファームウェアに問題のある欠陥SSDを使用したのが原因
欠陥が発覚してからメーカーはファームウェアアップデートを呼びかけたが、NECは顧客に伝えずにアップデートしなかった
その結果、SSDが3台同時に壊れて復旧不可能 アップデートでシステム障害が生じたならまだしも放置して全損は免責できないよな
有名なサムスンのSSDかな?
うちもhpeのSSDのFWバージョン調査さらされたわ
住基って、NECOしたくてもなかなか止められなさそうなシステムだな 1台目が壊れた時点でなんで入れ替えなかったん?
というかRAIDはバックアップにならないといわれてるのに。。。 障害のあるSSDのバージョンアップを怠ってたのが悪い。
そら全額要求されるわ。 480万払って悪者役を引き受けてりゃ
システムも分からんアホ公務員から千万単位をボッタくれる契約取れるからって話だろ? >システム基盤は19年に構築
SSD5年もつかうなよ >>23
契約継続すれば480万なんて安いもんだよな 確か読み書きの回数を内部でカウントしてて、それがオーバーフローしたら壊れる、だっけ?
なら横並びで一斉に壊れるわいな。 そもそも同じロットのものを同じ環境で使っていれば同時期に壊れるのは常識だと思うんだけど? 保守契約してて障害起こしたんならそりゃ賠償請求されるんじゃね 記事読む限り、NECの製造部門が運用保守部門にアプデしないとSSD障害起こるよって通知してたのに、運用保守部門が区にも知らせず放置したせいで障害が起こったって読めるけど
区は別に悪くなくね? RAIDは別ロットで組むのがセオリーだろ。全部同じメーカーの同じロットだったんか?
>>30
読み書きじゃなくて、稼働時間ね。だから同時に壊れる こういうとこのシステムにSSDなんて使うものなのか? RAID6で3台同時故障かw
RAIDのHDDとかSSDはメーカー違い、ロット違いを組み合わせろとあれほど・・・・ >>30
んなわけない。通常は壊れる前にウェアレートのアラームが出る。今回はそもそもカウンターオーバーフローのロックアップ不具合の報告を怠ったんだから全面的にNECが悪い。 バックアップのバックアップまで壊れたってこと?
これはさすがに どんな強固なRAID組んでも同時故障は無理ゲーだろ そう言うシステム周りの管理までやるかどうかって契約か次第じゃないの >>45
挑戦だろ
SSD何て保存やシステムに使うの怖いわ
RAIDはHDDで充分だろ >>41
エンタープライズストレージなんて丸ごと納品だろうし製造時期はほぼ同じでしょ >>48
役所の何に速度を求めるのか分からんけどこういうのってHDDの方が壊れにくいんじゃないの? >>51
ちゃう、バックアップのことはこの記事には触れられてない >>46
メーカーまで違うストレージでRAID組んでる
業務システムなんて見たことないがな >>56
HDDもSSDも壊れる
それ以上でも以下でもない うちはメーカーは統一するが型式と購入時期はずらしている
自宅PCだけど このレベルなんだな
そらテスラも造れないわなこれじゃ
メルセデスの相互監視システムすら理解できないんじゃないのおまえらとかでも
あきれた HDDの方がメカニカルだから偶発的に壊れやすい
SDDは書き込みを繰り返せばいずれ必ず壊れるって聞いた 賠償すればノーカンみたいな考え方の企業に
システム構築を任せてはならない >>60
さすがに実務を知らなすぎでは?
微妙に容量が異なるストレージを組み合わせてたら
故障時に容量が足りずに交換できなくなることがあるんで
そんなのに対応する保守業者はいない ファームウェアのアップデートは保守契約に含まれてなかったのでは 日本の企業なんてこんなもん
税金に集って楽して儲けることしか考えてないからなw ディスクが壊れるのは仕方ない
稀に3台同時に壊れることもあるだろう
ただアップデートを怠っていたのは言い訳出来ない >>67
https://www.city.ota.tokyo.jp/oshirase/mokutekibetsu/other/system_20231010.html
本障害において発生したSSD の故障は、特定バージョンの製品にのみ発生する障害でした。
製品の修正情報(ファームウェアバージョンアップ等)について事業者製造部門から事業者運用保守部門へ案内があったにもかかわらず、区に対しての情報提供がなく、アップデート等の対応ができておりませんでした。
作業は含まれなくても情報提供の義務はあると思う
>>67
そう思ってユーザーに言って更新しないから、こういう訴訟になる。
だから保守員は必ずユーザーに言う。自社の製品の不具合だしね。 なんだNECがアプデのお知らせ怠ったりしてるのか
NECが悪いじゃん HPでもあったけど、SSDはバグのリスクあるの怖いわ 保守契約の内容次第かな
そういう保守契約でなければユーザーがバグフィクス情報を確認しパッチを適用するもんだし NECは社員もゴミサービスもゴミ他のメーカーが無償でやってること例えば最初に付いてくる初期化ツールも有料販売してるくらいゴミ >>76
システム運用もNECが委託を受けていたから
NECの責任は免れないな >>75
かつてのSeagateのめっちゃ壊れるHDDもファームの欠陥やなかったっけ?
ファームウェアのアップデートで治る系 これ1台壊れたけど動いてるしセーフ
2台目も壊れてるけど動いてるけどセーフ
3台目壊れた!なんか全部壊れた!
ってパターンじゃないよな?なわけないよな ゆうて富士通も似たようなもんやろ
じゃあどこがええんや RAIDだってraidのコントローラー壊れたらディスクの中身全部あぼーんする可能性あるわけで。
RAID+バックアップの構成にしないと。 3台同時別の要因かメーカー同じにしてるだけやろ
ありえん 自動でアップデート
ハードウエア運用のしきい値がちょっとでも外れたたらエラー表示
書き込み読み込み時にミスがちょっとでもあればエラー表示(一応書き込み読み込みは完了できてる場合でも)
こういうのないの??こういう風になってんじゃないの?おくれてないか
オートマぶっこわれてても警告でない日本車かよバカじゃねえのw RAIDはバックアップにはならないって昔から言われてるよね >>88
Windows10が寝てる間に11になってたことならある >>86
言うまでもなく普通そうしてるやろうし、このケースでバックアップなかったら復旧できんかったんちゃうか? >>1
NECによる情報共有の不足
めっちゃ分かるわw
NECの系列の下請けやってるけどアイツら本当に酷いからな、全然分かってねーの
だからそれぞれの部門が好き勝手にやってる >>89
この件はRAID機能をバックアップの代用にしてるという話やないと思うが >>58
メーカー修理で元のHDDはWD製だったけどSEAGATE製に変わったことあるわ
あと同じ型番のHDDだけど製造時期によりファームウェアが違って数百MB小さくなったためにRAIDに組み込めないこともあった >>88
不具合のあるファームなんだから正しくアラーム出すわけがない >>94
この件の話じゃないよ
レスの流れでただの雑談 >>70
こういうのは故障とは呼ばない。
製造問題とか不具合。
記事書いてる記者が馬鹿か、大田区の担当者がボンクラなんだろうね。 >>100
ああ、知ったかしたかっただけかw
すまんすまん SSDは壊れやすいのがコントローラ。まずディスク内全部読めなくなる。
HDDはコントローラが壊れる事はあまりなく、ディスクの一部が読めなくなる故障が多い。ちゃんとシステム組めばすぐに故障が判るので、被害を最小限に抑えることが出来る。 >>101
大田区のリリースが故障表記だからかもね >>70
事業者製造部門から事業者運用保守部門へ案内があった
あー、これ絶対現場に情報行ってないわw窓口となる営業も恐らく知らなかったのだろうなw >>102
ただの懐古厨だよ
RAID出始めの頃そういう話がよくあった
まあ間違って上書きしたらRAIDなど無力とかそんなレベルの話だったと思うが >>14
大田区の悪口言おうとしたら大田区悪くなかった PCの速度よりも先ずは職員自身の速度アップが先決だろ 俺でさえよ?
同じものは同時に壊れるかもしれないから
SSDは他メーカーのを二つ買ったよ?
役所にそのくらいの頭使える人いないの? >>118
メーカー製パソコンだからメーカーが同じの3台入れたんやろ たいしたことないだろ
多分遥かにNECが大田区に契約でふっかけてる >>88
日本人は警告表示を異様なほど嫌がるからなw
メーカーもバカな消費者に合わせて作るから、
壊れてるのに、日本車は壊れないと勘違いw >>118
こういうのは保守も含めた契約なので、発注元には全く非はない。
構成も受注者が考える。
何でも役場を叩けば良いってもんじゃないよ? FWアップデートによる影響は?って話になって
機能テストやらパフォーマンステストやら互換性テストを経て文書化して判子もらってってなるから面倒なんだよな
そこまでして費用請求できないし てめえのとこのシス管ゴミなのを押し付けてんじゃねえよ バックアップは?
バックアップのバックアップは?
RAIDはバックアップじゃねーから 1年くらいベータテストの了承で格安でバラ撒けばいいのに >>122
こういう「業界の常識」みたいなのが伝承されてないのが目立ってきてる >>131
常識でも何でもないしそもそもこれはそんな話ではない IntelかSamsungのエンタープライズ向けディスク >>23
正直、技官の公務員のほうがメーカーの連中より詳しいことが多い昨今。
国内メーカーのレベル低下が酷すぎ。
そりゃ国際競争力なんて無くなるわ。
今後は入札条件から国産縛りはどんどん無くなっていくかもね。 あー、これ情報出てたじゃん。なんで誰もチェックしないんだ >>14
サムスン製か
ファーム不良の突然死多発とかあったな >>19
詳しく。
DellEMCのストレージに積んでたサムスンのU.2.のSSDで覧サ警告が出て血キしてもらっbスんだけど関係bる? >>23
千万単位をぼったくりとか世間知らずすぎ。
NECにとって1000万2'000万の仕事なんて応札検討に値しないレベルのゴミ案件。
ぼったくるなら10億以上の案件がターゲットだよ。 >>143
なんだこりゃ。化けてる。
DellEMCのストレージに積んでたサムスンのU.2.のSSDが消耗の警告が出て交換してもらったんだけど関係あるのかな?って書いたつもりだったんだけど。 そういや2019年頃に買ったサーバのサムスン製SSDが5~6個一気に壊れた事あったけどファームバグだったのか? これだけのミスをして新車1台分の賠償金で済んで助かったな >>147
いまさらかよ。かなり有名な話だぞ
各サーバーメーカーにOEMもしてたから、影響大きかったのに >>147
うちのサーバーもサムスンの奴が壊れたけどもしかして NECなんかこの手の仕事なくなったら詰むんだからもっとふっかければいいのに SSDなんておもちゃだし壊れたら全損だからなあ
クリティカルなシステムに使うならバックアップは別に必要 役所みたいに文書とか軽いデータばっかりで予算使える所はHDDにして
故障したらどんどん交換したほうが良い
というかHDDもニアライン向けとか耐久性全振りのやつあるし
枯れた技術だからいい面もある 今年買い替えたサーバのSATA-SSDは全部マイクロン製になってた どっちが勝つかっつってな
ヒロキはつらいらしい
ヒロキの部屋住めるだろ 頼むから早くアルバム出して、どっかのタイミングで良かったのに
糖尿病薬なんだが 男とセックスしたい
あー、これがモチベーションアップにつながるとは >>14
これで480万で済ませてくれるって優しすぎだろ モデルナがクソ過ぎただけで判断しよ
絶対良い人をたててあげなきゃ モノも作れねぇ、保守管理もできねぇ
どんな人材育ててたらこんな会社に落ちぶれるんだ ジャニのちゃんねる超えるね
あのーYoutubeもTwitterもガーシーやさしいとガーシーから盛大に馬鹿にしてる... とにかく金を搾取してないのかな
まだ支持率30だから次の日に限っては炎上継続してたら
https://i.imgur.com/p45I71H.jpg 「最初の10年後はビールや
ここは耐えるしかない山下やらが活動して 遺伝もあんなガチってるの見てるみたいなので全然いいわ
というか
もうヘブバンで持ってそう… あの人が大半なのに
ネイサンみたいな回を最初に見てみると凄い人だから異性として見れなくなるって感じ 究極で言えばかなり理想に近いと思うんだが
タイミングも重要だけどね 今どきの工業製品はやたらと均質性が
高いから同一ロットのSSD やHDDで
RAID組むと同時期に一斉に壊れるから
あんまり意味がない
別メーカーを混ぜるか、せめてロット
違いを使わないとこうなる >>20
既定の稼働時間で死ぬ時限爆弾方式だから当然3台同時になる >>177
同じバグや欠陥抱えてると目も当てられんしなー 1台でも故障予兆を発報したら即交換やろ
監視オペ代すらケチってんのか? >>182
対策ファーム当ててなかったら突然死だよ。稼働時間の積算だから下手したら数分単位で同時停止。交換調整の暇もない。 LTO Ultrium9でバックアップ取っておけば良かったのに >>145
なぁ
なんでSSDを交換しなかったん?
なんでSSDを交換しなかったん?
ん?
んん? 以前はパソコンを使用した結果、いかなる損害
が生じても賠償しないという条文が使用許諾書
に書かれていた。パソコンなんてその程度の
ものとして付き合うのが吉。 SSDって書き込み出来ないけど読み出しはできるって風に壊れてくれないの? トラブルだらけのマイナ保険証いりません
仕事になりません
河野責任取って 100MとかそんなだったころのHDDはタバコの煙で壊れた >>88
サーバのソフトウェア、ましてRAID構成してるSSDのファームウェアを自動アップデートとか怖すぎるだろ >>189
読み出せるデータと読み出せないデータがあるから
SSDが壊れてROM化でも壊れたデータは読み出せない つーか元記事のタイトルと要点がおかしい
ディスク10台同時故障でも耐えられるシステムであっても
時間経過で崩壊するファーム使ってたら同じようにシステム止まってる 賠償500万円で済むあたりNECとは保守契約結んでなかったんだろう
NECはサーバ関連のページにファーム不具合について公開してたはず
大田区はそれをチェックなんかしなかった
大田区はNECが直接連絡してくれなかった事を理由に自治体としての責任を回避したい
NECも次回の注文取れるならってことで泥をかぶってあげることにした
みたいな顛末だろう
金も労力もケチった大田区の責任範囲は本来かなり広いはず 止まって困るシステムならバックアップどうこうよりサービス自体冗長化しとけよ
単一障害点残した設計なのが間違ってるし、予算でそうなってんなら文句言うな
モノは絶対壊れるんだよ >>198
パソコン組み立ててるのはLenovoだろ
NECは窓口だけだろ 中の人がアルバイトしかいない感じなのかな
技術者じゃなくても気付ける案件のような気がするんだが HDDなら運だけど
SSDでRAID5とか組んでも書き込み寿命で同時に壊れるわw >>202
技術力のきるエンジニアなんて失われた40年のあいだに今の老害ジジイ共が散々リストラしたり韓国に技術丸ごと売り払って私腹を肥やしてただろ。
文句は年寄り共にいいな。 どうやったらSSD3つ同時に壊れるんだ? 母数が10000000とかなのか? >>14
保守契約はあったんだろうか
伝えなかったということはなかったのかな >>65
なんでもそうだが最後は金で解決するしかないんだが
なくなったものを戻せとかあり得ない事ばかり言う方がどうかしてる 全部孫請けに丸投げだからNECはなんも分かってないだろ
下請けど怒鳴りつけて終わり >>196
それはメーカー側の業務だな
行政はメンテを委託する契約だから なんでデータ全損なんてするんだ?
普通にバックアップ構成組んでたら当日分の一部が吹っ飛ぶ程度だろ >>14
アップデートが発表されてから
ぶっ壊れるまでの期間がどれだけあったかだよね
何ヶ月も時間があったんだったら完全にダメだけど
アップデートが発表されて1週間とか2週間とか短期間でぶっ壊れたんだったら
これは運が悪いと言わざるを得ない 保守メンテがNEC任せの契約ならそら賠償責任はNECにあるだろ >>210
海外のエロサイトでも見ててウイルス感染したか
ZIP爆弾みたいなのに引っかかったんじゃないの >>210
RAIDだと同じ書き込み量になるから寿命も一緒に来るよん >>80川崎みたいな治安が悪いところと閑静な高級住宅街と日本屈指の規模を誇る空港が同居する街 >>210
同一ロットのSSDは大抵、同時期に壊れる SSDのファームのバグの話は稼働時間で壊れるってのじゃなかったか
だからかなり正確に同時に死ぬ
HPEのこれの話じゃないの
https://pc.watch.impress.co.jp/docs/news/1222207.html
> HPEのサーバー向けSAS SSD、稼働32,768時間超えでデータ喪失。復旧も不可 >>229
それだとして、保守契約してたら
こんなやすい損害賠償額にならないだろうから
多分、保守契約なしだけど告知怠ったから金払え!の難癖だと思うよ 賠償金額の算定に実損分しか算入されていない所に区側の温情が見えるよな
SSD全交換の費用やら職員研修の費用も普通なら入れるだろ
> システム基盤のクラウド移行を進めている。
これを請け負うのもNECだったりしてw ソースに、今回の障害を受けて
保守拠点に交換用SSDを用意した的なこと書いてあるが
これはベンダーの対応ではないよな、普通に考えれば
ってことは保守契約してなさそうだよな 記事の冒頭に「システムの運用・保守を担っていたNEC」って書いてあるのに契約してないことなんてあるの? >システム基盤のクラウド移行を進めている。
最後に本音が出ちゃったね
今度は悪徳業者に丸投げして税金ゴッソリ中抜きする算段だろうね
住民の個人情報も中国に献上出来るしな
もしかしてNECもグルなんじゃないのか? >>231
なんでクラウド移行の研修費用まで負担するんだよ
アホと違うか AWSのせいで障害率とコストが明確になってしまったから
無駄に高いサーバー売りつけたり、ボッタクリの保守メンテナンス料が請求できなくなってる >>14
保守契約とかないんか?
知ってて黙ってたのはもう言い逃れできねえな ハードウェア故障が怖いからクラウド
クラウドは回線落ちたら即死
回線落ちない契約は爆高
結局コストマシマシ RAIDーTMだろ
TM+HSにしておけよと言いつつも同時に壊れただと無理かw 富士通も日立も自社サーバー売ることは諦めて
AWSの使用料の10%を報酬をして請求する様に変化してる >>81
運用としてこれはやる、これはやらないは定義する 保守委託してるのに自前?でSSDを準備したって事は「もうお前なんて信用してねーよ」的な宣言なのかな 突然死するSSDで大事な情報の運用するって怖すぎないか? >>118みたいな>>1さえ読まずにしったかして大田区叩いてるような馬鹿が保守してるから賠償請求される事態になるんだろうなw こう言う時に限ってバックアップが相当古かったりするのよね >>241
研修はクラウド移行ではなく障害を受けての事業継続計画の教育だから障害の影響で発生したもの
費用を請求されても何らおかしくないな やっぱりフロッピーディスクが一番安定してるって風潮にしようぜ NEC、NTTD、富士通は日本が誇る世界最強のIT企業だからな
世界一高性能の富岳を作れるのはこの3社のみ
他にも貴様らが知らないすごいシステムが水面下でうごいている >>1
>NECによる情報共有の不足
何があったんだろ
同じもん3つくっつけちゃったのかな
と思ったら>>14かよw
ヒドス NECとか国内企業全体が信じられない時代になったもんだ
日本人が日本企業を信用できないまるで一昔前の中国みたいだな 大田区?金持ちなんしょ?高額なとこに頼めばいいじゃん。
区役所に自前鯖置いて、技術者どこからか引き抜いて管理させれば?
メモリ128Gでも1Tでも積んだり。 >>258
「アメリカ システム 不具合」で検索するだけでも結構障害のニュースが
出てきますがそれについてはどう思われますか? >>243
普通はあるよ。
NECも素直に非を認めてるところみると、おそらくパッチ出てるの気づかずに放置してだけだよ。
要するに怠慢だな。 壊れてたのに気づかず交換してなかっただけじゃないのか 2台SSD
1台ハードディスクとか
毎日LTOに書き出して
壊れての大丈夫とかないのかな 100%動くなんて誰も言わないだろ
確率が下がるだけだぞ >>205
サーバのRAID装置のファームアップデートしたら、いきなり初期化が始まったらしい
その日、上司はデータセンターから帰ってこなかった >>212
それは手を尽くした後の話だろ
顧客の利益を守ろうって意気込みもない連中が
ブランドイメージだけで雑に生きてるのに関わる意味がない >>229
これNECからも修正情報出てるからね。
FWアップデートしないと全部死ぬ >>268関わる意味ってその言い方ならそこと契約した事に対する責任って事にもなるが >>271
業者がまともなプロ意識を持っているか
精査せずに契約するのが悪いとか言い出したら
何もできないじゃん
そんな社会成り立つわけないだろ >>272
そういう書き方をしてたからだな
まあ普通は契約前にどんな会社かとは調べるもんだ
新規に企業と契約する場合なんかは特にな HDDで週イチでもバックアップ取ってりゃこんなことにはならんのにな
消えたのが申告直後の住民税データだから悲惨やろ
下手したら全部打ち直しや >>266
アレイカードのFW上げるときって、ディスク外しとくんしゃなかったっけ?笑
今の大半のRAIDはディスク側に構成情報持ってるし 確率的にはゼロでないにしても、
3台同時に壊れるって、宝くじみたいな確率じゃないんか?
もともと2台壊れててたのに放置してたとかじゃなくて?? MicronもM4だったかで寿命バグあった 当時一番売れてるSSD >>1
NECと富士通にシステム開発頼む奴がお馬鹿 口頭で伝えて真剣に検討せず
後から文章出しとけよ!と怒ってるパターンかもな ■ このスレッドは過去ログ倉庫に格納されています