2019年12月10日19時ごろ[編集 | ソースを編集]
EMCジャパンは、12月4日に同社ストレージ装置に故障が発生したことを認めたうえで、
「障害発生後から日本電子計算と復旧対応を行ってきた。ファームウエアを修正するなどして
12月6日午後10時15分にストレージの修復作業は完了し、日本電子計算へ納品した。
現在は日本電子計算で業務復旧作業中であり、当社も復旧へ向け全力で協力している」と述べた。
これに対して日本電子計算は12月10日、「12月6日にストレージ装置のファームウエアの
修正は完了したが、いまだに読み書きできないデータがあるのも事実で、復旧に至っていない。
その原因箇所がストレージ装置を含めシステムのどこなのか、さらにその内容も調査中で、
現状は特定できていない」とコメントした。
https://monobook.org/wiki/%E6%97%A5%E6%9C%AC%E9%9B%BB%E5%AD%90%E8%A8%88%E7%AE%97 0547ガニメデ(茸) [FR]2019/12/13(金) 21:47:12.49ID:aHJYtRRI0
東京都練馬区
@nerima_tokyo
【12月13日(金)現在】12月4日(水)の午前11時頃から発生しているシステム障害の復旧に向けて作業を行っておりますが、
全てのシステム(図書館情報システム、小中学校のホームページの閲覧、ねりまっぷ等)が復旧するまでにはもうしばらくかかる見込みです。
お詫び申し上げます。
午前9:02 · 2019年12月13日·Twitter Web App
0548ガニメデ(茸) [FR]2019/12/13(金) 21:51:27.79ID:aHJYtRRI0
商用のバックアップって1日1回は深夜にとってるもんじゃないの？
0550白色矮星(新日本) [FR]2019/12/13(金) 22:08:06.70ID:OVUdRH9N0
>>549
深夜の間にバックアップが完了して
次の朝からの業務に影響しないようにする必要がある
深夜も動いてたら何かうまくやる仕組みを考えないといけない 0551フォボス(ジパング) [US]2019/12/13(金) 22:08:24.97ID:Y6GhrQ4D0
0553スピカ(ジパング) [EU]2019/12/13(金) 22:12:45.96ID:ixhjm8uw0
>>551
止められないとかゴネるから痛い目にあう
他社ストレージでもヤバい修正物件は定期的に出る 0554イオ(関西地方) [US]2019/12/13(金) 22:14:52.96ID:JfeF4GFw0
>>527
大手のネームバリューで大金貰って仕事してんだから、
予備機ぐらいは自分で用意しとけと思う。
>>529
大手ITの冗長化なんて、実際の障害時に役に立たなかった経験ばかりだろ。
去年の台風の時も非常用発電機が動かなくて、バッテリー切れるのでサーバ落としに来てくれと電話かかってくるし、
ネットワークの予備系統系への自動切換えに失敗するわ、経路切り替えにも失敗するわでネットワークも切れたし。
運用開始前のテストでは問題なかったんですが、と後から言い訳されてもなぁ。。。
>>549
俺のとこだと、予備系へのスナップショットは分単位で取る。
ストレージのフルバックアップが１時間単位。
データの完全エクスポートとオフサイトへの完全ミラーが１日１回。 >>551
この環境はこれでも新しいバージョンで運用してた方だと思うよ。クソみたいな運用ポリシーのところでは「問題が起きてない」からと導入してから一度もアップデートかけないところがザラにある。
メーカーサポートが終了間際に慌ててアップデートかけたり、Windows XP終了騒動の時のような事を普通にサーバーサイドでもやってるよ。 0556フォボス(ジパング) [US]2019/12/13(金) 22:24:00.08ID:Y6GhrQ4D0
>>553
そうですね
9月には日本語で情報提供されていたのだし、パッチをあてなくてもFast cacheを無効にするだけで避けられる不具合なのだから、放置していたとすると日本電子計算の過失は限りなく100%に近い感じですね 0557ガニメデ(茸) [FR]2019/12/13(金) 22:25:59.10ID:aHJYtRRI0
示唆メール 市に5回／弘前・情報流出
12/13(金) 12:01配信 Web東奥
弘前市職員の個人情報が漏えいしたとみられる問題について記者会見する堀川人事課長（右）
青森県弘前市職員の約2700人分の個人情報とみられるデータが東奥日報社に寄せられた問題を受け、
同市は13日朝から対応に追われた。
桜田宏市長は報道各社の取材に対し「職員の不安を払拭（ふっしょく）するために、厳正に対処したい。
まずは内部でしっかりと調査する」と語った。
市は市役所で緊急の記者会見を開き、対応状況を説明。個人情報流出を示唆するメールが市人事課に4回にわたって届き、
市秘書課にも一部職員の情報が記載されたメールが寄せられていたと明らかにした。
市の幹部職員らは報道各社の取材対応に追われ、午前10時の市議会一般質問開始前には議員控室に慌ただしく出入りした。
鎌田雅人副市長は、市議会一般質問冒頭で「（東奥日報に寄せられた）データが市のものかどうか確認作業を鋭意進めている」とし、
「今後データの確認・分析、データの保有者、アクセス記録、外部からの侵入形跡など多方面から調査を行う。調査がまとまり次第、議会に報告する」と述べた。
これに対し、工藤光志議員（木揚公明）が提出した緊急質問を求める動議が成立し、議会は議事整理のため一時休憩に入った。
午前11時からは市人事課の堀川慎一課長らが市役所内の記者室で記者会見を開き、経過などを説明した。
0558ガニメデ(茸) [FR]2019/12/13(金) 22:27:23.88ID:aHJYtRRI0
市人事課へのメールは11月18日から4回、市秘書課には今月12日にメールが寄せられたとした。
東奥日報にメールで寄せられたデータには、
2017年度時点とみられる市長部局、市教委、市立病院、弘前地区消防事務組合消防本部などの2747人（常勤、非常勤職員）の情報が記載されていた。
氏名や住所、所属先のほか、最終学歴、給料支給額など詳細な情報が網羅されている。
>>556
そうはいってもFAST前提の性能設計してると無効にするにしてもバージョンアップのスケジュールが年末とかに計画されてたりして、業務影響と天秤に掛けて結局後回し、で今回の最悪の結果に。そんな背景じゃないかな 0560ガニメデ(茸) [FR]2019/12/13(金) 22:50:18.14ID:aHJYtRRI0
東京都中野区（広報係）
@tokyo_nakano
中野区のシステムに障害が生じています。
メールの送受信は可能となりました。
介護保険や高齢者支援の手続きはできません。
また、中野区HPの復旧はもう少し時間がかかる見込みです。
長い間ご不便をおかけし、大変申し訳ございません。
午後6:09 · 2019年12月13日·Twitter for Android
0561ジュノー(東京都) [CN]2019/12/13(金) 23:00:45.12ID:udqLVOvD0
情シスをまるごと外注してるところは悲惨だな
ちょい赤字程度なら情シスある方がなんぼかマシレベル
0563ジュノー(東京都) [CN]2019/12/13(金) 23:04:13.94ID:udqLVOvD0
日本電子計算倒産まだー
ブロードリンクとチキンレース開催しろ
0564プレセペ星団(奈良県) [US]2019/12/13(金) 23:15:31.83ID:IC41RNRZ0
0565グレートウォール(秋) [US]2019/12/13(金) 23:30:54.28ID:72W5rCU00
ストレージサーバのエンジニアとか、DBの担当とかもそう
話聞いてるだけでハゲそう
0566カリスト(茸) [FR]2019/12/14(土) 00:02:41.80ID:Yp+7fbS60
2019/12/13 15:10
「別クラウドで再構築」、10日目突入の50自治体システム障害に進展
松浦 龍夫＝日経 xTECH／日経コンピュータ
2019年12月4日に日本電子計算の自治体向けIaaS「Jip-Base」および、
それを利用していた50自治体でシステム障害が発生した問題で2019年12月13日、
複数の自治体が本番環境とは別のクラウド環境によるシステムの再構築を進めていることが分かった。
その一つである大阪府和泉市は、「現在はバックアップ用システムで稼働しているが処理能力に限界があるため、業務に支障が出ている。
12月14日の土曜日に作業をして、週明けの12月16日から再開できる見込み」とコメントした。
これだけ長期の障害となると現場も緊張感がなくなってるだろうな。
うちのマイナーなサービスがぶっ壊れた時は毎日数回定時報告してたものだが
毎回客に「進捗なし」の報告するの辛かったわw
0568カリスト(茸) [FR]2019/12/14(土) 00:04:39.12ID:Yp+7fbS60
千葉県浦安市や愛知県東浦町も同様に別クラウド上での再構築の検討を始めており、
例えば浦安市ではまだ再開できていない要介護認定などの介護保険業務システムを別クラウドで再構築する方向で進めている。
いずれの自治体も「日本電子計算に本番環境とは別のクラウドの領域を用意してもらい、
そこに業務システムを立て直す」（和泉市）という。
日本電子計算は再構築に関し、「現状のお客様の個別システムの復旧状況についてはコメントできない」と回答した。
和泉市によると、日本電子計算と結んだ契約ではシステム障害から再開までの時間は4時間だったが、
障害発生からすでに10日目に達している。
「クラウド上では本番機とバックアップ機など2重化の構成にしていた」（東浦町）という複数の自治体の証言からすると、
なぜ日本電子計算のクラウド内部で冗長化機能が働かなかったかに注目が集まる。
しかし同社は、自治体にも対外的にも詳細な説明を行っていない。
ある自治体担当者によると、「障害の発生箇所であるストレージ装置も冗長化していたが、
冗長化の機能がうまく動かなかったとの説明しか日本電子計算から受けていない」という。
ガンマ線バーストに襲われた時の予行演習になったかな
0570オールトの雲(東京都) [UA]2019/12/14(土) 00:35:02.56ID:i4ZIovvy0
>>567
多分ストレージの障害自体の復旧は終わって、バックアップから書き戻してお客とデータの確認作業してるんじゃないか？
データ自体は客がチェックしないとどうしようもないし。 0571エイベル2218(ジパング) [IT]2019/12/14(土) 00:40:45.05ID:mmv3gpZI0
責任の所在もクラウド
0572ジャコビニ・チンナー彗星(宮城県) [US]2019/12/14(土) 00:45:03.72ID:aqNHuu3v0
仮想化環境の制御コンソール自体が仮想化環境の中にあるわけだが
民主党不況時に整備されたシステムってみんなこんな感じなのか
おいおいUnityやべーな
Unrealエンジン使うわ
0574アルファ・ケンタウリ(三重県) [ﾆﾀﾞ]2019/12/14(土) 00:58:13.63ID:GpmgLhLi0
>>570
レストアしても読み出せず書き込みも出来なくなってんじゃないかな。
だから別の基盤に再構築始めてるのかと。 >>17
皆の心の中にある甘酸っぱいフレッシュ・メモリーを大切にな。 0577アルファ・ケンタウリ(三重県) [ﾆﾀﾞ]2019/12/14(土) 01:11:53.03ID:GpmgLhLi0
>>576
サーバー持ちたく無いっていう理由が多いけどサーバーくらい持てばいいんのに。
仮想環境無い頃と比べたら遥かに楽だろ。 0578カリスト(茸) [FR]2019/12/14(土) 02:14:19.71ID:Yp+7fbS60
0580デネボラ(SB-iPhone) [CA]2019/12/14(土) 02:39:54.26ID:POOvtxA50
>>577
100のシステムに100通りのハードウェアがあると運用コストがかかって仕方がないんだよ 0582エンケラドゥス(宮城県) [US]2019/12/14(土) 03:56:28.08ID:70/OaY/a0
>>376
普通の会社は遠隔地の事業所間でバックアップ持ってるんだよ 0584ヒアデス星団(東京都) [US]2019/12/14(土) 04:32:24.70ID:tPorzkdz0
>>348
結果論でなくサービスインからEoLまでを完璧
に予測した神設計が必ずできるんなら貴方は正しい。 >>559
ストレージのキャッシュ不整合とか速度とか言ってないでダッシュでやらなきゃいけない案件だろ。
銀行の勘定系とかと違って、自治体のシステムなんて毎日夜止まるんだからいつでもできるし。
どっかの自治体のクソ小役人が「俺の納得する答え持ってくるまで止めさせない」とかホザいてパッチあてられなかったんじゃねーの？
コネアスペが権力持っちゃって、無茶苦茶
やるの自治体とか農協系に多いんだよな。 0587ベクルックス(SB-iPhone) [KR]2019/12/14(土) 08:54:08.20ID:Jj91FnQq0
>>581
だから仮想化して運用コストを下げるんじゃね？ 0588ベクルックス(SB-iPhone) [KR]2019/12/14(土) 08:59:43.77ID:Jj91FnQq0
>>586
50自治体全部が同じ対応をするとは考えにくい
提案していたらいくつかは対処するようになったはず >>586
そういうクソ役人を説得できない奴が無能なんだろ。
放置した結果今回のような事態を招くのであれば、さすがに認めざるを
得ないだろ。共同利用で合意が取れない自治体のせいで作業ができない
ならそれを他の客と共有しておけばいい。
それをやっておけば、ある程度責任転嫁できるだろ。
っつかサービス仕様に入れとけよ。 0590ベスタ(東京都) [CN]2019/12/14(土) 09:09:15.44ID:xhNp2A+Q0
>俺の納得する答え持ってくるまで止めさせない
とかそんな馬鹿いねーよｗ
今どきセキュリティ対策でパッチ当ては必須だ
やらないと旧自治省（総務省）様から呼び出されてボコボコにされるｗ
頭が悪いあり得ない嘘つくんじゃねーｗ
一昔前はこんな感じの事故は対岸の火事として笑ってたもんだがなー
どうせ調子のいいことばっか言ってパッチを当てるときもサービスを止めずにできますとか言ってたんだろ。
で、実はストレージのファームウェアはサービス止めないと出来ないのに後から気づいたけと、当初の説明
を盾にされて拒否される、と。
システム発注する側も上を説得するのに使った材料をひっくり返えされたら、はいそうですか。とは言えねえだろ。
EMCジャパン「だから"フラッシュ"」って書いてあるじゃないですか❗
いろんなメーカーが売ってるけど、結局、同じ下請け工場で書いてるんだろうねえ
0596エウロパ(関西地方) [US]2019/12/14(土) 09:38:21.14ID:UlpE+o+I0
>>576
流行り言葉だから、知事とか市長あたりが選挙の実績として入れろと言ってくる場合がある。
クラウド化してコスト削減しました！
災害時にも安全です！
とかな。
実際の費用は高かったり、安いのは初年度だけだったりするけど、
そこは有権者からは見えないからな。
業務端末のタブレット化とかも同じ流れだな。
キーボード無しでどうやって入力するんだよ？ って思うが、
市長あたりだとキーボード要らんから分からないんだろうな。 