
1: 山下(ジパング) [ニダ] 2024/04/17(水) 21:04:38.43 ID:t2UWbUS90 BE:754019341-PLT(12346)
大田区、NECに賠償金480万円を請求 10月のシステム障害巡り SSD3台の同時故障想定できず
大田区は4月17日、2023年10月に発生したシステム障害の検証結果を公開し、システムの運用・保守を担っていたNECに対し損害賠償金486万8437円を請求すると発表した。
障害の原因はNECによる情報共有の不足と結論付けている。同社も結果や損害賠償に同意しているという。
大田区は4月17日、2023年10月に発生したシステム障害の検証結果を公開し、システムの運用・保守を担っていたNECに対し損害賠償金486万8437円を請求すると発表した。
障害の原因はNECによる情報共有の不足と結論付けている。同社も結果や損害賠償に同意しているという。
以下ソース
えぇ…
4: 名無しさん@涙目です。(茸) [BO] 2024/04/17(水) 21:05:28.04 ID:dXZlZ0zl0
冗長性ェ
61: 名無しさん@涙目です。(SB-Android) [DE] 2024/04/17(水) 21:23:57.94 ID:g2huWuq80
>>4
RAID6でも2台までだからな
RAID6でも2台までだからな
5: 名無しさん@涙目です。(東京都) [US] 2024/04/17(水) 21:05:43.48 ID:x4X+PCmb0
3台壊れたらダメなのがネックだな
NECだけに
NECだけに
97: 名無しさん@涙目です。(庭) [CH] 2024/04/17(水) 21:43:30.72 ID:gxgQUPAe0
>>5
158: 名無しさん@涙目です。(大阪府) [US] 2024/04/17(水) 23:55:23.09 ID:ZmNiPGay0
>>5
評価します!
評価します!
7: 名無しさん@涙目です。(ジパング) [US] 2024/04/17(水) 21:06:02.45 ID:sYJA3jf00
猫に小判
8: 名無しさん@涙目です。(みかか) [CN] 2024/04/17(水) 21:06:03.03 ID:HuFTo5610
サポート契約してなきゃ無効でしょそんなの
10: 名無しさん@涙目です。(ジパング) [US] 2024/04/17(水) 21:06:31.57 ID:5e4ZJe1k0
ずらさずに同タイミングで導入したんかな
11: 名無しさん@涙目です。(東京都) [US] 2024/04/17(水) 21:08:01.15 ID:EAKwsA2/0
3台同時は設計上でも考慮対象外では?
13: 名無しさん@涙目です。(庭) [KH] 2024/04/17(水) 21:08:38.76 ID:5QU/97Dy0
同時に三つ故障とか嘘くせぇ
17: 警備員[Lv.20(前16)][苗](神奈川県) [US] 2024/04/17(水) 21:09:28.23 ID:MKMke3xI0
>>13
リンク先見るとSSDのバグっぽいよ
リンク先見るとSSDのバグっぽいよ
14: 名無しさん@涙目です。(茸) [CN] 2024/04/17(水) 21:09:09.40 ID:pbljwq4y0
コレ元々ファームウェアに問題のある欠陥SSDを使用したのが原因
欠陥が発覚してからメーカーはファームウェアアップデートを呼びかけたが、NECは顧客に伝えずにアップデートしなかった
その結果、SSDが3台同時に壊れて復旧不可能
欠陥が発覚してからメーカーはファームウェアアップデートを呼びかけたが、NECは顧客に伝えずにアップデートしなかった
その結果、SSDが3台同時に壊れて復旧不可能
24: 名無しさん@涙目です。(茸) [US] 2024/04/17(水) 21:10:51.08 ID:4VBVTZ2f0
>>14
なんだ100%悪いじゃん
なんだ100%悪いじゃん
72: 名無しさん@涙目です。(庭) [ID] 2024/04/17(水) 21:31:08.84 ID:i0/u/a1Y0
>>14
NECに落ち度しかねえ
NECに落ち度しかねえ
85: 名無しさん@涙目です。(茸) [ニダ] 2024/04/17(水) 21:38:17.99 ID:c6vV9xnv0
>>14
そら怒られるわ
そら怒られるわ
112: 名無しさん@涙目です。(ジパング) [US] 2024/04/17(水) 21:58:54.79 ID:BtZXQAaU0
>>14
大田区の悪口言おうとしたら大田区悪くなかった
大田区の悪口言おうとしたら大田区悪くなかった
165: 名無しさん@涙目です。(庭) [GB] 2024/04/18(木) 00:26:54.37 ID:o4c2V1160
>>14
これで480万で済ませてくれるって優しすぎだろ
これで480万で済ませてくれるって優しすぎだろ
215: 警備員[Lv.4(前9)][新][苗](愛知県) [US] 2024/04/18(木) 08:00:39.49 ID:vrBbpB4R0
>>14
流石にこれはと思わせることが起きてた
流石にこれはと思わせることが起きてた
20: 名無しさん@涙目です。(神奈川県) [US] 2024/04/17(水) 21:10:13.77 ID:omJsyLzp0
1台目が壊れた時点でなんで入れ替えなかったん?
というかRAIDはバックアップにならないといわれてるのに。。。
というかRAIDはバックアップにならないといわれてるのに。。。
179: 名無しさん@涙目です。(茸) [US] 2024/04/18(木) 01:18:27.36 ID:4YCC4ANa0
>>20
既定の稼働時間で市ぬ時限爆弾方式だから当然3台同時になる
既定の稼働時間で市ぬ時限爆弾方式だから当然3台同時になる
18: (みょ)(みょ) [BR] 2024/04/17(水) 21:09:44.69 ID:5trrFGcm0
アップデートでシステム障害が生じたならまだしも放置して全損は免責できないよな
26: 名無しさん@涙目です。(茸) [BO] 2024/04/17(水) 21:11:11.57 ID:dXZlZ0zl0
中の人「ファームウェアって何?」
28: 警備員[Lv.14(前18)][苗](庭) [US] 2024/04/17(水) 21:11:34.14 ID:/YV1ecwt0
>システム基盤は19年に構築
SSD5年もつかうなよ
SSD5年もつかうなよ
30: 名無しさん@涙目です。(熊本県) [US] 2024/04/17(水) 21:15:25.72 ID:m8CAPR3w0
確か読み書きの回数を内部でカウントしてて、それがオーバーフローしたら壊れる、だっけ?
なら横並びで一斉に壊れるわいな。
なら横並びで一斉に壊れるわいな。
42: 名無しさん@涙目です。(愛知県) [US] 2024/04/17(水) 21:19:26.90 ID:FfSpOxcz0 BE:896590257-PLT(20003)
>>30
読み書きじゃなくて、稼働時間ね。だから同時に壊れる
読み書きじゃなくて、稼働時間ね。だから同時に壊れる
31: 名無しさん@涙目です。(ジパング) [US] 2024/04/17(水) 21:15:28.30 ID:kBNPCOeQ0
そもそも同じロットのものを同じ環境で使っていれば同時期に壊れるのは常識だと思うんだけど?
33: 警備員[Lv.16][苗](庭) [US] 2024/04/17(水) 21:15:44.44 ID:Nr8RATfv0
役所の鯖缶がアホなだけちゃうん?
41: 警備員[Lv.24(前12)][苗](庭) [ニダ] 2024/04/17(水) 21:19:21.37 ID:2WBDQXuB0
RAIDは別ロットで組むのがセオリーだろ。全部同じメーカーの同じロットだったんか?
55: 名無しさん@涙目です。(東京都) [US] 2024/04/17(水) 21:21:52.28 ID:uqEhMTQn0
>>41
エンタープライズストレージなんて丸ごと納品だろうし製造時期はほぼ同じでしょ
エンタープライズストレージなんて丸ごと納品だろうし製造時期はほぼ同じでしょ
45: 名無しさん@涙目です。(茸) [KR] 2024/04/17(水) 21:20:03.31 ID:ih+c/93G0
こういうとこのシステムにSSDなんて使うものなのか?
54: 名無しさん@涙目です。(東京都) [ニダ] 2024/04/17(水) 21:21:49.84 ID:fBf2VB9A0
>>45
挑戦だろ
SSD何て保存やシステムに使うの怖いわ
RAIDはHDDで充分だろ
挑戦だろ
SSD何て保存やシステムに使うの怖いわ
RAIDはHDDで充分だろ
95: 名無しさん@涙目です。(神奈川県) [BE] 2024/04/17(水) 21:41:59.66 ID:rU/vvAEJ0
46: 名無しさん@涙目です。(東京都) [KR] 2024/04/17(水) 21:20:03.54 ID:wCLjdg8A0
RAID6で3台同時故障かw
RAIDのHDDとかSSDはメーカー違い、ロット違いを組み合わせろとあれほど・・・・
RAIDのHDDとかSSDはメーカー違い、ロット違いを組み合わせろとあれほど・・・・
58: 名無しさん@涙目です。(東京都) [DE] 2024/04/17(水) 21:22:31.29 ID:wsdVCQ+60
>>46
メーカーまで違うストレージでRAID組んでる
業務システムなんて見たことないがな
メーカーまで違うストレージでRAID組んでる
業務システムなんて見たことないがな
60: 名無しさん@涙目です。(東京都) [KR] 2024/04/17(水) 21:23:21.44 ID:wCLjdg8A0
>>58
そして破綻するw
そして破綻するw
66: 名無しさん@涙目です。(東京都) [DE] 2024/04/17(水) 21:26:45.36 ID:wsdVCQ+60
>>60
さすがに実務を知らなすぎでは?
微妙に容量が異なるストレージを組み合わせてたら
故障時に容量が足りずに交換できなくなることがあるんで
そんなのに対応する保守業者はいない
さすがに実務を知らなすぎでは?
微妙に容量が異なるストレージを組み合わせてたら
故障時に容量が足りずに交換できなくなることがあるんで
そんなのに対応する保守業者はいない
98: 名無しさん@涙目です。(SB-Android) [US] 2024/04/17(水) 21:43:45.84 ID:PiRXbBoV0
>>58
メーカー修理で元のHDDはWD製だったけどSEAGATE製に変わったことあるわ
あと同じ型番のHDDだけど製造時期によりファームウェアが違って数百MB小さくなったためにRAIDに組み込めないこともあった
メーカー修理で元のHDDはWD製だったけどSEAGATE製に変わったことあるわ
あと同じ型番のHDDだけど製造時期によりファームウェアが違って数百MB小さくなったためにRAIDに組み込めないこともあった
62: 山下(ジパング) [BR] 2024/04/17(水) 21:24:42.04 ID:R1V5kdmn0
うちはメーカーは統一するが型式と購入時期はずらしている
自宅PCだけど
自宅PCだけど
51: 名無しさん@涙目です。(秋田県) [ニダ] 2024/04/17(水) 21:21:24.31 ID:7awFX6Le0
バックアップのバックアップまで壊れたってこと?
これはさすがに
これはさすがに
57: 名無しさん@涙目です。(東京都) [KR] 2024/04/17(水) 21:22:08.88 ID:wCLjdg8A0
>>51
ちゃう、バックアップのことはこの記事には触れられてない
ちゃう、バックアップのことはこの記事には触れられてない
67: 名無しさん@涙目です。(茸) [BO] 2024/04/17(水) 21:27:06.80 ID:dXZlZ0zl0
ファームウェアのアップデートは保守契約に含まれてなかったのでは
70: 名無しさん@涙目です。(東京都) [US] 2024/04/17(水) 21:30:10.58 ID:uqEhMTQn0
>>67
https://www.city.ota.tokyo.jp/oshirase/mokutekibetsu/other/system_20231010.html
本障害において発生したSSD の故障は、特定バージョンの製品にのみ発生する障害でした。
製品の修正情報(ファームウェアバージョンアップ等)について事業者製造部門から事業者運用保守部門へ案内があったにもかかわらず、区に対しての情報提供がなく、アップデート等の対応ができておりませんでした。
作業は含まれなくても情報提供の義務はあると思う
https://www.city.ota.tokyo.jp/oshirase/mokutekibetsu/other/system_20231010.html
本障害において発生したSSD の故障は、特定バージョンの製品にのみ発生する障害でした。
製品の修正情報(ファームウェアバージョンアップ等)について事業者製造部門から事業者運用保守部門へ案内があったにもかかわらず、区に対しての情報提供がなく、アップデート等の対応ができておりませんでした。
作業は含まれなくても情報提供の義務はあると思う
106: 名無しさん@涙目です。(東京都) [US] 2024/04/17(水) 21:48:09.39 ID:99mjKHlZ0
>>70
事業者製造部門から事業者運用保守部門へ案内があった
あー、これ絶対現場に情報行ってないわw窓口となる営業も恐らく知らなかったのだろうなw
事業者製造部門から事業者運用保守部門へ案内があった
あー、これ絶対現場に情報行ってないわw窓口となる営業も恐らく知らなかったのだろうなw
75: 警備員[Lv.10][苗](神奈川県) [US] 2024/04/17(水) 21:32:22.79 ID:wPiUqjZk0
HPでもあったけど、SSDはバグのリスクあるの怖いわ
82: 名無しさん@涙目です。(東京都) [US] 2024/04/17(水) 21:37:06.30 ID:IZ1TD8dx0
>>75
かつてのSeagateのめっちゃ壊れるHDDもファームの欠陥やなかったっけ?
ファームウェアのアップデートで治る系
かつてのSeagateのめっちゃ壊れるHDDもファームの欠陥やなかったっけ?
ファームウェアのアップデートで治る系
86: 名無しさん@涙目です。(千葉県) [ニダ] 2024/04/17(水) 21:38:17.98 ID:Mk2ofwWc0
RAIDだってraidのコントローラー壊れたらディスクの中身全部あぼーんする可能性あるわけで。
RAID+バックアップの構成にしないと。
RAID+バックアップの構成にしないと。
91: 名無しさん@涙目です。(東京都) [US] 2024/04/17(水) 21:40:36.77 ID:IZ1TD8dx0
>>86
言うまでもなく普通そうしてるやろうし、このケースでバックアップなかったら復旧できんかったんちゃうか?
言うまでもなく普通そうしてるやろうし、このケースでバックアップなかったら復旧できんかったんちゃうか?
126: 名無しさん@涙目です。(東京都) [US] 2024/04/17(水) 22:37:49.77 ID:Yd5yEFgE0
FWアップデートによる影響は?って話になって
機能テストやらパフォーマンステストやら互換性テストを経て文書化して判子もらってってなるから面倒なんだよな
そこまでして費用請求できないし
機能テストやらパフォーマンステストやら互換性テストを経て文書化して判子もらってってなるから面倒なんだよな
そこまでして費用請求できないし
147: 名無しさん@涙目です。(神奈川県) [BE] 2024/04/17(水) 23:16:40.23 ID:rU/vvAEJ0
そういや2019年頃に買ったサーバのサムスン製SSDが5~6個一気に壊れた事あったけどファームバグだったのか?
149: 名無しさん@涙目です。(茸) [ニダ] 2024/04/17(水) 23:23:25.26 ID:lbmkslDZ0
>>147
いまさらかよ。かなり有名な話だぞ
各サーバーメーカーにOEMもしてたから、影響大きかったのに
いまさらかよ。かなり有名な話だぞ
各サーバーメーカーにOEMもしてたから、影響大きかったのに
182: 名無しさん@涙目です。(ジパング) [ニダ] 2024/04/18(木) 03:07:10.80 ID:/oINqiJX0
1台でも故障予兆を発報したら即交換やろ
監視オペ代すらケチってんのか?
監視オペ代すらケチってんのか?
183: 名無しさん@涙目です。(東京都) [US] 2024/04/18(木) 03:23:09.00 ID:+u/NF3Xl0
>>182
対策ファーム当ててなかったら突然市だよ。稼働時間の積算だから下手したら数分単位で同時停止。交換調整の暇もない。
対策ファーム当ててなかったら突然市だよ。稼働時間の積算だから下手したら数分単位で同時停止。交換調整の暇もない。
199: 名無しさん@涙目です。(庭) [US] 2024/04/18(木) 05:54:05.40 ID:3NOvBwDF0
止まって困るシステムならバックアップどうこうよりサービス自体冗長化しとけよ
単一障害点残した設計なのが間違ってるし、予算でそうなってんなら文句言うな
モノは絶対壊れるんだよ
単一障害点残した設計なのが間違ってるし、予算でそうなってんなら文句言うな
モノは絶対壊れるんだよ
207: 名無しさん@涙目です。(埼玉県) [IT] 2024/04/18(木) 07:11:30.25 ID:meCxOTCy0
高くてもクラウドにしろよー
あっちの責任になるで
あっちの責任になるで
引用元: https://hayabusa9.5ch.net/test/read.cgi/news/1713355478/

コメント
コメント一覧 (48)
ソース
gigazine.net/news/20230214-samsung-990-pro-fix/
wavefanc
が
しました
同じ不具合抱えてる機器で冗長性確保しても無意味だよね
wavefanc
が
しました
吹っ飛んだクラウドもあっただろ。途中の通信障害ですら止まるのは駄目だよ
wavefanc
が
しました
同メーカー同ロットだと同時期に壊れる可能性ある、
ってのはよく言われてるが、業務ではわざわざ分けんだろなあ
wavefanc
が
しました
組込機だけなんかな
wavefanc
が
しました
wavefanc
が
しました
raid再構築して冗長性を確保するんじゃないの?
そこまで大規模のシステムじゃなかったとかかな
wavefanc
が
しました
去年見たのに忘れた
2台同時までならRAIDで耐えられても3台同時は不運すぎる
RAIDをRAIDしないと
wavefanc
が
しました
wavefanc
が
しました
wavefanc
が
しました
復旧も不可って事になってるし
wavefanc
が
しました
wavefanc
が
しました
消費電力からシステムの処理速度までメリットでしか無いのに役所みたいにメリットしかねえわ
世界中のサーバーがSSDに置き換わったら世界の消費電力の1%が削減されるんだぞ 異常すぎるわ
wavefanc
が
しました
大抵の「法人」保守契約では「障害/バグ情報の通知」のような条項(有償)があり、ユーザー側は(少なくともSSD保守に関して)これを外していたと思われる。
今回、表側ではメーカーに責任を丸投げする代わりに、ユーザーは今後は上記契約その他も交わして運用継続という落としどころだ推察。
wavefanc
が
しました
そもそも「メーカーがユーザーにバグ情報を共有しなかった」ことが障害の根本原因として成立しない。
#ハードウェアやソフトウェアばかりでなく、そういう専門的で細かいことも「売る」のがメーカーだから。
#逆にこの理由こそが「ユーザー側に問題あり」と自白しているようなもの。
メーカー側(特に契約を取り付けた営業)からすれば「だから言ったじゃないですか。『障害/バグ情報とかはユーザーさんで調べて、自システム適用の要不要を判断することになりますよ。見落として障害が起こったらユーザーさんの責任になっちゃいますよ』って」案件。
元記事の「再発防止策として(略)保守拠点にも交換用SSDを複数確保」からも「そんな準備もない程度の契約だった」と分かる。
元記事「故障したものと同じバージョンのSSDを全数交換」も、技術的にはファームウェアアップデートで済む(保守契約内で無償)が、表立っての「完全に対処しました」という言い訳と、メーカー側の売り上げ(責任を負ってくれたお礼に、賠償金に上乗せしてお返し)にもなる、という落としどころと推察。
wavefanc
が
しました
wavefanc
が
しました
wavefanc
が
しました
でも、損害賠償請求が480万円てのが優しい
wavefanc
が
しました
「ということにしてくれ」の臭いがするねえ…
wavefanc
が
しました
デマまとめに改名したら?
wavefanc
が
しました
wavefanc
が
しました
営業が運用側に責任なすりつけること多いし、営業は個だけど運用はグループとか部署単位だからな
wavefanc
が
しました
無能すぎる
wavefanc
が
しました
所定のIOPS稼ぐのにSSDなら20本(RAID6のパリティとHSP混み)しかいらないところ、
10krpmのHDDだと1000本近くが必要になる
wavefanc
が
しました
コメントする