トヨタ、先月の国内全工場稼働停止の原因はディスク容量不足 [256556981]
■ このスレッドは過去ログ倉庫に格納されています
先月の生産指示システムの不具合について
先月末の生産指示システム不具合により国内工場の稼働が停止し、お客様および仕入先、関係先の方々にご迷惑をお掛けしましたことを、お詫び申し上げます。
今回のシステム不具合は、部品の発注処理を行う複数のサーバーの一部が利用できなくなったことで発生しました。経緯としては、不具合発生の前日8月27日に定期の保守作業を実施しました。この保守作業では、データベースに溜まったデータの削除と整理を行っておりましたが、作業用のディスク容量が不足していたためエラーが発生し、それによってシステムが停止いたしました。これらのサーバーは、同一のシステムで作動していたため、バックアップ機でも同様の障害が発生し切り替えができず、工場の稼動停止に至りました。その後、8月29日に容量の大きいサーバーにデータを移管したことで、システムが復旧し、工場稼働を再開いたしました。この度、再現検証によって、上記が真因・その対策となることを特定しましたのでご報告いたします。
関係の皆様にはご心配をおかけいたしましたが、サイバー攻撃によるシステムの不具合ではないことを、改めてお知らせするとともにお詫び申し上げます。
今後は、保守作業の手順見直しを行い、その上で、再発防止に向けた取組みを強化することで、一台でも多く一日でも早くお客様の元にクルマをお届けできるよう努めてまいります。
https://global.toyota/jp/newsroom/corporate/39732550.html 本当はサイバー攻撃なのにクソみたいな言い訳なんじゃないのかなあ？？？ これは強烈だ…
まだ外部からの攻撃のほうが救いようがあった ホントはサイバー攻撃だったんでしょ？
恥ずかしくて言えないだけで ジャップおちぶれすぎだろ…
理由がフィリピンよりひどい >>53
ほんとこれ
隠してるってことは中国からのサイバー攻撃である可能性が高い なぜなぜ分析してカイゼンを続けているのにいつまでもクソみたいな問題が起こるのなぁぜなぁぜ？ あれ？ ネット右翼さんは中国からのサイバー攻撃って言ってなかった？
（笑） 中国がー！ハッカがー！
ネトウヨさんどうすんの？w なんでバックアップと同じシステムで同時にやるんだと
意味ねーだろが インデックスリビルドの領域不足やろか？ポスグレのvacuum full時の容量不足やろか？🤔
多分後者のような気がする こういうのはほんと見つけづらいんだよな
ローテートしてるはず、サーバ監視してるはず、
エラーメッセージが出るはず、の思い込みでさ バックアップ機で同じトラブルが起こったのはなぜ
別に同時にデータ整理してたわけないし ジャップランド最後の希望のトヨタ様wwwwwwwwwwwwwwwwwwwwwwwwwwwwwwディスク容量不足で死にかけるwwwwwwwwwwwwwwwwwwwwwwwwwwwwwwwwwwwwwwwwwwwwww ディスク容量がカンバン方式で必要なときに必要なだけ到着しなかったのが悪い 大手メーカーの生産管理システムの担当してるけどどこもそんなもんよ
俺も何回か全ライン止めたことある 運用するには足らないディスク容量をご提案したくそSIerはどこか気になる こんなん開始時に「容量足りんぞアホ」とシステムに言われたりしないの？ >>57
いや容量不足で停止の方が恥ずかしいやろ… >>85
バックアップというか冗長性もたせてるから同じ行為が反映されてるだけなんじゃないの >>85
DBサーバーってのは通常は同一データを参照(Oracleのracとか)か、同一データをレプリケーションしてんの
待機系が同一のストレージまたは同一サイズのストレージだったら待機系でも当然容量不足が発生するんよ 中国人のスーパーハッカーじゃなく無能な味方の仕業だったか 流石にオンプレでシステム組んでるんだな
だけど普通監視するシステムがあって既定値超えたら警告発報するようになっているようなもんだがしてないのかね
天下のトヨタ様な脇が甘いな 恰好がつかないから中国からのサイバーアタックって事にしよう 空き容量詐欺るウイルスかもな
中華通販でよくあるだろ実は256MBしかないメモリを高値で売るやつ 大事なサーバに限ってなんか妙に容量ケチってて定期的に削除さなきゃならん頭の悪い運用になってる現場多すぎ問題 日本の製造業の悪いとこでシステムはSIerにぶん投げそれを自社で担当するやつにもぶん投げ
なにかあれば上はどうすんだとしか言わない
そもそも運用する能力ないんだよ >>63
スパイが容量の小さいディスクを選定したんだろうな 普通空き容量が減ってきたら管理者に警告が行くだろｗ 設備にちゃんと投資せずに現場も見ず懐に入れる金ばかり見てるからそうなる いつも思うんだけど俺らティア1が欠品したらとんでもない勢いで詰めてくるくせにそっちのせいで納品できなくてこっちの倉庫溢れそうなときはごめんの一言もないってなんなんかね エロ動画落としてる時ディスク容量が足りませんって警告出て焦ってゴミ箱空にする奴 ネトウヨ「本当は中国の仕業だろ」
↑
自衛隊ヘリ墜落の時もこれ言ってたけど
もしそうなら日本ってどれだけ情けないのw 無駄なものを極限まで切り詰めたせいでこんな事になるんだな 通常は80%とか90%の閾値で容量監視していたけども、vacuum full実行時にはテーブルサイズ×2倍の容量が必要になることから、でっかいテーブルのvacuumしたら容量不足になった
って話やね🤔 バイアスがかかるところだなあ
コンセントから電源が抜けていませんかレベルよ >>144
データ転送よりすばやいスピードで動ける従業員が必要😲 サイバー攻撃の痕跡は発見できなかったのでサイバー攻撃はなかったとする国のトップ企業だからな
不健全な作戦はジャップの伝統このまま真珠湾まで突き進むぞ >>147
テストの時にはテーブルも小さくて容量不足にならなかったのでヨシ！ってしたとか ゴミデータ削除しないとマジで止まるぞ
のほほんとしてる奴も気を付けた方がいい
会社のシステム部に注しとけ 民間大手でもこれか
我々はちゃんと管理できている！
by日本国 こないだのロケットも電気かなんかの容量ギリギリの部品使ってでやらかしたよね？ AWSじゃないのかよ
もう技術的機密なんて無いだろ サイバー攻撃ってほざいてたやつ息してる？？
中小零細じゃないんだからサーバの面倒を見る人員すら当てられないって終わってるだろ >>59
いつも作業員は容量足りないって言ってるのに、なぜか容量増やしてくれないんだよな
まじでいみわかんわ、容量足りなかったら作業止まるのに >>162
オペレーターに工作員が混ざってたんだぞ😡 >>161
古参企業ってWindowsが普及する前の古いシステムを動かしてるの多いんだよな
ここは知らんけど分散しないから一斉停止になったんだろうと思う 中国からの西原攻撃とかwww
父さんに謝りなさいよ >>87
その通りだな。
納入業者はなぜなぜ10回の刑に処す これを日本中が一斉に中国によるハッキング！！！！！て大騒ぎしてんだよな >>162
サーバーの面倒見るやつが他の仕事と兼任だからな
ちょっとソフトのインストール出来たら「パソコンに詳しい」扱いされるレベル >>87
まじでこれなんじゃね？冗長構成提案したらなぜなぜで減らされたのなぁぜなぁぜ ネトウヨが隣の国がーとか言ってたのは何だったの？
妄想？ なんで嘘を吐くのかな
かなりやばい不都合な真実があるのかな DBの一時領域が不足した？
システムってDBは無頓着に設計するところ多いよな
SIerでもDBは適当に作って運用乗ってからこういうの起きるシステム多い あれ？
ネトウヨやマスコミによると、中国の報復じゃなかったっけ？ >>179
普通はね
無知だったり、漏れだったりで監視項目になかったんでしょ 噂に聞いた話じゃ下請けだと鯖容量たりなくてデータ保存できないとかザラだったな
信じ難いが数テラしかないらしい
増やしすぎるとウィルス検知にかかる時間が膨大になるのかもな
容量すくないってことは対策に抜かりがないことでもあるんだろう きちんとしてるとこでもこういう運用管理までテストしてるところは少ない
ちゃんと設定してでも何故か削除されないとかよくある >>162
日経225に入ってるメーカー勤務ですが生産技術の私がサーバーの面倒見てます🤗
設備設計が本業です しかしトヨタクラスでもこんなにお粗末なんだな
定期保守のディスクの容量くらい余裕持たせないのか
バックアップ機も意味ないし
EVや自動運転で欧米中どころか日産にも乗り遅れるくらいやっぱIT関係は弱いんか トヨタの国内工場って生産能力過剰でずっと悩んでましたよね ジャストインデータ
LANケーブルの中でデータは待機しろ 国内有数の大企業ですらこのお粗末さなんだから、ジャップのIT後進国ぶりは推して知るべし
国民の多くがそれに気づいてすらいないのはリテラシーが低いのか何なのかわからんが >>187
DBは初心者でも出来るから基本ザル
保守の定期作業の担当者もそんな知識もなく言われている通り行っているだけっぽいし
容量が足りませんぜぇ…なんて言える立場も知識もなかったんだろ
保守の上長の責任 >>77
最初からわかってたし
言いたくても言えない
恥ずかしいもん どこでもあり得る話だな
IT弱いところはディスク満タンになったら機械が止まるとか知らなかったと思う こんなレベルの会社が今のIT集大成になるEVで勝てるわけがないな… まぁまだ中国のサイバー攻撃という憶測に乗っかって何の報告もなく再開しただけ言って
デマを流すような企業じゃないだけマシか
素直に自分たちがアホでしたって報告するだけいい方だな
トヨタの場合は中国とも取引あるから中国ヘイト企業の尖兵にされたくなかったというのもあるだろうけど >>215
ちょっと気を抜くとヤードが在庫の車だらけになるしな
壺政府としてはトヨタ大規模減産とは口が裂けても発表できないよな >>161
AWSもそれ自体が落ちたらどうにもならないし
トヨタクラスでそれも製造業で工場のシステムなら普通に自社やSIerに専用サーバー用意してもらうだろ
AWSが止まるたびに毎回全工場停止とかやってられない 容量不足でチェックポイント削除もできなかった感じかな 天下のトヨタ様でもこういうことやらかすんだな 何でもかんでも無駄に記録し過ぎ
DXして逆に金かかってないか？ 定期の保守作業で発生したってことは統計情報更新やindex再構築は定期的にやってたのか
その上でtemp領域が不足したと
OSから見たディスク領域は監視してたけどDBの費用領域は監視してなかったって事かな あれ？中国からのハッキングじゃなかったの？
ネトウヨは謝罪しろよ DBのtemp領域って書いたのになんで費用になるんだ トヨタより時価総額でかいとこもAWS使ってんだから自前でやらかすよりまし ちょっとマジでヤバいんちゃう？
これ保守運用どこに投げてんの？トヨタシステムズ？小林クリエイト？ あるある
うちもバックアップディスクの容量足りなくてサーバーにデータが移せない！って大騒ぎしてたわ
アホくさ ジャップってくだらねえ役員のファーストクラスでの欧州への出張とかをサーバーへの投資より優先するのなんなのだろう
仕事は遊びじゃないんだぞって経営層のためにある言葉だよ実際 >>230
それはあくまでネットのサービスとか一般ユーザー向けのサービスな
例えばトヨタのコーポレートサイトや通販サイトをAWSにはわかるけど
工場の基幹システムをAWSとかねーよ
AWSの事例でも工場のカメラの自動検査をAWSに任せるとかはあるけど
まるごと基幹をAWSはAmazonの工場ですらしいないんじゃない 保守点検費用もカイゼンの対象で予算は増やさないのな これがジョブ別雇用しない弊害だよ
会社に入ってから仕事を仕込めば良いって考え
もう一括採用が通用しない時代になってるのに変えない
そのせいで毎年新卒の３割が辞めてるし
こういうことも起こる ディスクfullって本当に見つけづらいんよ
まさかな…でチェックして見つかるケース多い
恥ずかしいには違いないが
何かを隠すためとか言ってる妄想バカ見るとわかってねえとか思う プライベートクラウドなら敷地内に置いてもらえるし良いんやない 流石はトヨタだなディスク容量も無駄が無いのか
まあDB用は余裕少なくても作業用のディスクは余裕持たせておくもんだけどな データ領域は容量チェック入れてるのに、システム領域はチェックしてなくていつの間にかログローテートしてなくて、ゴミみたいな気にしなくていいエラーが大量発生→DiskFullなんてパターン ジャストインタイムやからな
足りなくなるギリギリで増設すればええ こんな奴らがevを作れるはずないわw
とんだ買いかぶりしてた アホがいきなりとんでもない量のデータ保存したとかじゃないのこれ 現場はなぜなぜ分析して危険予知してるのにシステム屋は何してたんだ？ ディスク容量すらケチってるからこうなる
アキオの給料ちょっと下げればできるだろ
銭ゲバ >>199
ジャストインタイムって知ってる？
余裕はコストなんだよ 毎日テラレベルの成果物ができてそれを各所に配付してて、ローテーションしてるから1週間分の空きがあればいいだろ、コストかけらんねえし→上流がトラブルで何回も止まって一気に成果物が大量に作られる→DiskFull
とかな 保守作業前にバックアップ目的でDBアンロードしてファイル化するけど
作業用のディスク容量沢山使うので
古いアンロードファイル消さないとパンクしてしまう >>53
むしろサイバー攻撃だったら全力で被害者面するだろ 設備屋だけど台湾の関連会社行ったら社内システム屋が優秀すぎて超絶楽だったなあ
日本のはパソコンの先生レベル 未だにフロッピーデスクとか使ってそうだからなあ
冗談抜きマジで 自分とこは某家電メーカーなんだけど数千台のAzure使ってる
1つのプロダクトで十数カ国対応するとそうなっちまう
だからなるべくディスクは使いたくないんよ
実はDiskFullとか結構な頻度で起こってる
トヨタがどうだか知らないが銀行ほどミッションクリティカルなことを要求されていなければ起こるんよ 吊し上げ食らって飯も喉通らなくなっているやつがいると
昼食がうまい😋 作業前のバックアップが容量圧迫したか
大量のデータ変更したからバイナリログが大量に出たか
ってとこかな 馬鹿みたいだけどこういう時限爆弾タイプは見逃しやすいんだよな 原因ではなく真因を特定したというのがすごいな
原因は本当の原因ではないとうい発想がある
それなのに定期の保守作業をやめたとは言ってない
人がやるからエラーは必ず起きる
定期の保守作業をやるかぎりこういう失敗は再発するだろう 誰だウィルスだの攻撃だの言ってた奴は！！もっとあかん奴だったわこれ！！！ こんなことでシステムダウンするんだあ
笑った
生産管理課にいたこともあるけど
聞いたことねえな
駐在のシステムメーカー様ご苦労様です >>274
何が原因かわからないなかで可能性をあげただけだろ
事実と確認されるかわからないなかであげただけ
この記事のように情報源を確認しないで馬鹿が事実だと信じるほうが悪い >>275
根本的な設計思想としてディスク容量を意図的に小さくしているのをみたことがある
ディスク容量が少ないからディスク容量の消費が増えたら日常的にエラーが起きる
それでも動くようにプログラムが組まれ運用者は常にディスク容量を意識する
メインフレームっていうんだけどｗ なぜなぜ分析しつこいから
担当の人たちすごく大変そう ディスク容量が不足しそうになったら
Windowsでさえ警告表示してくれる機能あるのに メインフレームはプログラムごとに使えるディスク容量の上限を指定できてた
そういうのってWindowsとか他のOSにはないよね アメリカでいっぱい雇用してるんだからこういう管理とかは全部アメリカ人にやってもらったらどう？人事や経理、あと経営も ディスクが無いならカセットに記録すればいいじゃない 章男「ソフトウェアファースト😤テスラは虚業🤪ソフトでテスラに勝つ！！！」 こういう部分もオートでスケールする自社クラウドを構築しないのかな >>226
別サーバで移して再稼働させたってあるから純粋にストレージ不足なんやろ
保守作業でDB作業領域が肥大化してストレージを使い切ったんだよ 押し入れに転がってる俺の海門80GBをトヨタにあげたい やりがちなミスではあるが、やらかすと再発防止考えろとかで後が大変なんだよなぁ トヨタは上場来高値更新だもんなあ
仕事が増えて増えてしょうがない状態
キャパオーバーしてしまったか
れいわ信者は日本人の敵 >>226
むしろ逆に通常はautovacuumで運用してて領域解放されないので閾値超過、ほんで「ほならvacuum full 実行しましょうかね」ってなってvacuum full時のテーブルコピー中に容量不足、やと思うんよ レベルが低すぎて草
これが今のわーくにの実態なんだよな ここの連中ってトヨタが上場来高値更新してるのも知らない情弱多いな
れいわ信者は日本人の敵 トヨタは上場来高値更新だもんなあ
仕事が増えて増えてしょうがない状態
キャパオーバーしてしまったか
れいわ信者は日本人の敵 アプデするのが不安だからWindows95のフロッピーディスクで回してる企業ばかり 上場来高値更新中のトヨタ
仕事が増えてうれしい悲鳴！！！！
れいわ信者は日本人の敵 >>299
わかるw
こんなん正味はちゃんとディスク容量確認するくらいしか無いのにそれっぽい防止策を作らないと役員に見せられないからと
何かそれっぽい手順を作れないか発想力が試されるし
そこで作ったゴミみたいな手順が入って次から余計に手間がかかるようになる >>69
デュアルシステム
冗長性をさらに高めたい場合に使う
ただし、ストレージが十分に確保されてないとこういうことが起きる >>286
Googleも2,3年前にディスク容量不足で認証機能がダウンしてたから同じだよｗ >>316
けっきょく合理的なんてものは幻想なんや
どこかに不合理を押し付けて見えなくしてるだけ このもっともらしい話に騙される奴の多いこと多いこと >>329
えーだってカンバン方式のディスクの納品が間に合わなかったって話がツボなんだもん 初歩中の初歩、アホとしか言いようが無い
ドケチ盗用多、ディスク容量ケチって
削除移動したらデータ全部移動できず、かといって移動元のデータも壊れ、どこに何の部品在庫がどれだけあるかさえデータ上は分からなくなってしまったのだろう >>55
同意する
まさに
技術の日産、内装のトヨタ
足回りの日産、内装のトヨタ
トヨタにはシステム維持の技術能力も無いとバレてしまった >>100
他社クルマメーカー含めよそさま製造業なら、二交代制はたとえば朝番早番も夜番遅番もともに8時半始業、みたいに表と真裏
定時で終業後に数時間空白でもシステムや工作機械の電源は落とさないまま次番引き継ぎ
トヨタ系だけは独自独特の二交代制で、たとえば
朝番早番は朝6時～午後3時、
夜番遅番は午後3時～午後12時・午前0時、
みたいにして深夜手当支給をケチる
だから、システムに問題発生しても気付くのが遅れる
今回も、朝の始業前にシステム立ち上げたら、あれ？動かないぞ >>129
トヨタはとっくに、二次下請けの日本高周波、酒井製作所、イワヰなど見殺し倒産
KYB（カヤバ・萱場工業）が耐震免震装置出荷検査で不正やった時も、筆頭株主トヨタは放置プレイ
それどころか子会社日野を、
トヨタとダイムラートラックとで合弁持株会社新設してその下に三菱ふそうトラックバスと日野とをぶら下げることで基本合意
もはやティア1どころか子会社さえも平然と切り捨てるのが盗用多
アキオが幾百万日本国内自動車産業労働者の代表ヅラを気取っていても、本性正体はそんなもん なんだ本社工場のコンピュータに俺がディスク突っ込んだら変な文字列吐き出したけど あれは無関係だったんだな
BEBEL BABEL BABEL BABEL BABEL
BEBEL BABEL BABEL BABEL BABEL
BEBEL BABEL BABEL BABEL BABEL
BEBEL BABEL BABEL BABEL BABEL
BEBEL BABEL BABEL BABEL BABEL
BEBEL BABEL BABEL BABEL BABEL >>139
トヨタは今や、時代遅れのハイブリッド車プリウスや石油燃料エンジン車を抱きしめながら
年間生産台数世界一！
月間生産台数自社過去史上最多！
を誇るしか能が無い
他方で
日本一の普通車規格EV・軽規格EVメーカーはリーフやサクラの日産
日本一のプラグインハイブリッド車メーカーはアウトランダーやエクリプスクロスの三菱自工
日本一のガソリン軽自動車メーカーはエヌボックスのホンダ
個別車種分野ではとっくにトヨタダイハツスズキマツダ連合は大敗北済み >>169
生産ライン他機械連携でなく単独稼動で、立体3Dでなく平面2Dな単純平易作業、といった工作機械なら確かに、ウインドウズ以前の古いのはまだまだ現役
操作盤表示が液晶デジタル数字ですらなくニキシー管数字なんてのはさすがに絶滅だろうが >>216
これまでトヨタは、蓄電池劣化によるリセール価格暴落をおそれて
トヨタEV・bZ4XはKINTOサブスク月額定額制のみ、としてきたが
このほど日経や中日が、具体的時期未定ながら売り切り買い切り開始決定、と報道した
トヨタが観測気球揚げているな、これでトヨタディーラーに客からどれだけ引き合いが来るか
売り切り発売開始当初は、ディーラー店頭試乗用、トヨタレンタリース在庫車用、でいくらでも受注実績積み上げてロケットスタート超絶大人気を偽装演出できる、そういうのは日産など他社でもやる手口
その先に、EV・bZ4Xの真の実需が見えてくる >>142
クソデカ大企業がポスグレなんかつかうの🤔❓ 部署によっては未だにフロッピーでデータ取りしてるんやで 容量チェックのやる気を無くさせるサイバー攻撃とか、中国凄すぎね？ >>240
同じ部署に同一人物を長期間留め置く続任させることは、堕落腐敗さらには汚職の温床
それを未然防止するには、人事異動が最も手っ取り早く効果的
スペシャリストが良いのかゼネラリストが良いのかは、永遠に結論が出ない
ただし、全体を俯瞰してオーケストレーション総指揮できる人物は必要
それがいなかったから、トヨタEV・bZ4Xは急停止急旋回で車輪脱落リコールのお粗末痴態恥態醜態 >>262
銀行とかなら今でも磁気テープメディア
SSDなんてもんは信用ならん
ディズニーだって作品マスターはデジタルデータでなく光学フィルム
OSだのファイル形式だのは世紀単位で生き残らないとみている >>303 >>306
トヨタなんてのは、実に1980年代までも延々と工販分離を続けていた、ボンクラゴミクズカス企業の部類ですから せめて環境のために街路樹に除草剤かけましたくらい言えよ ■ このスレッドは過去ログ倉庫に格納されています
