В компании пообещали усовершенствовать техническое обслуживание серверов а айтишники пообещали сделать харакири.
Все 28 сборочных линий на 14 предприятиях автоконцерна Toyota Motor в Японии, на которые приходится около трети мирового производства этой марки машин, остановили работу из-за сбоя, который случился из-за недостатка памяти серверах.
"Во время проведения работ по сохранению данных проводились систематизация и уничтожение скопившихся в базе данных. Из-за того, что на диске, использовавшемся в работе, не хватило места, возник сбой, в результате которого система остановилась", - говорится в сообщении компании.
Инцидент произошёл 29 августа и в Toyota Motor не сразу разобрались в причине вынужденной остановки заводов, хотя представители автоконцерна сразу сообщили, что это никак не связано с кибератакой. Отмечается, что заводы возобновили работу спустя почти сутки — после переноса данных на сервер большего размера.
В связи с неприятным инцидентом руководство автоконцерна принесло извинения своим клиентам и пообещало пересмотреть свои процедуры технического обслуживания для недопущения подобных сбоев.
Добавим, что в марте 2022 года Toyota уже сталкивалась с вынужденным приостановлением работы заводов из-за хакерской атаки на системы поставщика запчастей Kojima Industries. Известно, что все японские заводы автоконцерна в среднем производят 13 тысяч автомобилей в день.
Источник:
- Suzuki начала продажи автомобиля с ценой ниже 6000 $
- Mitsubishi презентовала шестое поколение пикапа L200
- Внешность новых Lexus GX и TX уже можно сложить из пазла
- Datsun 280ZX Turbo - яркий представитель турбированных автомобилей того времени
- TOM’S Angel T01 - автомобиль о котором вы не слышали
?)
И еще подгадить можно - хинт в секции (WITH OPTION) для оптимизатора подсунуть, который для многомиллионного датасета заставит сгенерировать план запроса с nested loops - физической операции джойна, вместо hash match)
И тогда п рощай ресурсы кластера и tempdb
Но это уже из серии как картинка ниже)
В итоге сидели неделю без интернета т.к. оказалось что паролей ни на сервера ни на роутер у них нет, мозгов сбросить пароль тоже нет.
А потом пароль на домен всё-таки сбросили... Вместе с виндой и всеми документами, которые там были, после чего не придумали ничего лучшего, чем наехать на меня что это я им все "уронил". В общем не договорились мы с ними в итоге, чем все кончилось для них тогда - не знаю, а через пару лет от такого эффективного менеджмента контора закрылась.
Кстати прикольный сайт поностальгировать попался https://redhill.net.au/d/i.phphttps://redhill.net.au/d/i.php
А Intell Optane стоят, ска, по 350 тыщ за штуку..... А лучше бы два замутить...
Но решили естестно за час, мы ж не японцы.
Ясен пень, если всё и так работает, нахрена нужны эти бездари сисадмины? Половину уволить, другую - чем-нибудь загрузить.
*месяц спустя* как это производство встало? Почему? Кто виноват?
Как бывший DBA вангую - поломался какой-нить джоб, по типу "transaction log backup"
Или у сервисной учётки, из-под которой ранился джоб - протух пароль, и админы недоглядели и джоб, соответственно накрылся
Странно, конечно, что мониторинг и алярминг не отработал, в каком-нибудь SCOM-консоли такие события обычно критичного уровня, которые тут же отделом сопровождения должны отлавливаться
Ну, или сопровождение - это на откуп каким-нить индусам из Корпорации HCL или WIPRO отдали - те могут проворонить как два пальца об асфальт
"Kindly check and do the needful'ь" (С)
В этой новости сосредоточен весь апофеоз достижений современных технологий.
Все равно всякие In-Memory Columnstore все в тупо файлы упирается)))
Выруби инет, и весь мир просто встанет, потому что без него существовать просто разучился. Вот и вся суть ваших "скакнувших" технологий.
да, слои абстракции и прикладных приложений и сервисов зашли так далеко, что обеспечивают очень много в нашей жизни и в жизни бизнес-заказчика, который является заказчиком эффектов, получаемых от этих технологий... но факта того, что всё это абстрактное и виртуальное держится на, условно, примитивном электрическом тумблере - это да, есть такое)
японское качество...
Как-то выкладывали, как один перец, по договоренности с владельцем, может на спор, к фордовской эфке 14-й, кажется, серии подрубился и глушил-заводил, фары-поворотники включал, глумился, в общем, сидя дома на диване...
Там у людей уровень экспертизы зашкаливает - если нет инструкции по типу "возьмите мышку в правую руку, нажмите Пуск, выберите Сетевые Подключения..." (С) - могут и не разобраться
Вряд ли сисадмины, хотя кто его знает - какая там иерархия у этой Компании...
У меня, сходу, два предположения о названии организации, раз сильно технологическая и сильно известная... зелёная или синяя?)
А так - да, грустно, что даже в операционной деятельности 100500 аппрувов нада
Синдром "кухарки" - больше хлеба в мясной фарш.
я в 2016м по такому же принципу и попал)))
В международной большой корпорации мы 3м уровнем поддержки датацентров занимались... тучу всего офигенного сделали, наавтоматизировали, пайплайны всякие, на дотнете скрипты автоматизации процессов и ITIL-операций, скрпты развертывания всего и вся, всякие DWH/BI для мониторинга состояния инфры - всё сделали - и тип - даа, спасибо ребят - но теперь сопровождение очень простое, и расширим ка мы скоп работы индусов, которые там в штабквартире в Женеве полы драили... ну те и взяли на себя наш бывший скоп... и потом так как давай всё падать в датацентре и валяться)))