cjelli: (hal9000)
Роман Михайлович ([personal profile] cjelli) wrote2020-09-22 09:15 am
Entry tags:

Современный девопс как job security

Некий сервис гоняет постоянно тесты. Когда эти тесты не срабатывают, к нам приходит сообщение, что ужас-ужас. Обычно они не срабатывают из-за таймаута где-то по дороге.
 
Раньше с таймаутами было просто бороться - вот тебе обычный пинг, вот тебе "tcp ping", и достаточно. А теперь это вызов из ангулара, через завскладажакс, через амазон, через нджинекс, через кубернет, через под, через контейнер. Ну и что из них приложило руку к таймауту?
yankel: (Default)

[personal profile] yankel 2020-09-22 03:35 pm (UTC)(link)
О, да...
А отлаживать весь этот код, который дженерят 20 фреймворков....
kotanas: (Default)

[personal profile] kotanas 2020-09-22 09:33 pm (UTC)(link)
поздравляю. с нашей полковой кобылой была аналогичная история но у нас еще само приложеньице было черным ящиком. то есть его задизайнили и сделали криворукие ебланы клиента чья криворукость стала очевидной на этапе деплоймента. поэтому они всячески скрывали как это дерьмо работает.

вообще удивительно каким образом входят в моду продукты которые в иные дни никто бы и нюхать не стал. я про к8 если что
kotanas: (Default)

[personal profile] kotanas 2020-09-22 11:19 pm (UTC)(link)
у кого-то финансового или государственного что-нибудь на всех этих облаках накроется разок капитальной пиздой
разве что совсем капитальной. а так - поднимут из бэкапа, а на все что пропало скажут "извиняемся но у нас тут жопа была, теперь вот так".

показывали архитектуру, в которой обслуживающих контейнеров-сервисов (конфигурация, логи, мониторинг и т.д.) было больше, чем собственно тех, которые зарабатывали деньги
по моему опыту это почти всегда так. и работает прямо скажем через жопу. самая главная проблема это как сбить мутный вал false alarms до приемлемого уровня.

процесс грохается сам по себе, автоперезапуск кажется сложным. А тут контейнер грохнулся, подняли новый
короче это все опять для водителей руками. инженеру сказку о том что перезапуск что то вылечит хрен продашь...
kotanas: (Default)

[personal profile] kotanas 2020-09-23 01:19 am (UTC)(link)
фейспалм! я даже слов не могу найти (а это нечасто бывает)
koganf: (Default)

[personal profile] koganf 2020-09-23 05:11 am (UTC)(link)
Use httping!

--
Cohen the Barbarian