«Були моменти, де я думала, чи продавати батьківську хату». Айтівці у Threads зізнаються у своїх факапах
Software Engineer Вікторія Костак запитала у колег про їхні робочі факапи. Спойлер: айтівець з Glovo про свій факап з чайовими не написав.
Software Engineer Вікторія Костак запитала у колег про їхні робочі факапи. Спойлер: айтівець з Glovo про свій факап з чайовими не написав.
Software Engineer Вікторія Костак запитала у колег про їхні робочі факапи. Спойлер: айтівець з Glovo про свій факап з чайовими не написав.
У перший день на фінтех проєкті, куди мене взяли бекенд девелопером, я випадково видалила всіх пару сотень тисяч юзерів з дев бази 🙂 (запустила всі тести на дев базу) потім девопс годин 7 накатував стейж базу на дев.
Я якось писав код, який повинен був відправити для кожного юзера з колекції імейл. Типу сформуй набір меседжів за критеріями, а потім відправ на обробку сервісу які імейли шле. Я додав код відправки не після формування колекції, а на два рядки вище у самий цикл формування. Замість пари тисяч меседжів пішло пару мільйонів. На проді:) Із гарних новин: я так засрав queue на амазоні, що відправилось десь тисяч 50 і я встиг вимкнути це лайно. Потім 2 дні розгрібав. Голландський банк.
Фінтех. США. Невдала міграція прод бд- всю ніч ревертали транзакції клієнтів на 340к баксів сумарно. Дейлік статус з замовником почався так: «є хороша і погана новина. Хороша — ми ревертнули транзакції, які вчора помилково були списані з карт клієнтів». На питання замовника, які ще транзакції — «а от це вже погана новина».
За пару днів до промоушена на мідла стерла всі теги об'єктів в s3 бакеті (приблизно 20 тисяч об'єктів). Теги використовувались для аудиту та деплойменту, дуже великий ентерпрайз. Десь 15 годин відновлювала з реліз ноутів. Якби не відновила, вся робота девелоперів та вся схема деплойментів/ролбек пішла б в дупу. Думала звільнять) бо це для проєкту був дійсно дуже великий про**б, я так плодовито ніколи не працювала не до, не після.
Заплатила не туди пару мільйонів євро податків. Додала новий датасет + кверю — лягли всі звіти і сервер. Кар’єра вижила. Я теж.
Не мій факап, а колеги. Якось ДБ адмін в банку посередині робочого дня (як раз, в обідню перерву) вирішив оновити Oracle на prod сервері і ребутнув його. При оновленні база злетіла і довелось піднімати з бекапу. Коли його запитали, за що він так жорстоко вчинив, він здивувався в чому проблема — обідня ж перерва, юзери не мали юзати сервіси банку. І наче ж логічно…
Колись давно для одного клієнта писали нову систему менеджменту контактів, в яку мали заливатись контакти зі старої. В якийсь момент зловив поплаву від роботи з легасі даними, і щоб легше відрізнити легасі дані додав в сторінку поруч з даними Duffy Duck, бо десь так само, як він себе почував. В пʼятницю ми пушнули апдейтнуту версію клієнту, а про качку я забув. Ввечері того ж дня мені пишуть колеги про те, що клієнт перед демо якимось своїм стейкхолдерам відкриває у себе сторінки і там всюди качка.
На новій роботі в енергетиці — зафакапила модуль LTE на смарт метрі. Потім почали розбиратись і вийшло, що я знайшла супер складний баг в прошивці, і зараз весь RD працює над її усуненням:) Отримала ачівку тестер року :)
На проді Blockchain проєкту дав своєму користувачу 1 млрд фіата.
Колись дуже давно, коли спека js викатила let/const, я зробила батч апдейт в грантфайлі на пару тисяч рядків з var на let, думала що поставила параметр на унікальні символи, але ні, і зробила заміну всередині усіх змінних які підпали під патерн)Зламала білд всім, це напевне з найгіршого
Не мій, але дуже памʼятний. Нова девелоперка щось там експериментувала у себе локально на мейн бранчі, знесла практично весь проєкт, лишивши тільки власне файл проєкту і ще пару своїх власних, і запушила всі ці зміни на ремоут. Тут окреме ще питання, чого мейн не був захищений від пушів без ПРу, але то вже не до неї)) Ми просто офігіли, коли зранку відкрили проєкт і побачили зміни.
І на останок — користувачка під ніком @mariya.pa пожартувала: «Треба, щоб айтівець Glovo відписався в коментарях, про його цікавий факап з прорахунком чайових».
Більше історій про факапи читайте за посиланням.



