Цікаву тему прочитав у пана Макса Бергмана, який у 14 році працював у американському уряді і приймав участь у підримці безпеки України. Коротко: США зазвичай допомагають армії країни зброєю та тренуванням, але у нашому випадку не вистачало часу. Доставити Джавелін — це від 6 тижнів плюс ще час на тренування. А конфлікт настільки гострий, що двох місяців на апгрейд ситуації немає — ну ми це й самі пам'ятаємо.

Тож вони почали те, що можна було почати робити прямо зараз — стали навчати ЗСУ процесам, організації, робити реформи основних функцій (типу сек'юрних комунікацій замість того, що зараз в московитів). Це фантастичний збіг, коли короткострокові цілі збіглися з довгостроковими — і дають величезні дівіденди зараз.

Якщо так подумати, це ж власне ідеальний кейс стартапа, коли MVP повністю збігається з тим, що потрібне ринку. :)

Потребую допомоги залу! 😁 Спілкуюсь останнім часом з "Повернись живим" і в них є цікава проблема. Історія починається з того, що вони зробили фінансову звітність відкритою, найпростішим шляхом: виклали xlsx з нею на OneDrive. Це кльове рішення, але скейлиться воно до якогось масштабу — зараз там 360 тисяч записів тільки за цей рік, і всі юзкейси розвалюються: фільтри в ікселі тормозять і показують тільки перші 10 тисяч значень, пошук тормозить, агрегувати дані неможливо.

Ми вчора обговорили і визначили два основних юзкейси, які можна насправді розділити:

• Зробити так, щоб людина могла знайти свою пожертву у списку всього, що надходить. Там є сума, комент платежу (або країна у випадку, коли пройшло через fondy), ну короч це можливо, але кльово б мати фільтрацію по даті і пошук по коментарю.
• Дати можливість фінансисту "ПЖ" з того робити якісь звіти/висновки, тому що іксель такого розміру робить боляче.

Що я думаю: скласти оці всі дані у SQLite (або постгрес, здається, що неважливо), і дати якийсь інтерфейс до них без sql'ю. Що я вже подивився:

• datasette: не потребує реєстрації, показує дані, замапити поле з датою у дату не хоче, пошук зробити не дає, якийсь графік дає змогу побудувати, але нічого не будує.
• metabase: показує дані, мапить дату в дату (бо в sqlite же ж немає типу поля date), досить легко відфільтрувати по стовпцю, будує графік, дає можливість зберігати звіти, але потребує реєстрації!
• nocodb, рекламується як airtable для твоєї БД. Ну це взагалі не туди, вони там формочки роблять, картинки у полях, це не про звіти і не про пошук.

Ну ви зрозуміли, пишу спитати, що може в кого є ідеї, що можна готового заюзати для публічного інтерфейсу для БД, якщо хочеться нічого не писати? Тобто хочеться писати, але я себе стримую, бо так в житті нічого не встигнеш. :)) Тому допоможіть мені будь ласочка придумати інтерфейс для нормальних людей для доступу до (не)великої кількості даних!

Metabase насправді виглядає як непогане рішення для другого юзкейсу — засетапити аккаунти для всіх зацікавлених співробітників, трохи звикнути до інтерфейсу і можна робити купу справ. Але для звичайних людей зі сторони він занадто складний. Давайте свої ідеї, попитайте в знайомих, задача здається доволі очевидною, але нагуглити рішення чомусь не вдається.

AWS

Пам‘ятаєте попередній пост про те що треба трохи даних обробити та зробити дешборд? Ну авжеж, це ж тільки два тижні тому було. А знаєте, чим я займався ці два тижні?.. Не тільки цим, але я просто в ужасі. Не читайте далі, якщо технічні подробиці вас лякають.

Зробити скрипт, який закидує дані з цсв у постгрес у мене вийшло за день з невеличким. А ось потім щось пішло не так... Чомусь я вирішив замість простої схеми «осьо віртуальний сервер, там все запустили й поїхали», що треба якомога більше managed все мати, щоб потім це не підтримувати. Амазон же ж багато всього пропонує!

Значить вимальовується така схема: завантажуємо файли в S3, це триггерить Lambda, яка файл обробляє і складає в інший бакет, звідки його читає Athena через Glue, а показує дані QuickSight. Я зазвичай дотримуюсь правила «не більше однієї незнайомої технології на проєкт», але цей казався маленьким і гідним того, щоб зробити один раз надійно.

1️⃣ Lambda

Я тут задовбався, але може окремо напишу — в мене вийшло 5 абзаців, а в телеграмі є обмеження на довжину повідомлення. :( З цікавого в результаті: парсинг пайтоном ікселю на 7 мб на ноуті займає 7 секунд, на хецнері за 5 євро - 14, на лямбді - 40-50.

2️⃣ QuickSight

Зібрали дешборд на квіксайті, і виявилося що оновлення буде не дуже в реалтаймі. Ну типу можемо кілька разів на день оновлювати, але часто (або по триггеру з лямбди, що теж потенційно часто) - буде дорого. Ооок, але наче працює, давайте покажемо світу? Хрін там! Публічним квіксайт зробити неможливо!

3️⃣ Athena

У цей момент я психанув, зарентив ec2 і запхав туди метабейз. Для метабейзу є сторонній коннектор для Афіни, тож, думаю, зара буде все супер. Метабейз поїхав, побачив дані, їх схему, єєє, перемога. Зараз все буде.

Тільки дата, за якою я хочу мати фільтр, це строка, а не date чи timestamp. Тому Афіна каже "вибачте, для цього оператор >=" застосовувати неможливо. Окей, знайшов, що схема даних визначається у Glue, змінив на timestamp зі string, як справи? Помилка, каже, Hive таку дату розпарсити не може.

Тож зробив я додаткову колонку, date.timestamp() * 1000 — ну там же ж Хайв, він точно захоче міллісекунди (я такий здогадливий, це жах). Фух, запрацювало!

Повільно тільки... Ну ладно, Metabase вміє кешувати результати, тож у середньому може буде не сильно боляче. Ну і ще фільтрація чутлива до регістру, наче баг в метабейзі — але це можна обійти, переробив запроси на SQL замість конструювання в інтерфейсі.

4️⃣ S3

Ну все, залишилося тільки навчити замовника завантажувати файли в S3. А там теж інтерфейс мрії, купа кнопок, а ще неможливо зробити так, щоб користувач тільки 1 бакет бачив... Написав інструкцію, записав Loom з демкою, і в кінці навіть зідвонилися телефоном — і в неї білий екран замість прогрес-бару аплоаду. Я без дупля, що там за проблема, домовилися на наступний день у зумі подивитися.

Прокинувся зранку і закинув файл: наче все нормально, але трошки форматування цифр у коментарі не подобається. Ок, поправив скрипт, задеплоїв лямбду, закинув файл заново — і помітив, що в метабейзі дублюються дані.

А логіка в мене така: з клієнт-банку будуть окремі файли, і за один період у файла буде завжди одна й та сама назва. Тож я просто заміняю файл з такою ж назвою і тоді дублювання даних немає. От тільки я бачу дивне — у бакеті з результатом два файли з однаковим іменем. По всім докам і обговоренням в інтернеті такого бути не може, але я бачу. Ну жесть.

5️⃣ Інтерфейси

Хочу звернути особливу увагу, що це ж все low-code, тобто гемор. Всі налаштування відбуваються у купі форм на купі сторінок, кожна з яких завантажується мінімум кілька секунд, щось змінити — все ж unbundled — це піти потикатися у три-чотири різних сервіси, а потім у термінал подивитися логи лямбди. Цикл фідбека довжиною у хвилини, просто нереально повільно рухаєшся.

6️⃣ Ми тут

Схоже шо перероблю на шось простіше з постгресом. Бо я хз, хто цим може нормально користуватися. Здається, що AWS тримає людей у заручниках і викликає стокгольмский синдром.

З початком війни у мене в голові гуляє купа думок з різних приводів — вочевидь, як і у вас. А ще таке неприємне відчуття, що мені критично не вистачає гуманітарної освіти, щоб ті думки нормально сформулювати. Можливо це все вже було розписано у дослідженнях, а можливо ще тільки буде — але мені треба десь висловитися, бо не дає спати.

⏳ Боротьба ця продовжується вже 800 років, з тої самої битви на Калці (це де Волноваха, до речі!). З великих подій потім, які змінювали хід історії, це напевно Битва на Ворсклі, Переяславські статті, Полтавська битва (знов Ворскла), може руйнування Січі (хз), захоплення УНР, і ось теперішня війна. Здається, що зараз Україна перший раз у більш-менш пристойному стані (з точки зору волі та єдності) з 14 сторіччя. Це капець, якщо подумати.

😖 Культурна різниця між нами та москалями — неймовірна. До мене це дуже довго доходило, бо я велику частину знань отримував з книжок — а які книжки були на полицях у 90-ті? БСЕ, БЕС, СДЕ (всі «С» - совєцький), і т.і. І хоча навіть після них та совєцьких підручників по історії я Московію недолюблював, але модель світу воно дає схиблену. Так щоб прям починати усвідомлювати — я це почав у 2009-му, коли сам поїхав туди та прозрівав з кількості агресії на вулицях людей один до одного. Касирка якось наорала на мене за те, що не вдавалося просканувати штрих-код. Але тільки ця війна показує справжню відстань. Орда — це не просто варвари, на жаль.

🤌 Те, що хороші часи виховують слабких людей — це правда. Всі політики Європи занадто юні, щоб добре пам‘ятати, які насправді москалі. Тому з радістю пристають на шлях домовленостей з ними — тому що зиск великий! На відміну від нормальних країн, які торгуються за свої гроші, верхівка москалів не так жлобиться розкидуватися грошима, бо вони накрадені. Зисковна діяльність, а мораль почекає.

👹 Промивання мізків працює. Якщо почитати біографії німецької верхівки, вони всі там комсомольці (FDJ, Jusos, як не назови, а вуха стирчать), і це вочевидь залишає якийсь відбиток на свідомості й сприйнятті світу. Ну типу це ж моя молодість, не може Московія бути зовсім поганою, коли в мене були такі яскраві почуття і не боліла спина чи що там в них зараз болить. Людині загалом важко признатися собі, що 10 років юності витрачені на гниль впусту, тому й Московія якась туди-сюди. Як Тіль Ліндеман, який поїхав співати на параді (!) московитів. Ну каша в голові, бо юність засрали.

👊 Русофобія. Не можна сказати, що "не всі московити погані". Всі. Так, я особисто знаю кілька людей, які вочевидь нормальні й деякі з них навіть допомагають Україні. Але їх кількість у загальній масі мізерна і вплив на культуру відсутній. Всі, хто нормальний і мав хоч якусь платформу для виголошення — їх або кенселять (як Новодворську), або вбивають (як Нємцова).

💡 А культура — це все. Дуже хотілося б почитати серйозні дослідження про те, які чинники впливають... особливо про нашу цікаво, а ще про те, чому сама войовнича нація Європи тепер такі сцикуни, га, Макрон? )) Люди при владі, стосунки у родинах і у суспільстві, взагалі все життя — це все культура.

⚡️ Прочитав тут ще думку, що в нас багато корупції через те, що ми у складі орди дуже довго пробули. Але коли читаєш за часи Руїни й там кожен сам собі щось тягне... мені віє корупцією та брехнею від того. Хоча, авжеж, людська пам'ять коротка і зараз (дивись вище), а тоді козаки, схоже, не уявляли собі, що московити — то не поляки, не татари та не турки. Шкода, що не розуміли цього.

Давайте спочатку історія, яку мені друг розповідав про свого прадіда. Жив він у Кам'янці-Подільському, який був до WW2 неподалік від кордона з Польщею — і був, власне, поляком. А тут хтось з сусідів у 30-ті роки йому шепнув, мовляв, бережись, здається етнічні чистки почалися — поляків вбивають. Як дізнатися, хто ти? По документах — які він спалив і таким чином залишився в живих. Здається, що достатня причина не любити совок, але до самої своєї смерті він лишався його прихильником.

В нас пів країни таких людей було, які страждали у тому потворному державоутворенні, а потім за ним же й сумували (а деякі і зара продовжують). Але де логіка?!

Мені здається, що вести подвійне життя: коли назовні ти порядний громадянин, співаєш пісні про інтернаціонал і ходиш на травневі демонстрації за права трудящих, а всередині ненавидиш увесь цей брехливий пафос — дуже важко морально для людини, особливо в умовах, коли ні з ким поділитися.

Коли вже країна стабілізувалася, заспокоїлася і призвичаїлася до своєї власної брехливості — типу у 70-80-ті — то стало трохи легше. А от у 40-50-ті — це ще є репресії, і ти не знаєш, хто з твоїх сусідів гб-шник.

І от у тебе є два варіанти: відкрито виступити проти — що екстремально небезпечно, чи жити з личиною. І живеш ти, живеш, тебе затягує буденність, і потроху ти просто ламаєшся. Тобто не ламаєшся одразу раз і все, просто призвичаюєшся, перестаєш про те думати та потроху зовнішня маска тебе зхарчовує.

І — опа — ідеальний громадянин Совка готовий. :(

А прикольно було б, якби замість російської та радянської теми називати регіони за центром, всі області були б типу Волинської та Закарпатської? Галицька, Буковинська, Поліська (яка з них, і що з іншими? :)), Подільська, Сіверська, Слобожанська... ну якось так приємніше звучить, більш людяно, ні? :)

Я розумію що то купа грошей, он Дніпропетровська і Кіровоградська області досі на місці, але ж фантазувати ніхто не заважає? :)

На доу запостили анонс: зарелізили апку, яка намагається перевіряти, наскількі ймовірні зв'язки людини з чимось неприємним (типу москалів). Там вже в каментах напихують розробникам за те, що они намагаються сразу взяти планку "це для ЗСУ та тероборони", а якість тої перевірки дуже сумнівна.

І я згадав, як мене у середині 10-х тримали по 3-5 хвилин на кожному вильоті та прильоті на кордоні — я в якийсь момент почав питати, чому, і виявилося, що якийсь інший Олександр Соловйов чимось завинив. Вочевидь, нас таких багато, я особисто знав ще двох — і почав при затримці казати побатькові та показувати права, це значно прискорювало процес. Якось раз було смішно, прикордонниця собі під нос пробурмотіла "може брат чи шо" — з однаковим іменем і різним побатькові? 🤣

Але є ще крутіший рівень перевірки документів — у німецьких потягах. Їхав якось нічним потягом Амстердам — Копенгаген і посеред ночі якийсь дикий німецький прикордонник (чи можна так назвати людину десь у Гамбурзі?) вирішив, що треба перевіряти документи. Інших він пройшов якось швидко, а моя нідерландський айді-картка явно здалася підозрілою і він кудись подзвонив.

— Золовйов! Золовйов! — заволав у телефон посеред ночі прикордонник; але з тої сторони його явно не розуміли, і він вирішив перейти на ініціали, — Зиґфрід! Отто! Людвіґ!

Чувак дуже сердився, що нічого не виходить, і коли побачив як я з нього волаю, почав прямо червоніти, реально як в якійсь комедії, сховався за двері, і заволав Зиґфрід-Отто-Людвіґ ще дужче. 🤣

Я так розумію, що ніфіга не вийшло, і через кілька хвилин ору він віддав мені доки та й пішов собі кудись, а мені залишив на майбутнє три середні імені, щоб я себе відчував як Моцарт (Людвіґ правда це Бетховен, але в нього не було купи середніх імен). 😁

В нашій культурі є певна проблема — її можна назвати хворобливим перфекціонізмом, або придиркуватістю, або може ще щось можна вигадати, але це точно хвороба всієї країни.

Розкажу, що тригернуло написати. Діма Малєєв пише у фейсбуці: «почали знімати відео англійською, але важкувати, купу помилок робиш — типу артиклі невгаразд». Я посміявся трохи, бо артиклі в мене йдуть від серця, я їх у розмовній речі ставлю мало не рандомом. :)

Пішов почитати коменти, думаю ну точно хтось доїбеться, так? Чувак пише: «ти там сказав the Ukraine, не треба так». Ну просто геній, пости не читаю @ в каментах сру. І через коротке обговорення: «зараз я спробую пояснити думку розгорнутіше». От реально хочеться тут «спершу зроби» використати, в мене просто згорів вихлоп повністю.

Люди, які мене знають, зможуть підтвердити — я теж дуже прискіпливий, до всього. Моє головне досягнення: я це висловлюю у рантаймі вголос і не дойобуюсь до людей в каментах — але мені здається, що це загальнонаціональна проблема, бо воно лізе зі всіх щілин.

Я не знаю, що з тим робити. В нас історично є купа проблем, які заважають розвитку проти більш успішних народів. У Нідерландах люди так по-різному розмовляють, що взагалі незрозуміло, як вони друг друга розуміють, але ж ніхто ні до кого не пристає, а в нас публічний простір переповнений претензіями до того.

Тож давайте не будемо один одного за дрібниці зайобувати. Зупинимо придиркуватість разом!

P.S. Гарне слово видумав, га?)

Брехливість

Я не знаю, чи завжди автократичні режими брехливі, але два найбільші у 20 сторіччі — совок/росія і китай — були і є враженими брехливістю неймовірно.

Цікаво, що захід у період холодної війни за деякими натяками це наче розумів, але масштаби були ясними тільки одиницям. Більшість все одно вірила в показники військової техніки та в те, що все ж таки щось совок робить на совість.

Тому я трохи менжуюся: наче Китай лупашить сотні кілометрів автобанів, які потім стоять — але ж і будинки, які падають наче доміно, і яйця з желатину теж там є. У сенсі мені здається, що Китай трошки переміг брехливість системи через приватність бізнесу і, напевно, конкуренцію? Але я точно знаю, що це екстремально важко — Україна досі вся в корупції, тому сумніваюся у зовнішніх ознаках. :)

А от Росія це гівно жере сповна! І жерла усю історію, яку я можу зрозуміти. Що там зараз — ми бачимо на власні очі, увесь період застою вся країна підгоняла звіти під запити начальства, вся космічна програма була на соплях і виєбонах тільки щоб бути першими, під час правління Сталіна брехливі доноси та постійне життя у страху, а до того... Микола II з війною з Японією, яка так само відбувалася за повної впевненості (по звітах), що російська армія — ого-го!

Не знаю, чесно, що там було до Миколи, але щось здається мені, що ситуація була схожа. Top-down структура, яка орієнтована на задоволення начальства замість результату і на демонстрацію всім навколо блиску замість наведення порядку всередині.

Ця хвороба, показати блискучє щось, щоб заховати внутрішні проблеми — це непоганий індикатор, що в нас все трошечки краще, бо в нас проблеми швидше вилазить нагору. Але все одно корупція в нас зашкалює, бо це органічний наслідок перебування в авторитарній структурі, і викоренити її дуже і дуже важко. Я вважаю, що корупція однозначно найбільший стримувач розвитку країни, і Польща — найкраще тому підтвердження.

P.S. Соррі, якщо я занадто вже очевидні речі пишу, але вони постійно спливають в розмовах, і потім крутяться у голові — а один раз напиши й голова заспокоюється. 😁

RegExp

Позаминулого вересня я виступав на JS fwdays'20, яку зробили онлайн-конфою, і ми зробили там фінт вухами: мені Андрій Листочкин ставив питання від людей до мого докладу — бо самому собі задавати не дуже. Ну і навпаки, я ставив питання йому — і, власне, тому послухав його доповідь. Доповідь була про регулярні вирази, ну типу \d{4}-\w+, оце все, ну прямо лікнеп такий.

Я такий: Андрій, який сенс у тій доповіді, це ж типу на годину читання доки? А він мені каже: ти знаєш, в регекспів така погана репутація, що панове фронтендщики геть всі їх не знають.

Чому взагалі це згадалося — останнім часом з купи напрямків якісь срачі за регулярки лізуть. І я, чесно кажучи, прозріваю. Бо регулярки це офігенний інструмент.

Я навчився регуляркам ще на першому курсі, майже 20 років тому, і відтоді юзав їх дуже ефективно тисячі разів. Життя програміста дуже часто пов'язане з текстом, і простір між "розділи по пробілу" та "пора вже писати справжній парсер" — величезний. Простір, у якому, власне, і сидять регулярки, бо іфи та цикли заплутають куди швидше невеликої регулярки. Це вже не кажучи про те, що "справжній парсер" зазвичай куди більше часу і коду відійме.

І регулярки є всюди. Перейменування файлів у Total Commander? Заміна тексту у редакторі? В Excel? Знайти необхідне посилання серед сотень інших в джаваскриптовій консолі? Вичепити з опису транзакції ім'я?

Об'єктивно кажучи — це один з найкорисніших інструментів з народженних програмуванням. Навіть для не-програмістів.

А дурна слава йде через те, що під час розквіту Perl'a забагато людей настільки звикли використовувати регулярки, що застосовували їх навіть там, де їм не місце. Звідти анекдот "в хлопчика була проблема, він вирішив заюзати регулярку і тепер в нього дві проблеми".

Моя думка з цього приводу така: доки ти не навчився використовувати їх корисно, ходити та пропагувати "ой ні регулярки то погано" — це святкування невігластва.

Ведмеді

Я таку штуку зранку зрозумів, не можу не поділитися. 🤣

Значить історія така: "ведмідь" — це ж евфемізм для назви звіра, типу як "косолапий" чи "вуйко", тільки більш рання. Це замінник табуйованої назви звіра ("того, кого не можна називати"), який сам став табуйованим. Я якось читав припущення, що до того слов'яни ведмедя називали "бер", як германські народи.

Але "бер" — це теж слово-замінник! Ну типу "бурий", так? А початкове індоєвропейське слово — це "арткос", що означає "руйнівник", яке в принципі непогано збереглося у греків у формі "арктос".

Це насправді прикол, так? Типу народ жив в лісах поруч з ведмедями й тому їх боявся дуже — і придумав для них евфемізм. Потім частина народу відселилася далі, і в них це слово збереглося, а ті, що лишилися — придумали новий евфемізм. І оце вже пішло на третій круг (це як мінімум, хаха).

Але розповісти хотів не про те — ми тут зранку жартували, що мож ведмеді з півночі приходили, з арктики? Тому й арктоси?

Ясно, що тут логіка працює у зворотню сторону! Полярна зоря, яка (грекам, на їх півдні) постійно вказує на північ, знаходиться у сузір'ї Малого Воза — або Малої Ведмедиці. Себто Арктика — це Ведмежатня. 😁 Що Вікіпедія теж каже, але чого б я туди про ведмедя пішов читати. :))

P.S. Цікаво, чи насправді слов'яне пройшли через два рівні словозамінників?..

P.P.S. А ще прикол про Арктойську країну — найпівнічніший край античної цивілізації.

‍Звіт ПЖ

Ми нарешті синхронізувалися, повичищали дані і я отримав добро на те, щоб публічно показувати звіт по надходженню грошей до "Повернись живим". :) Тож можна подивитись на статистику того, якими шляхами й коли приходять гроші, єтц.

Давайте трохи про технічні подробиці. :) Складається вся історія з кількох компонентів: сервісу по обробці файлів з транзакціями з банків, постгресу, щоб ті дані зберігати, і метабейзу, щоб показати звіт з постгресу.

Постгрес — бо звичний, плюс даних (поки що?) не так багато, щоб перейматися іншими базами. Найскладніше — це пошук на ім'я (like '%x%'), на півмільйона рядків запит займає секунду. Точніше займав, я туди триграм-індекс тільки що додав, і все супер стало. Правда, це навантаження ніякого ще немає, тож подивимося ще. :) Я не заюзав амазонівський хостед постгрес з двох причин — бо задовбався з іншими їх сервісами, плюс вони там чаржать за кількість запитів, стрьомно.

Метабейз взагалі вдалий. Одразу дає і контроль доступів, і просту консоль до SQL, швидко змінити те, що там у звіті є і як виглядає. Трохи не вистачає можливостей по налаштуванню вигляду: хотілося б оті показники, де просто цифри, зробити ще меншими, але не можна... Одна претензія серйозна тільки: пошук підстроки на звіті виходить регістро-залежний, якщо запити на цьому звіті наклацані в інтерфейсі, а не написані руками. А з такими набагато зручніше працювати, тож поки що так. Тікет є і вже й pull request для нього є, тож може в наступному релізі виправлять.

А сервіс прийшлося кастомний написати: ви напевно ще пам’ятаєте мої спроби зробити то мінімумом коду, які власне доволі очікувано завершилися. :) Подивитися на код можна на гітхабі — чесно кажучи, не очікував, що вийде майже тисяча рядків на кложі, зате без всяких додаткових сервісів, ну й в принципі доволі просто.

Що там є цікавого:

• Супермаленька система шаблонів на жсі. :) Під задачу зайшла нормально, хоча може якби одразу твінспарк взяв, її б і не було...
• Намагався не тягнути зайвих залежностей, хоча від ліб для логгінгу на жвм нікуди не подінешся: без них тільки гірше. Зате роутінг в кілька рядків замість звичайних дуреп.
• В кложі 1.11 з‘явилася нова функція — iteration — і я її заюзав. Вона створена спеціально щоб поглинати апі з паджинацією і на фонді то спрацювало як задумано. Дуже зручно.
• Автоматизовано там власне тільки фонді, все інше завантажується ікселями, які сгенеровані в інтерфейсах банків. Якщо ви вже колись з Ощадом чи Приватом працювали, то розкажіть, може там вже не так і страшно і можна зробити буде.
• У банків дуже погано з унікальною ідентифікацією транзакцій і тому якісь upsert робити неможливо. Теперішня логіка в тому, що ми не отримуємо за день часткових даних. Зі вхідного файлу дані групуються по дню і замінюють цілі дні у БД. Тому можна вантажити дані як заманеться і не перейматися за дублікати чи нестачу даних.

Власне й все, ідіть подивіться, а я послідкую, чи не стане, бува, постгресу погано, чи ще щось. Ось вам скриншот фантастичного інтерфейсу наостанок. Я певен що такого польоту фантазії ви ще не бачили. 😁

За тиждень до війни ми записали новий випуск подкасту RTFJ і якось воно так і лежало собі без руху взагалі. Якось не на часі було і все таке. Але здається що сидіти на тому теж сенсу немає — і today is the day. :)

Гостем був Максим Гарнець, архітектор з Уклону (вони просувають бренд tech/uklon, щоб не було тупих жартів, але ж ви розумієте, про що річ), і випуск вийшов напрочуд цікавий. Крутий продукт — успішно конкурувати з Убером і Болтом з їх інвестиціями це точно складно, круті складові — у подкасті послухаєте. :)

Long story short:

YouTube 👉 https://bit.ly/3Kq52Aa
SoundCloud 👉 https://bit.ly/3vNIgN9
Apple Podcasts 👉 https://apple.co/3LpguNz
Google Podcasts 👉 https://bit.ly/3KpSlW3

Angst

У Рамштайна вийшов новий альбом, що для мене прям подія-подія. 😁 Це група, з якої я почав уважно слухати музику, а не пісню звідти, іншу звідти... Не знаю, чи це значить, що вона сформувала мій смак на музику, чи допомогла його знайти, але я досі їх слухаю, тож новий альбом це круто. Нажаль, в мене не вийшло його послухати в той самий день (чув би я сам себе 10 років тому...), але подивився новий кліп — Angst.

Ну музон кльовий, що тут скажеш, а от кліп... а подивіться його, там без занадто сороміцьких сцен, я почекаю. :)

Короч кліп про те, що нас телевізор (в широкому сенсі, я так розумію) всіх роз'єднує і ми всі такі воюємо, хоча раніше жили так поруч один з одним. Ну не на часі якось, так?

Я розумію, що і пісня була написана рік-два тому, і кліп знімали ще у 21 році напевно, і група з іншої країни... Але і Тіль зашкварився на виступі на параді у Москві, і Германія в дивному становищі, і війна не як у 14 році, коли якийсь локальний конфлікт на околиці світу — а майже третя світова, як мінімум на порозі.

Короче, не в тему взагалі звертати увагу на цю пісню було, краще б відклали реліз того кліпу. А альбом я все одно послухаю, на щастя я німецьку не знаю і тому можу слухати їх пісні як у дитинстві — просто музику. 🎶

У цій війні для нас є ще одна дуже неприємна загроза, якою путін любить пугати всіх навкруги. Тож кине ця сволота атомну бомбу чи ні?

Я за останні два тижні з різними людьми це обговорював і через те що в мене ніяких оригінальних думок не народилося, вирішив опублікувати чужі. 😁

Почнімо з основ. Яка в нього ціль взагалі? Оці всі захоплення — це все хєрня. Головна ціль — винищити українців (хоча б в головах), а за неможливістю того хоча б відкинути Україну у розвитку, щоб було показово.

Вочевидь, він вважає, що суб'єктності в України немає, обидві останні революції були спродюсовані з США (чи з Британії). І що Росія воює з НАТО, для якого це проксі-війна, як колись у багатьох "гарячих" точках.

Битва за Донбас для путіна це зараз останній серйозний аргумент у цій війні. Що вони будуть робити, коли почнуть її програвати? Трошки розтягнути агонію — може мобілізацію, наприклад. Але якщо спробувати поставити себе на місце neue Führer (що складно, але удаймо) — раз Україною віддалено керує США, то треба прибрати керувалку. Прибиваємо верхівку і все, армія перестає працювати ефективно, виконавча влада перестає працювати ефективно, країна у безладі, відчаї та анархії. Так би мовити, мінімальна ціль досягнута.

Чи вважаємо ми, що наступить довгостроковий безлад (=Руїна) після одномоментного прибирання уряду — абсолютно неважливо, важливо чи вважає так герр х-ло. А він, дуже вірогідно, саме так і вважає. І вже довів, що йому не шкода нічого у цій війні — ні домовленостей, ні економічних зв'язків, ні 500 років побудування міфу про велич і армію (і назовні, і всередину), ні власного іміджу. Ні-чо-го.

Навіть у сценарії, коли для Росії все погано, вони можуть вистрелити по Києву, вбити таким чином "хунту" і відступити звідусіль. Типу "ок, ми намагалися без цього, але вибору не залишилося".

Звичайні аргументи проти:

1️⃣ Вони ж не використовують хімічну зброю, тож і тут напевно не буде ескалації? — Хімічна зброя кардинально військових питань не вирішить, тим більш що лінія фронту занадто довга. А ось відносини зі всіма з "дуже погано" до "зараз ми вас пацифіцируємо насильно" змінить — і може призвести до активних дій інших країн нарешті. А ядерна зброя — вирішує.

2️⃣ Британія сказала, що без консультацій буде активно діяти у випадку ядерної атаки. — Ось сценарій: Росія вночі лупить Тополем по Урядовому кварталу, а о 6 ранку заявляє про згортання "операції" і повномасштабний відступ зі всіх позицій. Питання: чи у такій ситуації Британія піде на те, щоб зробити щось активно погане Росії й ризикнути розпалити конфлікт у той момент, коли він, здавалося б, почав вщухати?

3️⃣ Читав недавно статтю, що у Кореї обидві сторони засцяли використовувати атомні бомби, всі проксі-війни відтоді їх не використовують і не будуть. Це тупий аргумент, авжеж, тому що це не звичайна проксі-війна, ВВХ свідомо все поставив на кон.

💥 Аргумент проти, який здався мені більш переконливим, мені навів знайомий з Каліфорнії (у сенсі місцевий, не іммігрант). Для США питання надзвичайної важливості не допустити використання ядерної зброї. Бо її успішне застосування стає чітким сигналом для Китаю, Ірану, Ізраїлю, Пакістану, та можливо інших, що володіння ядерною зброєю — наріжний камень державної безпеки. І це різко робить світ сильно більш нестабільним.

Власне, способи забезпечення того і є аргументом. Перший — у військових США є доволі сталий підхід до неофіційної комунікації (те, що вони називають backchannel) з арміями інших країн. І вони 100% вже попередили всіх у ланцюжку виконання удару в тому, що вони понесуть персональну відповідальність. А "тобі точно хана" це трошки більш переконливо, ніж "скоріш за все країні гайки".

Другий — США витрачають помітну частку бюджету на стримування використання і стримування розповсюдження ядерної зброї, що в перекладі на людську мову значить "хабарі". І є великі шанси, що вся мордорська атомна індустрія сидить на зарплатні з Пентагону.

🏁 Авжеж, це все засекречено, тому це більше роздуми, ніж підтверджені нові факти. Але історично США таке полюбляють практикувати. :) Ось така прутня, малята. 😒

Колись давно читав на Quora одкровення одного чувака про те як він став дурним (у сенсі тупим, а не навіженим). Якщо коротко, то там він розповідає, що йому прийшлося скоротити кількість одночасних проєктів, навчитися занотовувати, і перестав читати комікси та НФ. Натомість став більш розслабленим і більш щасливим. А потім врачі знайшли причину — забиті артерії — і він наче повернувся до "розумного" життя. :)

Ну і типу така картиночка, в цілому окей: ти можеш менше, але зате й непокоїшся про все менше. Але ось тут Ден Луу запостив іншу історію, з дещо менш веселою перспективою.

Хвороба ще ця, лихоманка Західного Ніла, теж гівно рідкісне — заражаєшся від москіта, у 80% навіть не помічаєш, а може бути висока температура, головний біль, блювота, або навіть енцефаліт чи менінгіт, а одужання займає від тижнів до місяців. Порятунку немає, окрім того, щоб не давати себе кусати тим виблядкам.

Так он, чувак від цього жаху став дурнішим, і процес відновлення зайняв 5 років. П'ЯТЬ. 😡 Каже, що це поглибило його депресію, і фільми з книжками не розважали, і відчуття власної смертності не залишало. Така собі перспективка.

Я чому так звертаю увагу на все це: перехворів на коронавірус у січні, і результати не такі яскраві, але увесь лютий було екстремально складно взагалі працювати. Погіршує ситуацію те, що в мене немає можливості перейти у стан, коли мені хтось видає завдання для роботи, а самому вирішувати, що робити, було на грані неможливості. Тільки наявність якихось дедлайнів змушувала рухатись — якщо десь горить, то інші речі відкладаєш і це зменшує навантаження.

Може вже краще, все ж таки 3 місяці пройшло, але я точно значно раніше здаюся, коли занадто багато подразників навколо — а з дітьми це не складно. :) Тому я досі в сумнівах, чи то мене війна прибила, чи то відголос від ковіду. Але маю надію, що воно швидше минеться, вже наче потроху перестає так ковбасити від кількості інпутів.

Чи може то сонечко так впливає. 😁

Мені вчора постгрес підкинув таку подляну з регістрами буковок, шо я аж написав пост з вирішенням, як в старі часи. :) Я вже забув про кодування і всяке таке інше, а тут воно мені неприємно нагадало.

Бачили який збір грошей ДОУ влаштували? Вийшло дуже кльово, імхо. :) Я там трохи взяти участі, зробив власне механізм трекінгу грошей.

Почнімо з карток, бо вони цікавіші. На сторінці ПЖ про донейти є посилання на фонді, через яке можна відправити будь-які кошти — але немає жодного механізму трекінгу того, звідки людина прийшла.

Тож я створив невеличкий сервіс, якому в аргументи можна передати суму, валюту і тег (можна подивитись на посилання на сторінці збору коштів ДОУ) — а він генерує спеціальний order_id виду cba-123356-#some-tag1~#some-tag2. Авжеж, як справжній програміст, я одразу зробив, щоб можна було багато тегів задати. :) Тобто йде до фонді по апі та генерує замовлення с заданими параметрами, а потім туди відправляє браузер — це тому на сторінці фонді вже неможливо змінити суму.

А як дістати ті дані? Ну ви напевно пам‘ятаєте, що я звіт зробив, то там тепер вже є автооновлення даних з фонді та в тому числі парсинг тегів з ідентифікатора замовлення.

А потім ці теги складаються в поле типу text[] в постгрес, ну й рибка в сітці. :) Зробив питання у метабейзі просто на суму грошей, віддав апі до нього — а Ігор з ДОУ зробив прикольну візуалізацію того і вийшло супер.

Що відбувається з банківськими переказами можна здогадатися, думаю — та сама регулярка ловить теги з коментаря. Одна проблема — оновлення робиться руками раз на день і тому відчуття змагання не таке яскраве.

Гарно, що це вже дуже повторюване, тож можна робити в різних варіантах. Воно, власне, ще непогано спрацювало як тест системи проєктів для нового сайту ПЖ. :)

Є насправді механізм передачі даних через спеціальне поле, але такі дані не побачиш в ікселевських звітах, що різко знижує їх цінність. А ще можна влаштувати ріалтайм замість оновлення по крону раз на 5 хвилин, за допомогою колбеків від фонді — але це підвищує складність системи, тобто стійкість буде не та і мені прийдеться звертати більше уваги на те, щоб воно працювало. :)

UPD. Ще додатково дешборд зробив.

Чому Росія перемагала

А ви про це задумувались? Чому 300 років, від підписання Хмельницьким (невдалої) угоди з Московією, Україна не могла вирватися з тих вбивчих обіймів, попри доволі-таки серйозні спроби? І чому зараз, схоже, виходить?

Хочу почати зі згадки про жарт "два українці — це три гетьмани". У нього є дві сторони — з однієї сторони, це про срачі, а з іншої — звідки ці срачі беруться? Люди не люблять начальників над собою, кожен сам собі начальник. В цього є позитивні сторони, і їх багато, але під час війни скоординовані дії — це найважливіше.

І боротьба українського народу після смерті Хмельницького не стільки за збереження домовленостей чи незалежність, скільки між собою — призвела до 300+ років поневолення.

Історія повторювалася багато разів. Мазепа пішов проти царя? А хтось буде за, заради власного зиску. УНР падає під нападом більшовиків? Холодноярська республіка і сама по собі буде жити!

А Росія екстремально авторитарна дуже давно і жодного разу не відходила від тієї моделі правління — що ефективно для вирішення однієї задачі, але погано впливає на загальний розвиток. Що в принципі ми й бачимо постійно, хай би й загнивали там потроху, але ця їх задача під час війни з Україною — це власне ця війна.

Саме тому вони стільки разів перемагали.

Але зміна у комунікаціях змінює баланс корінним чином, і коли всі дізнаються про події не через два місяці, а майже одразу — це краще мобілізує і синхронізує людей. А здатність людей робити щось корисне самостійно, але в одному напрямку — це ультимативна ефективність. 🎉

Тож, як це не дивно уявляти, Україна зараз знаходиться в найкращому за останні 800 років стані! Ще й сусіди, на відміну від 20 сторіччя, допомагають. :)

Я дуже люблю історію, але я казуальний поціновувач: в голові багато уривків, люблю щось прочитати, але я не професійний історик в жодному разі. Але тільки що в голові цікаве зв‘язав і оце хочеться поділитися.

На дворі 14 вік, Золота Орда вже років 120-140 існує (з 1240), на сцені темник Мамай. Темник — це значить керував великим військом, тьмою. Він хоч і не Чінгізід, але хоче стати ханом. Аж тут ханом стає Тохтамиш.

Тож Мамай домовляється з Ягайлом, великим князем ВКЛ, зробити атата Золотій Орді, отримати здобич, а Мамаю власне всю Орду (ну як піде).

Тохтамиш на такі розклади наказує своєму підданому Дмитру Донському допомогти військами та рушає зі своїми на з'єднання. Першими зустрічаються Мамай і Донський, і Мамай вирішує, що окремі битви вигравати легше і нападає. Тут розвідники доносять що Тохтамиш поруч, тож він звалює від Донського.

Зате прибуває Ягайло і трощить Дмитра під нуль. А Мамай програє свою битву і Тохтамиш його страчує. Син та онук Мамая біжать до ВКЛ і Ягайло віддає їм землі на кордоні за те, що вони будуть опікуватися їх захистом. І отут починається найцікавіше.

Онучок цей, Олесько — один з засновників козацтва і відомий під прізвиськом "козак Мамай" на честь діда. Живе у Глинську, тобто це перший князь Глинський, Олександр — помер після 1399 року.

Потім його пра-правнук Михайло підіймає повстання 1508 року вже у Речі Посполитій і в результаті поразки всією тусою ховаються у Москві де племінниця Михайла народжує Івана Грозного. Ото вже невдача. :/

Прикольний штрих до історії! Як називається битва Донського і Мамая? Куликовська! Ото вже скидання ярма на вимогу іншого ярма, гагага! 🤣 Схоже, що це одне зі «знищили увесь повітряний флот і три тисячі танків» від Москви.

Пам'ятаєте, я пів року тому писав, що у Cloudflare крута стратегія? Вони прям реально у Го грають, новий анонс Workers for Platforms просто офігєзний.

Історія така: є воркери, це типу serverless на джаваскрипті, можна невеличку логіку виконувати на серверах Клаудфлера, така собі лоу-кост альтернатива AWS Lambda. І є чуваки, які зтикаються з такою ж проблемою, наприклад Шопіфай хоче виконувати код плагінів в себе.

Клаудфлер каже — в нас така гарна платформа вийшла, давайте ми її вам продавати будемо. Вам — це не розробникам, це іншим компаніям, які вже дають сервіс розробникам. Приходиш до CF, інтегруєшся, і потім маєш змогу дати розробникам писати скрипти для своєї платформи, які виконуються на серверах Cloudflare.

Прям дуже подобається. 😁