Кратко о моем дне:

1. Добавил несколько постов в Linkedin про BI, dbt и тп. Текст сгенерил в ChatGpt. Я давно там много лайков не собирал.

2. Написал менеджеру отзыв, о том какой он душка. Текст сгенерил в chatpgt. Мне кажется мой менеджер прослезился.

3. Написал пользователю письмо, что я сделал все, что мог, чтобы решить его проблему и дальше уже не могу помочь. Текст сгенерил в chatgpt. Пользователь ничего мне не ответил, но явно почувствовал свою важность.

4. Взял в задачу PostHog для продуктовой аналитике. В Chatgpt у знал как в него попадают данные из хранилища данных.

5. В gitlab copilot сгенерил python для Posthog API (загрузка и скачивание данных). Команда прифигела, как я быстро сделал прототип и сколько я знаю про PostHog.

6. Создал новый спринт для команды и попросил команду обновить свои таски. Попросил chatgpt сочинить поэму на 12 строк. Всем подняло настроение и никто не прошел мимо моей просьбы.

Даже и не знаю, хорошо это или плохо, но хоть какое-то разнообразие в скучной ИТ жизни🦥

https://iximiuz.com/en/posts/ssh-tunnels/


Хехе, сегодня необычный пост, потому что он не про Data Engineering. По ссылке выше - прекрасный иллюстрируемый гайд про то, как работает SSH тунель.
Когда он мне попался на глаза, немножк всплакнул, потому что вспомнил вот такую историю:

На одном из рабочих мест, ввиду политики информационной безопасности, доступ на продакшен кластер K8S и ко всем продакшен базам данных, расположенным в одой сети, был запрещен снаружи, то есть с рабочего компа из дома не постучаться; То есть только из офисного Wi-Fi.
И нет, с корпоративным VPN тоже нельзя. И да, это уже был Covid, и мы были на удаленке.

Тогда хитрый жук Семен, чтобы не пользоваться RDS (удаленным рабочим столом), сделал хитрый финт ушами:
- поднял в личном облаке машину за $3
- поднял под в неймспейсе своего продукта, который делал Reverse SSH Tunnel на эту машину и Port Forwarding
- все коннекшен стринги (к базам и к кластерам) поменял на адрес машины.

В итоге когда Data Grip исполнял заброс, он летел на машину в моем облаке, по обратному тоннелю уходил в под, который в прод кластере, а уже оттуда - в базенку.

Никто из DevOps и ИБ, за год+ работы этой схемы так и не пришел ругаться 😜

@ohmydataengineer

Сегодня увидел интересный пост в канале Труба данных. Это небольшой тренинг про использование SSH - A Visual Guide to SSH Tunnels: Local and Remote Port Forwarding. Даже с материалами для реализации каждого подхода.

Я как бывалый инженер данных и “тертый” BI разработчик могу смело заявить, что это очень полезный навык. Такой же как и базовые навыки использования командной строки или знание азов облачных вычислений.

Где найти рейтинг лучших курсов по программированию?

Мы — tutortop, самый крупный агрегатор курсов на рынке онлайн-образования! Сейчас в нашем сервисе представлено более 5000 курсов от более чем 300 школ и все их можно сравнить по рейтингу, цене и отзывам, а еще купить дешевле, чем в напрямую🔥

Специально для вас мы собрали подборку из топовых курсов в IT по мнению наших пользователей:

– Профессия «Разработчик на Python с гарантией трудоустройства» от Skypro. Рейтинг 4.9 на основе 179 отзывов.

– Профессия «Java-разработчик» от ProductStar. Рейтинг 4.8 на основе 97 отзывов.

– Профессия «Fullstack веб-разработчик на JavaScript и PHP» от SkillFactory. Рейтинг 4.8 на основе 259 отзывов.

Еще более 500 курсов по любому направлению в программировании можно найти и сравнить в tutortop!⚡️

Автор обучающих курсов по машинному обучению и Python - Влад Бурмистров создал свой канал в Телеграм: https://news.1rj.ru/str/courses_vlad_burmistrov.

Его курсы опубликованы на двух площадках: Stepik, принимающий банковские карты РФ, и Udemy, принимающий зарубежные карты.

1) Машинное Обучение в Python: Большой Курс для Начинающих (49 часов!)
ссылка на Stepik / ссылка на Udemy

2) Полный Курс Python 3: от Новичка до Мастера (Питон, Пайтон) (11 часов)
ссылка на Stepik / ссылка на Udemy

3) Начальный курс SQL: от Новичка до Специалиста (7.5 часов)
ссылка на Stepik / ссылка на Udemy

Всем привет завтра (27-12-2022) в 20:00 по мск у нас на DataLearn вебинар.
Тема: Прокачка резюме.
Ссылка на вебинар: https://youtu.be/bl-z9bnjceI

Предыстория:
Относительно недавно у нас был вебинар: "Как аналитику составить огненное резюме и попасть в зарубежную компанию?"
Спикером была Крис (Айти психолог, с колосальным бэкграундом в области данных).
На вебинаре мы договорились, что вы поскидываете свои резюме, Крис их посмотрит и расскажет о плюсах и минусах, а также об общих паттернах, что следует указывать или наоборот не указывать)))

Кстати до завтра еще успеете прислать резюме, возможно даже рассмотрим что то в прямом эфире.
Ссылка на форму: https://forms.gle/CeSLrzB2JPwPWQoSA

Контакты Кристины:
https://news.1rj.ru/str/it_psycho
https://www.youtube.com/channel/UC7ew...
https://www.linkedin.com/in/kristina-kostina/

Кто не смотрел предыдущий вебинар ссылка вот:
https://youtu.be/6N7KReARb4s

📜Что почитать по ML?

Меня часто спрашивают, что почитать/посмотреть тем, кто только начинает свой путь в ML. Собрала для вас подборку своих любимых курсов, книг и видеолекций.

1️⃣Курс лекций по Машинному Обучению на ФКН ВШЭ (MY Favourite!) - курс лекций моего любимого лектора и одного из лучших преподавателей на ФКН - Евгения Соколова - обожаю его! В репозитории есть все материалы за несколько лет, отличные методички с теоретическом материалами и практика в ноутбуках
2️⃣ Записи видеолекций к этому курсу. Есть лекции в потрясающем объяснении Евгения Соколова и семинары
3️⃣Открытый курс Машинного Обучения от ODS - серия статей, которая просто рассказывает об основных темах ML, не забывая при этому про математику и теоретический материал.
4️⃣Курс видеолекций по ML Константина Воронцова – классический теоретический курс, хотя, возможно, он в чем-то суховат
5️⃣ Материалы к курсу Воронцова
6️⃣ Цикл лекций от Steve Brunton - материал собран в виде коротких роликов по 5-10 минут. Удобно точечно смотреть непонятные моменты.
7️⃣ML books by Steve Brunton
8️⃣Python Data Science Handbook - необычная книга по Python для DS, которая совмещает в себе книгу и практический материал на гитхаб. Есть куча тьюториалов по самым разным темам.

#ml_на_пальцах #курсы

🔥 Хардовый тест для DS и ML-специалистов 🔥

💣 Ответьте на 15 вопросов за 20 мин и проверьте, насколько вы готовы к обучению на курсе - «Natural Language Processing (NLP)».

✅ ПРОЙТИ ТЕСТ - https://otus.pw/HQIK/

🚀 Главная фишка курса в том, что вы изучите современные подходы и модели, которые являются стандартом в области, но еще не успели войти в большинство образовательных программ.

💻 После 4 месяцев обучения на курсе вы сможете:

- создавать телеграм-ботов;
- работать с нейросетевыми моделями архитектуры трансформер;
- применять модели архитектуры трансформер для широкого спектра NLP задач;
- решать задачу распознавания именованных сущностей;
- создавать вопросно-ответные системы.

‼️ Всех, кто сдаст тест, ждет новогодняя скидка 23% до конца года. Возможна оплата в рассрочку!

Реклама. Информация о рекламодателе на сайте www.otus.ru