Технический менеджер Александр Болховитянов рассказал, как Яндекс учился расшифровывать архивные документы.

Новый сервис поможет тем, кто зашёл в тупик в поисках информации о своих предках, чтобы не отсматривать часами множество сканов старых документов в надежде найти знакомую фамилию.

В посте рассказали о том, как мы обучали нейросеть быстро читать старые рукописи, которые иногда сложно понять обычному человеку.

Разработчики из Google Research создали нейросеть, которая умеет нюхать — Wired

#Google #AI

Сегодня главная новость - утечка исходников Яндекса. Утекло в паблик очень много - 44 Гб в сжатом виде, 83 репозитория.
Дальше по порядку, самое интересное в конце.

1. Утекли исходники почти всех продуктов. Там есть и Почта, и Такси, и Диск, и Алиса. Врядли эти исходники кто-то сможет использовать напрямую, этого точно не стоит бояться.

2. Пользовательских данных, в первом приближении, там нет. В том смысле, что это именно исходники, конфиги, но не базы данных

3. Часто утечка исходников сильно вредит безопасности продукта, потому что там бывают захардкоженные секреты и простые уязвимости. На первый взгляд, здесь этого тоже нет, по крайней мере в сравнении с масштабом утечки. Секреты не хранятся в коде напрямую, а подтягиваются откуда-то еще - это очень правильно, так и нужно всегда делать.

4. Очень много самописных внутренних инструментов, много документации. Интересно для изучения, чтобы понимать как работают большие компании и их IT-инфраструктура. Кажется, что в Яндексе есть сильный перевес в пользу "напишем сами" даже тогда, когда другие компании обошлись бы опенсорсом.

5. Конечно, интересен репозиторий security 🙂 Там тоже внутренние инструменты, всевозможные сканеры, разбиралки тикетов, все на достаточно продвинутом уровне.

6. Дальше еще интереснее. Яндекс массово использует Телеграм в качестве рабочего мессенджера. В файлах есть куча ссылок на чатики в телеграме, по которым можно было прийти и вступить. Сразу после новости о сливе большую часть из них подчистили, но не все. Использование Телеграма - большая проблема и боль для безопасности. Правильный выход - это конечно использование корпоративного мессенджера с полным запретом личных. Но у них тоже есть свои недостатки, телеграм просто очень удобный. В Яндексе используют специального телеграм-бота, которого добавляют в чатики и он следит, чтобы там не было чужаков. Но понятно, что работает это только в тех чатиках, куда бота не забыли добавить.

7. В репозитории Алисы тоже много интересного. Именно самой говорящей модели Алисы вроде нет, но есть много разных скриптов для ее обучения, фрагментов обучающих данных и т.п. Есть выборки реальных (анонимных) запросов пользователей к Алисе, очень интересные. На скриншоте фрагмент файла с реальными призывами к Алисе замолчать. Его можно растащить на мемы буквально целиком

8. В репозитории Почты есть код, который занимается разметкой данных из писем. В том числе анализируются письма с подписками на разные онлайн-сервисы, письма с чеками. Зачем именно - неясно, возможно Яндекс так мониторит конкурентов по рынку?

9. Подход с "монорепой", когда весь код большой компании лежит в одном большом репозитории имеет и свои плюсы и минусы. Когда много сотрудников имеют доступ сразу ко всему - с одной стороны это очень удобно, а с другой, утечка становится вопросом времени. Надо быть к ней готовыми.

10. Данных очень много, это все еще только предстоит изучать. Что делать Яндексу? Да ничего, выпустить пресс-релиз, что исходники старые, данные пользователей в безопасности, взлома не было, виноват инсайдер 🙂 Ну и старательно найти и инвалидировать все секреты.

11. Можно еще сделать красивый жест, выложить официально в опенсорс часть внутренних инструментов и библиотек. Хуже уже точно не будет, а лучше будет.

@ciso_on_fire

Не написал про это раньше, не уверен как к этому относиться. Но на твиче уже больше суток идет очень интересный проект: полностью от начала и до конца генерирующийся ИИ сериал, по задумке являющийся как-бы бесконечным продолжением Seinfeld.

Генерится всё, ИИ генерит описание сцены, реплики персонажей, озвучивает текст, генерирует простое видео и тп. Сейчас это конечно не так чтобы смешно (но общее поведение персонажей и вообще весь фон - очень похож на ситкомы времен HIMYM), но смотреть за этим всем очень любопытно. Воспринимайте это как арт-проект с элементами абсурда.

Прямо сейчас этот канал смотрит 8 тысяч человек, что очень неплохо. Если вдруг услышите удачную шутку в процессе - напишите в комментариях пожалуйста, все же считается что это комедийное шоу

- ссылка на стрим https://www.twitch.tv/watchmeforever
- ссылка на небольшую статью в mashable с деталями https://mashable.com/article/seinfeld-neverending-ai-episode

6 февраля 2022 года в работе ряда сервисов Яндекса возникли перебои. Например, у некоторых пользователей могла не открываться главная страница Яндекса; были частично недоступны Почта, Диск, Такси и ещё несколько сервисов.

Главной причиной недоступности сервисов стал каскадный сбой в работе сетевого оборудования, спровоцированный выходом из строя одного из сетевых устройств — граничного маршрутизатора.

Сегодня мы делимся результатами расследования этого инцидента.