Процесс экспериментов и способ принятия решений в Спотике
https://engineering.atspotify.com/2024/03/risk-aware-product-decisions-in-a-b-tests-with-multiple-metrics/
https://engineering.atspotify.com/2024/03/risk-aware-product-decisions-in-a-b-tests-with-multiple-metrics/
Spotify Engineering
Risk-Aware Product Decisions in A/B Tests with Multiple Metrics
Risk-Aware Product Decisions in A/B Tests with Multiple Metrics - Spotify Engineering
https://engineering.atspotify.com/2024/05/fixed-power-designs-its-not-if-you-peek-its-what-you-peek-at/
Некий новый способ дизайна экспериментов
Некий новый способ дизайна экспериментов
Spotify Engineering
Fixed-Power Designs: It’s Not IF You Peek, It’s WHAT You Peek at
Fixed-Power Designs: It’s Not IF You Peek, It’s WHAT You Peek at - Spotify Engineering
Google Illuminate
Экспериментальный сервис Google превращает научные публикации во что-то вроде подкастов, где эта тема раскрывается в дискуссии.
Экспериментальный сервис Google превращает научные публикации во что-то вроде подкастов, где эта тема раскрывается в дискуссии.
TL;DR – Spotify повышает CTR по рекомендованным блокам, когда объясняет при помощи LLM почему он показывается
https://research.atspotify.com/2024/12/contextualized-recommendations-through-personalized-narratives-using-llms/
https://research.atspotify.com/2024/12/contextualized-recommendations-through-personalized-narratives-using-llms/
Что такое "хорошо используемый ИИ"? Зависит от задачи.
Концепт от одного информационного архитектора https://jarango.com/2024/10/01/exploring-the-ai-solution-space/
Концепт от одного информационного архитектора https://jarango.com/2024/10/01/exploring-the-ai-solution-space/
Еще один материал про купед. На этот раз от мордокниги и с примером кода
https://medium.com/@AnalyticsAtMeta/how-meta-scaled-regression-adjustment-to-improve-power-across-hundreds-of-thousands-of-experiments-624e08aaf560
https://medium.com/@AnalyticsAtMeta/how-meta-scaled-regression-adjustment-to-improve-power-across-hundreds-of-thousands-of-experiments-624e08aaf560
Medium
How Meta scaled regression adjustment to improve power across hundreds of thousands of experiments…
Author: John Meakin, Saurabh Sangwan
Training Data Attribution (TDA) - метод, который помогает понять какие примеры из обучающий выборки сильнее влияют на знание модели
https://medium.com/people-ai-research/scaling-training-data-attribution-f7d1eddd85da
https://medium.com/people-ai-research/scaling-training-data-attribution-f7d1eddd85da
Medium
Scaling Training Data Attribution
The science of how training data influences LLM behavior
Интересный подход: логировать полезность фичей в моделях в общем хранилище, чтобы потом ускорять подбор для новых моделей
Область исследований, которая изучаю отказоустойчивость и безопасность сложных социо-технических систем + пара интересных ссылок
https://github.com/lorin/resilience-engineering
https://en.wikipedia.org/wiki/Resilience_engineering
https://en.wikipedia.org/wiki/Safety_engineering
https://en.wikipedia.org/wiki/MTTFd
https://www.resilience-engineering-association.org/
https://github.com/lorin/resilience-engineering
You can think of robustness as being able to deal well with known unknowns, and resilience as being able to deal well with unknown unknowns.
https://en.wikipedia.org/wiki/Resilience_engineering
https://en.wikipedia.org/wiki/Safety_engineering
https://en.wikipedia.org/wiki/MTTFd
https://www.resilience-engineering-association.org/
GitHub
GitHub - lorin/resilience-engineering: Resilience engineering papers
Resilience engineering papers. Contribute to lorin/resilience-engineering development by creating an account on GitHub.
1-s2.0-S0925753522001175-main.pdf
2.2 MB
A systematic review of human-AI interaction in autonomous ship systems