RU

Как предсказывать долгосрочный эффект A/B теста раньше: прокси-метрики и ловушка регрессии

В продуктовых экспериментах нередко возникает следующая ситуация, когад бизнесу важна долгосрочная или малочувствительная метрика, но оценить эффект…

ab testingаб тестированиепрокси-метрикиэкспериментыанализ данныхcausal inferenceпродуктовая аналитикаnorth star metricltvretention
Habr
RU

Как предсказывать долгосрочный эффект A/B теста по коротким метрикам — и почему регрессия может обмануть

В продуктовых экспериментах нередко возникает следующая ситуация: бизнесу важна долгосрочная или малочувствительная метрика, но оценить эффект на та…

ab-тестированиеcausal inferenceпрокси-метрикиэкспериментыанализ данныхproduct analyticsпродуктовая аналитикаметрикиnorth starltv
Habr
RU

Как я ставил A/B‑тесты на поток и случайно собрал платформу для экспериментов

Приветики, меня зовут Петр и я алкоголик работаю продуктовым аналитиком вот уже лет 12 наверное. Мои основные профили это продуктовые рисерчи и…

ab-тестированиеуправление продуктомэксперименты
Habr
RU

Как мы не обожглись на быстрых ML-экспериментах: опыт с 10% аудитории, холиварами с аналитиками и «лампой для лишая»

Каждый новый A/B-тест у нас занимал 3–4 недели. За это время ML-команда успевала придумать ещё несколько гипотез, аналитики — устать, а продакты — н…

вкусвиллрекомендательные системырекомендацииmlproduct managementab-тестированиеметрикиэкспериментыгипотезыab-testing
Habr
RU

«Охота на лис» в XXI веке: забытый радиоспорт в новом техно стиле

"О спорт, ты — мир!" — это замечательная фраза основателя современных Олимпийских игр Пьера де Кубертена. И с этим трудно не согласиться, ведь спорт…

охота на лисразработка приложенийспортивные игрыпрограммированиесмежные технологииразвлечение и спортбазы данныхизобретенияноу-хауэксперименты
Habr
RU

Почти зелёные миры: перспективы фотосинтеза на планетах у оранжевого карлика (спектральный класс K)

Ранее я публиковал на Хабре относительно успешную статью « Негостеприимные красные карлики. Об ультрафиолетовой зоне обитаемости ». В ней я упоминал…

экзопланетыфотосинтезкосмосэкспериментыобитаемость
Habr
RU

Проверка спроса до запуска продукта: как мы проводим фейкдор‑тесты

До того как начать инвестировать в разработку продукта, команде стоит проверить, есть ли реальный спрос на продукт и наскол…

fakedoorисследование пользователейэкспериментыгипотезыпродуктменеджмент проектов
Habr
RU

Рубрика эксперименты (в дизайне): наш опыт генерации и проверки гипотез

Привет! Меня зовут Ксюша, я продуктовый дизайнер в MAGNIT TECH, и уже больше года работаю над карьерными сайтами. Я присоединилась к продуктовой ком…

uxисследованиеаб-тестыэкспериментыдизайн-система
Habr
RU

Как открыть гравитон. Некоторые идеи о квантовании гравитационных волн

Ранее на Хабре я несколько раз затрагивал тему скрытой массы Вселенной. Скрытая масса также известна под названием «тёмная материя»; этот термин (du…

гравитоныгравитацияLIGOнейтронные звездыдетекторэксперименты