5 Mar 2026, 21:38 UTC≈1,420 views26 reactionsread 6 August 2026 Привет! Потихоньку возвращаюсь к каналу, параллельно меняя работу.
Пока готовлю материалы для новой серии постов, релизнули тест с гробовыми задачами из нашей практики. Надеюсь, хоть кто-то сможет пройти на 5/6 😅
P.S. Рома провёл исследование AI. ChatGPT, Claude и Codex смогли пройти только на 1/6, а вот Gemini - 3/6. У нас ещё есть шанс!
❤14🔥8👏4
6 Dec 2025, 15:18 UTC≈2,290 views59 reactions1 Starread 6 August 2026 Практический гид по A/B-тестам
TL;DR
Наша команда собрала опыт в формате ежедневных коротких советов и кейсов по A/B-тестам, а также добавила возможность получить разбор своих экспериментов от экспертов. Всё доступно на сайте.
Почему мы это сделали
Одни из моих основных задач — ревью крупных экспериментов:
– оценка пользы нефинансовых сервисов;
– анализ редизайна ключевых экранов;
– тестирование кросс-продуктовых м…
❤26🔥12👎8❤🔥5👍4😨4
20 Nov 2025, 19:52 UTC≈2,170 views26 reactions1 Starread 6 August 2026 Photo
A/B тестирование большого числа моделей
TL;DR
Позволяет эффективно проводить эксперименты с большим числом персонализаций и существенно снижать размеры выборок.
Почему обсуждается?
Когда мы тестируем несколько вариантов моделей, размер выборок быстро растёт. Однако решения моделей на большой доле клиентов могут совпадать. Рассматриваемый подход похож на валидацию моделей без A/B и позволяет значительно снизить затр…
❤14🔥5🌭3❤🔥2🍓1😱1
25 Oct 2025, 13:43 UTC≈1,950 views25 reactions1 Starread 6 August 2026 Photo
Условная максимизация в uplift моделировании
TL;DR
Позволяет персонализировать принятие решений, выбирая оптимальную стратегию с учётом не только эффекта, но и стоимости воздействия.
Почему обсуждается?
Обычная uplift модель выбирает вариант с максимальным ожидаемым эффектом. Но в реальных задачах каждое воздействие имеет свою цену или риск. Рассматриваемый подход решает эту проблему: он позволяет находить оптималь…
🔥17❤🔥4❤2🦄2
6 Oct 2025, 09:43 UTC≈1,870 views17 reactions1 Starread 6 August 2026 Оценка качества персонализации
TL;DR
Позволяет оценить эффективность персонализации без проведения нового эксперимента. Особенно полезен, если вариантов воздействий немного.
Почему обсуждается?
При разработке персонализации важно заранее понимать, принесёт ли она прирост целевых метрик и не создаст ли нежелательных эффектов. Рассматриваемый подход позволяет оценить ожидаемую пользу и риски персонализации на оффлайн…
🔥11🦄5❤1
21 Sept 2025, 15:00 UTC≈1,830 views23 reactions1 Starread 6 August 2026 Uplift моделирование: Causal Random Forest
TL;DR
Позволяет персонализировать принятие решений, предсказывая эффект от каждого воздействия на клиента. Особенно полезен, если вариантов немного.
Почему обсуждается?
Модели, основанные на S-learner подходе, могут слабо различать варианты воздействий на клиента. Рассматриваемый подход позволяет сильнее сфокусироваться на различиях между вариантами воздействий.
Проблема
…
🔥17👍3❤2💅1
1 Sept 2025, 07:35 UTC≈1,690 views21 reactions1 Starread 6 August 2026 Uplift моделирование: S-learner
TL;DR
Позволяет персонализировать принятие решений, предсказывая эффект от каждого варианта решения. Особенно полезен, если вариантов много.
Почему обсуждается?
Этот пост открывает серию разборов, которые в конце будут объединены в оригинальную методологию управления бюджетом с помощью ML. Начнём с базового подхода, на котором строится стратегия персонализации.
Проблема
Нужно персон…
❤9🔥6👍3🦄3
18 Aug 2025, 16:39 UTC≈1,550 views19 reactionsread 6 August 2026 Последовательный критерий хи-квадрат для проверки SRM
TL;DR
Адаптирует классический критерий хи-квадрат для последовательного применения и позволяет обнаруживать SRM до завершения эксперимента.
Почему обсуждается?
На конференции мат. центров России я выступил с докладом о случайных блужданиях. Результат, связанный со сходимостью статистики хи-квадрат к квадрату процесса Бесселя, позволил построить последовательный …
🔥14❤3🦄2
4 Aug 2025, 09:35 UTC≈2,270 views22 reactions1 Starread 6 August 2026 Математика последовательных подходов
TL;DR
Три последовательных критерия — SPRT, GST и mSPRT — используют разную математику. В этом посте — краткий обзор формул, допущений, сильных и слабых сторон каждого критерия.
Почему обсуждается?
Последовательные подходы основаны на разных математических принципах — от мартингальной теории до центральной предельной теоремы. Понимание используемой математики помогает лучше виде…
🔥12❤6🐳2❤🔥1👍1
12 Jul 2025, 09:06 UTC≈1,390 views22 reactionsread 6 August 2026 Последовательная проверка SRM
TL;DR
Позволяет во время эксперимента проверять корректность долей выборок. Эффективен при длинных тестах.
Почему обсуждается?
Мы хотим останавливать эксперимент как можно раньше, если в нём есть ошибки. Один из простых индикаторов таких проблем — Sample Ratio Mismatch (SRM). Это сильное расхождение между планируемыми и фактическими долями участников в группах. SRM позволяет выявить сб…
🔥13❤7🦄2
28 Jun 2025, 14:13 UTC≈1,410 views20 reactions1 Starread 6 August 2026 Групповой последовательный анализ
TL;DR
Позволяет адаптировать Z‑тест к последовательному применению. Эффективен в случае быстро вызревающих метрик и наличия изменений.
Почему обсуждается?
В подходе Вальда нужно знать параметрическое семейство (например, биномиальное или нормальное). Это ограничение можно преодолеть с помощью Group Sequential Testing (GST).
Проблема
Хотим завершать эксперимент быстрее, если в метр…
🔥12❤3👍3🦄2
16 Jun 2025, 07:58 UTC≈1,760 views30 reactionsread 6 August 2026 Последовательный анализ Вальда
TL;DR
Позволяет ускорить тесты конверсий примерно на 60%. Эффективен в случае быстро вызревающих метрик и при отсутствии сезонностей.
Почему обсуждается?
Этот пост открывает серию разборов последовательных критериев - каждый со своими предпосылками, достоинствами и ограничениями. Начинаем с классики - анализа Вальда.
Проблема
Хотим проводить эксперименты быстрее. Fixed-horizon подход…
🔥17❤7👍5🐳1
Showing the 12 most recent of 14 posts we hold for @mathforimpact. View and reaction counts are the latest single reading for each post, not a live figure, and a recent post is still accumulating both. A view count marked ≈ was rounded by Telegram before we ever saw it — t.me prints views in full below 1,000 and to three significant figures above, so ≈1,200,000 means somewhere between 1,150,000 and 1,249,999. Unmarked counts are exact. Text is reproduced from the public post preview and truncated for length.