Проксируй это: как ускорить A/B-тесты и не попасть в ловушку метрик

В A/B-тестах хотелось бы смотреть на главную метрику, ту самую North Star, которая показывает успех продукта. Но на практике она почти всегда медленная, шумная и бесполезная для быстрых решений. Например, вы запускаете тест новой системы рекомендаций, ждёте неделю, две, а LifeTime Value не двигается. И непонятно, это потому что нет результата или ещё рано делать выводы. Чтобы не тратить месяцы на догадки, можно воспользоваться прокси-метриками — быстрыми, чувствительными показателями, которые реагируют раньше, чем бизнес-метрика «успевает моргнуть». Проблема в том, что это решение часто требует дополнительные ресурсы. Привет, Хабр! Меня зовут Артем Ерохин, и я Data Scientist в X5 Tech. Я прочитал современные исследования, пропустил их через свой опыт и собрал концентрат подходов к работе с прокси-метриками. Постараюсь передать только суть. Разберемся, зачем нужны прокси, как с ними не выстрелить себе в ногу, где заканчивается польза и начинается самообман.

https://habr.com/ru/companies/X5Tech/articles/974372/

#ab_тестирование #проксиметрики #эксперименты #причинноследственный_анализ #causal_inference #анализ_данных #product_analytics #surrogate_models #north_star_metric #корреляция

Почему ЭТО — не трейдинг

Наверняка многие из вас уже видели такие скриншоты на просторах интернета. СМИ разных оттенков жёлтого поголовно твердят: «DeepSeek зарабатывает деньги! ChatGPT в минусе». В этом посте хочу донести, почему эти утверждения очень натянуты — через критику как дизайна эксперимента, так и его конкретной реализации.

https://habr.com/ru/articles/963338/

#трейдинг #трейдинговый_бот #трейдинговая_система #искусственный_интеллект #биржевая_торговля #торговые_роботы #торговые_стратегии #торговля_на_бирже #эксперименты #критика

Веб. К черту фреймворки! Пишем свой starter-kit с роутером и сторами. Часть 2

Пробуем собрать свой минималистичный starter-kit. Туториал из трех частей. В предыдущей части мы реализовали причудливый конфиг на webpack + собственный роутинг. В этой мы используем магию Proxy, чтобы добавить реактивные хранилища. Реализуем их двумя (или тремя) способами. В следующей рассмотрим работу с web-компонентами.

https://habr.com/ru/articles/958026/

#эксперименты #стейтменеджер #реактивность #state_management #proxy

У нас было 10k метрик, 500 А/В-экспериментов и 500kk p-value каждый день…

Всем привет! Меня зовут Данила Леньков, я руковожу платформой A/B-экспериментов Trisigma в Авито . За 7 лет мы прошли путь от небольшой внутренней команды из трёх человек до полноценного технологического продукта, который теперь доступен на B2B-рынке. В этой статье я рассказываю о четырёх ключевых проблемах, с которыми мы столкнулись на пути от десятка экспериментов в год до четырёх тысяч. Это реальный опыт масштабирования, который может быть полезен любой компании, серьезно относящейся к принятию решений на основе данных.

https://habr.com/ru/companies/avito/articles/947358/

#авито #trisigma #тестирование #abтестирование #эксперименты #b2bсервисы #анализ_данных #принятие_решений #data_driven

БП 1.19 – план из прошлого – долгое прошлое, тянется как зима! Заморозка отсюда!

Бэйсик Паскаль версия 1.19 запомнится как длинная версия. Словно долгий год. Или долгая ночь. Как долгая зима. И вот версия выпущена. Она такая долгая потому что там было несколько планов. Про план под названием из прошлого.

https://dimalinkrus.blogspot.com/2025/09/119_11.html

#история #берег #море #магия #фэнтези #арктика #холод #замороженный #вирус #монстры #8бит #ретроигра #джин #сказка #грибы #эксперименты

[Перевод] Неудачные эксперименты с Vibe Coding на Python

Команда Python for Devs подготовила перевод статьи Элa Свейгарта о неудачных экспериментах с vibe coding. Все говорят, что ИИ уже умеет писать приложения, но стоит чуть отклониться от привычных сценариев — и всё идёт наперекосяк. Картофельная Африка вместо карты, пинбол, превращающийся в пинг-понг, и счёты с отрицательными числами — автор собрал коллекцию своих провалов с vibe coding.

https://habr.com/ru/articles/944698/

#vibe_coding #LLM #генеративный_ИИ #Python #эксперименты #ошибки_ИИ #ограничения_AI

Эксперимент «Надежда» Рихтера: гимн силе духа или научная ошибка?

В мире психологии и мотивации свои «городские легенды» — эксперименты, выводы которых кочуют из книги в книгу, обрастая вдохновляющими историями. Один из них — опыт американского психофизиолога Курта Рихтера, проведенный в 1957 году и известный как эксперимент «Надежда». Его традиционная трактовка стала гимном силе человеческого духа: якобы вера в спасение способна творить чудеса. Но что, если копнуть глубже? Мой анализ привел меня к выводам, которые скорее ужасают, чем вдохновляют.

https://habr.com/ru/articles/945348/

#психология #наука #эксперименты #нейробиология #выученная_беспомощность #этика #научпоп #сила_воли #антропоморфизм

Реализация А/Б-тестов

Для А/Б-тестов в вебе показаны случайный выбор групп, хэширование, логика на бэкэнде и фронтэнде, логирование событий, одновременные эксперименты и админка. Примеры демонстрируют реализацию А/Б-тестов и устройство платформ экспериментов. Читать

https://habr.com/ru/articles/940118/

#абтесты #эксперименты #анализ_данных #продуктовая_аналитика #вебсервисы #вебаналитика

Sigma + Trisigma = 4Sigma или как мы сделали эксперименты еще удобнее

Всем привет! Меня зовут Искандер, я отвечаю за продуктовое развитие A/B-платформы Avito – Trisigma External, а раньше работал в EXPF и также отвечал за A/B-платформу, которая называлась Sigma. В июне произошло важное событие для российского рынка продуктовой аналитики: платформа Sigma официально стала частью Trisigma . В этой статье я рассказываю, чем уникальна Sigma, как она устроена под капотом и какие плюсы появление новой платформы сулит пользователям объединённой системы.

https://habr.com/ru/companies/avito/articles/931628/

#abтестирование #эксперименты #продуктовая_аналитика #продуктовая_разработка #trisigma #sigma #avito #авито

🔥 Кастомизация 3D-печати: от логотипа до QR-кода на каждой детали!

Привет, друзья! Сегодня я вам расскажу, как превратить обычную 3D-печать в искусство с помощью кастомных платформ. Ember prototypes делают крутые штуки, но их не всегда можно достать. И тут мне в руки попал EufyMake E1 UV printer.

Я решил не просто печатать, а создавать уникальные вещи. Зачем? Ну, во-первых, это круто выглядит. Во-вторых, это отличный способ брендировать свои изделия. В-третьих, кто сказал, что я не могу напечатать QR-код прямо на платформе? 😜

Короче, я разобрался, как это работает, нашёл кучу подводных камней, и теперь делюсь с вами своими открытиями. Спойлер: PETG и UV-печать не всегда друзья, но PLA — вполне себе за!

Хотите узнать больше про мои приключения с UV-принтером и кастомными платформами? Полная статья уже ждёт вас здесь: https://3d-nisla.ru/3d-pechat-s-izyuminkoj-delaem-kastomnye-podlozhki-dlya-printera/#Vyvody_i_dalnejsie_perspektivy

#3Dпечать #кастомизация #сделайсам #DIY #технологии #EufyMake #эксперименты #творчество #печатьназаказ