Mastodawn

Welch's test: он вам не замена Т-test'a

Привет! С вами команда аналитиков «Пятёрочки» X5 Tech. В данной статье мы расскажем про один из классических тестов в статистике — тест Уэлча (Welch's Test). Постараемся максимально раскрыть, когда и где стоит его применять и является ли он, на самом деле, тестом по умолчанию вместо Т‑test-a.

https://habr.com/ru/companies/X5Tech/articles/896182/

#abтестирование #abtest #abtesting #abtests #ttest #аналитика #аналитика_данных #аналитика_мобильных_приложений #статистика #статистика_в_it

Welch's test: он вам не замена Т-test'a

Привет! С вами команда аналитиков "Пятёрочки" X5 Tech. В данной статье мы расскажем про один из классических тестов в статистике – тест Уэлча (Welch’s Test). Постараемся максимально раскрыть, когда и...

Хабр

Habr Mar 24

Propensity Score Matching (PSM): как обойтись без A/B-теста и всё равно узнать правду

Как определить, влияет ли то или иное событие на ключевые метрики, если полноценный A/B-тест недоступен? В этой статье мы разберём метод Propensity Score Matching (PSM ): узнаем, как компенсировать отсутствие рандомизации, выровнять группы по ключевым признакам и избежать ложных выводов при оценке эффекта.

https://habr.com/ru/articles/887276/

#psm #abtest #mashinelearning #mashine_learning #propensity_score_matching #statistics #машинное_обучение #абтесты #статистика #product

Propensity Score Matching (PSM): как обойтись без A/B-теста и всё равно узнать правду

На практике часто возникает необходимость объективно оценить, как то или иное событие влияет на ключевые метрики бизнеса. Это большая и широкая задача, которая часто решается с помощью проведения...

Хабр

brawnybunkbedbuddy Jan 11

yesterday i was looking for a particular image regarding moderation changes on fb using #ddg, #startpage and #brave with a really simply phrase. all done in same browser, in 3 separate tabs of same private window

brave search pulled results and included two small widgets at the top. but today it doesn't and instead adds a drop-down summary even if i disable ai feature in settings

still, all 3 search engines pulled nearly same images collection

#searchengine #abtest #odditiesfoundontheinternet

Anoncheg Oct 31, 2024

#dailyreport #abtest #multiarmedbandit #mab
I have been reading about solving causal inference A/B
test as a Multi-Armed Bandit problem. These is ML
Reinforcement learning algorithms that applied at once
and enhance during time.

Popular algorithms:
- Upper Confidence Bound (UCB) - deterministic, optimal
- Thompson Sampling - stochastic, optimal
- Epsilon Greedy - stochastic, approximate

Thompson Sampling and UCB have asymptotic regret lower
bound (where N is the number of arms and T is the number
of time steps).
: O(√(N*T*log(T)))

*regret* is difference between max possible reward and
collected. *optimal* means algoritms able to achive
minimal regret when T → ∞.

I hacked my first remote machine. I created a separate
account and cleared logs. I didn't break any
configuration. Now I am going to spend a day or so to
make this hack automatic.
蠡