Несколько постов назад мы говорили об A/B-тестировании с множественными метриками. Мы использовали знаменитую поправку Бонферрони, чтобы контролировать нашу частоту ошибок в семье при выполнении нескольких тестов.

Метод Бонферрони широко используется из-за его простоты и широкой применимости. Мы знаем, что его самым большим недостатком является то, что это консервативный тест.

Вывод, который выдерживает корректировку Бонферрони, является заслуживающим доверия результатом исследования.

Почему Бонферрони консервативен?