Осознанное внедрение новых решений, которое приносит пользу вашему бизнесу
ABacus
Open source фреймворк для A/B тестирования
Принцип работы
Определение размера выборки, расчет результатов, визуализация и составление отчетов по экспериментам. Сравнивайте выборки и получайте статистически значимые результаты для эффективного внедрения новых решений в ваш бизнес.
Задача
Решение
ABacus — open-source фреймоврк, который включает в себя универсальные инструменты для различных стадий ЖЦ экспериментов, таких как планирование эксперимента, определение размера выборки, оценка результатов, визуализация и отчетность.
Обеспечить все стадий жизненного цикла А/Б теста удобным инструментом, который обладает отличной математической базой, с возможностью детальной настройки параметров.
Преимущества продукта
Axiom
Дизайн эксперимента
Разделение групп
Проведение A/A-теста
Гибкая настройка сплита и стратификациии.
Оценка качества разбиения выборки на группы.
Ошибки I и II рода, размер эффекта, моделирование размера выборки.
Оценка результатов
Методы повышения чувствительности
Стратификация, CUPED и CUPAC.
Оценка результатов эксперимента с помощью различных статистических тестов и подходов.
Визуализация и отчетность
Полный отчет эксперимента с графиками в удобочитаемом формате.
Функциональность
Axiom
Бизнес-процессы
Подключение к различным реляционным СУБД, например Postgres, GreenPlum
Регистрации логической модели данных (метаданных): разметка физических таблиц витрины, добавление сущностей, связей между ними и атрибутов
Ролевая модель
External task
Возможность расчета производных атрибутов на основе существующих полей витрины и формирования агрегатов
Создание глобальных сегментов и постановка их пересчета на расписание
Python SDK
Популярные вопросы
Axiom
Для этой задачи в ABacus заложен функционал по иммитационной оценки мощности тестов для различных эффектов и размеров групп.
Необходимо выделять группы стратифицировано.
Для снижения дисперсии в группах в ABacus предусмотрен функционал для гибкой стратификации.
Тем, который подходит под конкретную метрику. Например, bootstrap тест является достаточно универсальным тестом. В ABacus представлен широкий выбор тестов под любую задачу: t-test, u-test, z-test, bootstrap, delta method и другие.
Более подробно с функционалом библиотеки можно по ссылке.
Более подробно с функционалом библиотеки можно по ссылке.
Оставьте заявку
на консультацию
Пишите нам:
Проконсультируем
Ответим на все ваши вопросы и поможем определиться с выбором
Вам может быть интересно
Продукты
