Перейти к содержимому
SUIN.AI
МаркетингСистемный

A/B тест: гипотеза, дизайн, расчёт выборки

Полный дизайн A/B теста: гипотеза, расчёт выборки, план эксперимента и шаблон отчёта

Зачем: Создаёт полный план A/B теста: формулировку гипотезы, расчёт необходимой выборки, дизайн эксперимента, план анализа и шаблон финального отчёта. Помогает избежать типичных ошибок и получить статистически значимые результаты.

Обновлено 8 июня 2026 г.

Как использовать

Как использовать этот промпт

Создаёт полный план A/B теста для любого элемента маркетинга или продукта.

  1. Укажите, что тестируете, в {ЭЛЕМЕНТ} (заголовок, кнопка, email-тема, цена и т.д.)
  2. Опишите текущий вариант (контроль) в {ВАРИАНТ_А}
  3. Опишите новый вариант в {ВАРИАНТ_Б}
  4. Укажите текущую конверсию или метрику в {ТЕКУЩАЯ_МЕТРИКА}
  5. Укажите трафик/аудиторию в {ТРАФИК}

Результат: Готовый план теста с расчётами и шаблоном отчёта.

Шаблон промпта

Ты — эксперт по экспериментам и аналитике с глубоким знанием статистики и методологии A/B тестирования. Ты помогаешь командам проводить корректные тесты и избегать типичных ошибок.

Твоя задача — разработать полный план A/B теста.

ВВОДНЫЕ ДАННЫЕ:
- Что тестируем: {ЭЛЕМЕНТ}
- Вариант А (контроль): {ВАРИАНТ_А}
- Вариант Б (тест): {ВАРИАНТ_Б}
- Текущая метрика: {ТЕКУЩАЯ_МЕТРИКА}
- Трафик/аудитория: {ТРАФИК}

ЧАСТЬ 1: ФОРМУЛИРОВКА ГИПОТЕЗЫ

1.1 Гипотеза в стандартном формате:
«Если мы изменим [элемент] с [А] на [Б], то [метрика] вырастет/упадёт на [X]%, потому что [объяснение на основе психологии/данных]»

1.2 Обоснование гипотезы:
- Какой поведенческий принцип или данные лежат в основе?
- Аналогичные кейсы из практики (теоретические)
- Возможные риски (почему тест может не сработать)

1.3 Null-гипотеза и альтернативная гипотеза (для понимания, что именно проверяем)

ЧАСТЬ 2: РАСЧЁТ ПАРАМЕТРОВ ТЕСТА

2.1 Определение основной метрики (primary metric):
- Что измеряем? Почему именно это?
- Как измеряем? (инструменты, формула)

2.2 Вторичные метрики (secondary metrics, 2–3 штуки):
- Что ещё наблюдаем, чтобы убедиться в отсутствии негативных эффектов?

2.3 Расчёт выборки:
Параметры для расчёта:
- Базовая конверсия: [из вводных]
- Ожидаемый эффект (MDE — Minimum Detectable Effect): X%
- Уровень значимости α = 0.05 (95% confidence)
- Мощность теста (power) = 0.80 (80%)
- Тип теста: двусторонний / односторонний

Результат расчёта:
- Необходимый размер выборки на группу
- Общий размер выборки
- Ожидаемая длительность теста (в днях) при текущем трафике

Формула для самостоятельной проверки (объясни логику расчёта простыми словами)

2.4 Сегментация трафика:
- Как делить трафик между группами? (50/50 или другое)
- Нужно ли стратифицировать выборку?

ЧАСТЬ 3: ДИЗАЙН ЭКСПЕРИМЕНТА

3.1 Настройка теста:
- Инструмент для тестирования (Google Optimize / VWO / собственный / другое)
- Способ рандомизации
- Метод отслеживания конверсий

3.2 Потенциальные угрозы валидности и как их устранить:
- Selection bias
- Novelty effect
- Seasonal effects
- Interference between variants
- Multiple testing problem

3.3 Чеклист перед запуском (12 пунктов — что проверить)

3.4 Стоп-критерии (когда остановить тест досрочно):
- Критический негатив на варианте Б
- Технические проблемы
- Изменения внешней среды

ЧАСТЬ 4: ПЛАН АНАЛИЗА РЕЗУЛЬТАТОВ

4.1 Алгоритм анализа после завершения теста:
- Шаг 1: Проверка качества данных (sample ratio mismatch)
- Шаг 2: Расчёт p-value и confidence interval
- Шаг 3: Интерпретация результатов
- Шаг 4: Сегментный анализ (subgroup analysis)

4.2 Матрица принятия решений:
| Результат | Действие |
|-----------|----------|
| Б победил (p<0.05) | ... |
| А победил (p<0.05) | ... |
| Нет разницы (p>0.05) | ... |
| Тест загрязнён | ... |

ЧАСТЬ 5: ШАБЛОН ФИНАЛЬНОГО ОТЧЁТА
(готовая структура с плейсхолдерами для заполнения после теста)

ЧАСТЬ 6: ТИПИЧНЫЕ ОШИБКИ В A/B ТЕСТАХ
Топ-7 ошибок и как их избежать в данном конкретном тесте.

Подставьте свои значения вместо переменных в [квадратных скобках].

Переменные (9)

  • [ВАРИАНТ_А]Вариант Атекстобязательно
  • [ВАРИАНТ_Б]Вариант Бтекстобязательно
  • [ТЕКУЩАЯ_МЕТРИКА]Текущая Метрикатекстобязательно
  • [ТРАФИК]Трафиктекстобязательно
  • [ЭЛЕМЕНТ]Элементтекстобязательно
  • [из вводных]из вводныхтекстобязательно
  • [метрика]метрикатекстобязательно
  • [объяснение на основе психологии/данных]объяснение на основе психологии/данныхтекстобязательно
  • [элемент]элементтекстобязательно
#A/B тест#тестирование#гипотеза#статистика#конверсия#оптимизация#эксперимент#аналитика

Ещё промпты — Маркетинг

Частые вопросы

Как использовать промпт «A/B тест: гипотеза, дизайн, расчёт выборки»?
Скопируйте текст промпта, замените переменные в [квадратных скобках] своими данными и отправьте в чат SUIN.AI. На тарифе Standard все промпты доступны прямо в чате — без копирования, со своими шаблонами и общим доступом для команды.
Какие переменные нужно заполнить в промпте «A/B тест: гипотеза, дизайн, расчёт выборки»?
Промпт использует 9 переменных: Вариант А, Вариант Б, Текущая Метрика, Трафик, Элемент, из вводных, метрика, объяснение на основе психологии/данных.
Для каких задач подходит промпт «A/B тест: гипотеза, дизайн, расчёт выборки»?
Полный дизайн A/B теста: гипотеза, расчёт выборки, план эксперимента и шаблон отчёта. Относится к категории «Маркетинг».
Тариф Standard

Все промпты — под рукой, плюс свои и общие с командой

  • Удобный доступ ко всем промптам прямо в чате — без копирования
  • Создавайте собственные шаблоны промптов под свои задачи
  • Сохраняйте промпты и делитесь ими со всей командой
Подключить Standard

промптов в библиотеке · оплата в рублях

Промпт «A/B тест: гипотеза, дизайн, расчёт выборки» — Маркетинг — SUIN.AI