A/B тестирование — это экспериментальное сравнение двух версий стратегии на реальных данных рынка, цель которого найти более прибыльный вариант. Bayesian optimization ускоряет этот поиск: алгоритм не проверяет все комбинации случайно, а целенаправленно выбирает следующий тест на основе уже полученных результатов. На волатильных рынках РФ это означает экономию месяцев на поиск оптимальных параметров портфеля.
Перебор (grid search) тестирует все варианты подряд: если параметров 5, значит 100+ тестов. Bayesian optimization после каждого теста анализирует результат и выбирает следующий тест максимально информативным — не проверяет очевидно худшие варианты. На портфелях из 10+ тикеров это сокращает время оптимизации с месяцев на недели. Но нужны исторические данные высокого качества, иначе алгоритм застрянет в локальном оптимуме.
Multi-armed bandit решает классическую дилемму: использовать уже проверенный вариант (exploit) или попробовать новый (explore). Алгоритм балансирует риск и награду — на ранних этапах теста много экспериментирует, позже переходит на вариант с лучшей историей. На практике инвестор может одновременно торговать несколькими стратегиями и давать алгоритму выбирать, чью позицию увеличивать. Минус: требует частой переоценки и может выбрать стратегию на основе шумовых случайных выигрышей.
Минимум 1–2 года дневных данных по выбранным тикерам (вроде Газпрома, Лукойла, ВТБ). Для торговли внутри дня нужна поминутная история 3–6 месяцев, но данные РФ-брокеров часто неполные. Один год покрывает несколько циклов волатильности (рост/коррекция) и позволяет убедиться, что стратегия не просто ловила восходящий тренд. Меньше полугода — рискованно, результаты слишком зависят от конкретного периода.
На исторических данных стратегия легко выглядит идеальной — алгоритм подстраивает параметры под прошлое, но будущее другое. Если вы тестируете 100 параметров на одном году данных, часть «выигрышей» будут случайными совпадениями. При живой торговле эта сверхприспособленность стратегия теряет эффективность на 30–50%. Защита: тестировать на одном периоде, проверять на другом (walk-forward validation) и требовать консервативный запас эффективности (параметры выигрывают на 3–5%, не на 30%).
Если вы торгуете ценными бумагами (акции, облигации, фьючерсы) на рынке РФ, прибыль облагается НДФЛ 13%. A/B тестирование может увеличить оборот — вы чаще переходите между вариантами стратегии, что порождает больше сделок. Каждая сделка с убытком уменьшает налоговую базу, каждая с прибылью её увеличивает. Если один вариант стратегии приносит убытки (что частое при тестировании), он может скомпенсировать налоги от другого варианта. Документируйте все тесты для налоговой.
Для значимости нужны сотни сделок в каждом варианте (не тестов, а фактических входов/выходов). На рынке РФ с волатильностью ключевой ставки 16–18% это требует 2–3 месяца активной торговли. Если в месяц по 50 сделок, то на значимость уйдёт 4–6 месяцев. Меньше 30 сделок на вариант — только предварительные выводы. Правило: если в одном варианте было 500 сделок с прибылью 2%, а во втором 30 сделок с 5%, первый надёжнее.
Минимум 2–3 месяца при активной торговле (5–10 сделок в неделю) или 6–12 месяцев при консервативной (1–3 сделки в неделю). Менее чем за 2 месяца статистика ненадёжна, даже если один вариант уже выглядит лучше.
| Параметр | Дневная торговля | Внутридневная торговля |
|---|---|---|
| Минимум сделок для теста | 100–150 | 300–500 |
| Период истории для оптимизации | 12–24 месяца | 3–6 месяцев |
| Допустимый drawdown во время теста | до −15% от капитала | до −5% от капитала |
| Стандартное отклонение доходности | >2,5% в месяц | >1,8% в месяц |
| Критерий | Bayesian Optimization | Grid Search |
|---|---|---|
| Количество тестов для 5 параметров | 50–80 | 100–200 |
| Вероятность пропустить оптимум | 10–15% | 3–5% |
| Время на оптимизацию (примерно) | 2–4 недели | 1–2 месяца |
| Требования к качеству исторических данных | Высокие | Средние |
| Риск переоптимизации | Средний | Высокий |
Например, одна торгует только акции Сбербанка, вторая — портфель из 5 голубых фишек MOEX. Варианты должны отличаться одним ключевым параметром, иначе результаты будут путанными.
Используйте данные брокера или бесплатные источники (yahoofinance для истории, MOEX для российских тикеров). Проверьте полноту: пропущенные дни торговли исказят результаты. Для внутридневной торговли нужна поминутка, это редко, обычно берите дневные.
Имитируйте торговлю по каждому варианту на выбранном периоде, фиксируйте каждую сделку, комиссию (обычно 0,05–0,15% на MOEX) и доход. Если используете готовые инструменты (TradingView, MetaTrader), убедитесь, что комиссия и спред учтены реально.
Тестируйте параметры на первых 70% данных, проверяйте результат на оставшихся 30%. Это защитит от переоптимизации. Если на проверке доход упал более чем на треть — параметры явно переприспособлены.
Откройте две части счёта: одну торгуйте первой стратегией, вторую — второй. Закладывайте на каждый вариант 3–6 месяцев реальной торговли и минимум 100 сделок. Первые 2–3 недели результаты могут не совпадать с историей — это нормально.
Минимум 2–3 месяца при активной торговле (5–10 сделок в неделю) или 6–12 месяцев при консервативной (1–3 сделки в неделю). Менее чем за 2 месяца статистика ненадёжна, даже если один вариант уже выглядит лучше.
Нет. Bayesian optimization находит локальный оптимум при текущих рыночных условиях. Когда условия меняются (новая волатильность, смена тренда, переиндексация портфеля), оптимальные параметры сдвигаются. Используйте результаты как основу, а не священный итог.
Если вы разделяете счёт пополам (по 100 тыс. ₽ на каждый вариант), в худшем случае оба варианта могут убыточными. Даже если на истории выглядели прибыльными, живой рынок дарует сюрпризы. Стартуйте с макросуммой, которую можете позволить себе потерять, и обязательно поставьте stop-loss на уровне −10–15% от доли капитала.
Базово — понимание Python (pandas, scikit-optimize, scipy). Но проще использовать готовые платформы вроде TradingView Pine Script, MetaTrader 5 или специализированные сервисы типа Alpaca, которые встраивают оптимизацию. Если пишете самостоятельно, начните с Grid Search (проще), потом переходите на Bayesian при нужде.
Не выбирайте варианты после анализа исторических результатов — это уже готовый bias. Выберите идею ДО просмотра данных. Если пересмотрели 100 идей и выбрали 2 лучшие, вы уже смещены. Правило: один тест на идею, и независимо от результата документируйте. Реальные профессионалы ведут дневник гипотез и результатов.
Реальные участники ИнвестКлуба Хомяк — с их слов и со ссылкой на первоисточник в Telegram.
Точка входазашла пробно на 1 месяц после рекламы
Что изменилосьосталась на 1,5 года — структурированные знания, прямые эфиры с экспертами, освоила ИИ-инструменты
«Когда-то я зашла пробно, на 1 месяц. Прошло 1,5 года, а я по-прежнему там. Один только искусственный интеллект чего стоит.»история в Telegram →
Точка входавозрастной скепсис, долго не решался зайти в закрытый клуб
Что изменилосьгора структурированных материалов, отзывчивое сообщество, которое помогает и подсказывает
«Возрастной скепсис мешал зайти — думал, всё как обычно. Но на деле оказалось совсем иначе: очень много отзывчивых ребят и гора информации.»история в Telegram →
«В Хомяке уже полтора года… кайфовое, живое сообщество. Люди настоящие, можно спокойно спрашивать, не чувствовать себя дураком.»
«Зашла пробно на 1 месяц. Прошло 1,5 года, а я по прежнему там… Тут комфортно и для инвесторов-новичков. Вся информация отлично структурирована.»
Ещё реальные отзывы участников — t.me/traderreviews
