Итерирование — это цикл многократного улучшения: черновик → тест на примерах → выявление проблем → уточнение → новый тест. Вместо попытки написать идеальный промпт с первого раза вы за 3–7 циклов доводите промпт до надёжности в 85–95 % правильных ответов. Это работает потому что модель чувствительна к деталям: формату, примерам, ограничениям.
Нейросеть чувствительна к формулировкам и контексту. Черновик содержит ядро идеи, но пропускает детали: не указан формат вывода, забыто ограничение, нет примера. Результат: модель даёт ответ, но не всегда тот, что нужен. Тестирование на 5–10 примерах выявляет проблемы.
Берите реальные данные из вашей задачи. Для анализа портфеля — тестируйте на разных портфелях: маленький, большой, консервативный, рискованный. По 2–3 примера на каждый тип. Модель может работать на простых примерах и падать на граничных случаях.
Проверьте три вещи: соблюдает ли модель формат (JSON, список, таблица), следует ли ограничениям (только российский рынок, только эти тикеры), логичны ли выводы. Если 2–3 ошибки — это нормально, значит есть что улучшать в промпте.
Меняйте по одному. Модель не видит формат? Добавьте пример JSON в самый промпт. Путает тикеры? Уточните, что берёте только из списка А. Так вы поймёте, какая именно правка сработала.
Обычно 3–7 циклов приносят промпт к состоянию 85–95 % точности. Если после 10 циклов результат не улучшается, может быть, задача не подходит для текущей модели или нужна другая архитектура.
Когда 8–9 из 10 примеров дают правильный результат. 100% точности не бывает. Переводите в production, а остальные ошибки исправляйте вручную или собирайте 1–2 недели статистику и переитерируйте.
Можно, если задача очень простая. Но обычно один-два примера правильного результата прямо в промпте дают прирост на 10–20%. Если модель путает формат или пропускает детали, примеры обязательны.
| Этап | Действие | Результат |
|---|---|---|
| Черновик | Запишите ядро идеи и желаемый формат | 50–60% правильных ответов |
| Рецепт | Добавьте пример, уточните формат, укажите ограничения | 70–80% правильных ответов |
| Фильтр | Добавьте граничные случаи, style guide, обработку ошибок | 85–92% правильных ответов |
| Production | Промпт + система контроля качества, логирование ошибок | 90–98% правильных ответов |
| Критерий | Быстрое (3–5 циклов) | Глубокое (10–15 циклов) |
|---|---|---|
| Время на цикл | 20–40 минут | 1–2 часа |
| Количество примеров | 5–7 примеров | 15–20 примеров |
| Когда использовать | Стабильная, известная задача | Новая, сложная область |
| Деталь промпта | Краткий, 1–2 абзаца | Развёрнутый с примерами |
| Риск | Пропуск нюансов на новых данных | Переобучение на примерах |
Запишите в одном предложении, что делает промпт и в каком формате выдаёт результат. Пример: «Оценить риск портфеля по шкале 1–5 на основе волатильности и дивидендности, формат — JSON».
Заложите ядро в промпт: контекст (инвестор, рынок РФ), ограничения (только MOEX), формат вывода (JSON с полями). Не переживайте о длине — это рабочий вариант.
Соберите 5–10 реальных примеров данных: несколько портфелей, несколько тикеров. Вручную напишите, какой должен быть правильный ответ для каждого (эталон).
Прогоните каждый пример через промпт в ChatGPT/Claude/Gemini. Записывайте результат. Сравните с эталоном и отметьте ошибки: формат, логика, факты.
Исправьте самые частые ошибки: добавьте пример в промпт, уточните ограничение, покажите формулу. Повторите тест на тех же примерах. Если результат вырос до 80%+, переходите ко второй итерации.
Можно, если задача очень простая. Но обычно один-два примера правильного результата прямо в промпте дают прирост на 10–20%. Если модель путает формат или пропускает детали, примеры обязательны.
Нет. Google Sheets (вход | эталон | результат модели) — достаточно. Позже можно написать Python-скрипт для автоматизации, но это не обязательно на первых циклах.
Переместите требование в начало и повторите его другой фразой. Если просили JSON, добавьте в конец: «Ответь ТОЛЬКО JSON, никакого текста до и после». Или покажите готовый пример формата.
Да, если вы слишком заточите промпт под 5 ваших примеров. Убедитесь, что примеры разнообразны (разные портфели, разные рынки), и время от времени тестируйте на неизвестных данных.
Если видите 2–3 типичные ошибки в день, обновляйте. Если ошибок нет неделю — можно оставить. Большие изменения в исходных данных (новая биржа, новый формат) требуют переитерирования.
Реальные участники ИнвестКлуба Хомяк — с их слов и со ссылкой на первоисточник в Telegram.
Точка входазашла пробно на 1 месяц после рекламы
Что изменилосьосталась на 1,5 года — структурированные знания, прямые эфиры с экспертами, освоила ИИ-инструменты
«Когда-то я зашла пробно, на 1 месяц. Прошло 1,5 года, а я по-прежнему там. Один только искусственный интеллект чего стоит.»история в Telegram →
Точка входавозрастной скепсис, долго не решался зайти в закрытый клуб
Что изменилосьгора структурированных материалов, отзывчивое сообщество, которое помогает и подсказывает
«Возрастной скепсис мешал зайти — думал, всё как обычно. Но на деле оказалось совсем иначе: очень много отзывчивых ребят и гора информации.»история в Telegram →
«В Хомяке уже полтора года… кайфовое, живое сообщество. Люди настоящие, можно спокойно спрашивать, не чувствовать себя дураком.»
«Зашла пробно на 1 месяц. Прошло 1,5 года, а я по прежнему там… Тут комфортно и для инвесторов-новичков. Вся информация отлично структурирована.»
Ещё реальные отзывы участников — t.me/traderreviews
