Сдвинула начало теста на месяц, и сделки через два года стали другими

Наткнулась случайно. Советник мой, контртрендовый на EURUSD H1, держит одну позицию, лот 1% от баланса, после трёх убыточных подряд пауза на сутки. Прогоняла 2019-2024 на реальных тиках с 2 января. Потом поставила начало с 1 февраля, просто чтобы прогрев индикатора был поменьше, и сравнила сделки в pandas. Ждала, что разница будет только в январе. А разные сделки есть и в 2021, и в 2023, PF 1,21 против 1,12. Выходит, результат зависит от того, в какой день я нажала «Старт». Это нормально или где-то ошибка?

Для твоих правил это нормально, хотя и неприятно. У советника есть память: одна позиция за раз, пауза после трёх убыточных и лот от баланса. Стоит одной сделке в январе пойти иначе, сдвигается счётчик убыточных, пауза встаёт на другой день, и советник пропускает сигнал или берёт другой. Дальше цепочка расходится и может не сойтись годами. Лот от баланса добавляет своё: даже одинаковые сделки дают разный результат, потому что баланс к этому моменту другой.
Ошибкой это не назовёшь, но проверить стоит: убери паузу, поставь фиксированный лот и прогони оба старта ещё раз. Если тогда сделки после марта совпадут, дело в памяти советника, а не в тестере.

Убрала паузу и поставила фиксированный лот: с середины февраля сделки совпадают один в один. Значит, дело в паузе

Раз так, я бы превратил это в проверку. Прогони двенадцать стартов, с первого числа каждого месяца 2019 года, с паузой и всем остальным, и посмотри на разброс PF за общий период 2020-2024. Если он от 1,1 до 1,25, это шум от памяти советника, и цифра из одного прогона говорит о системе меньше, чем кажется. Если один старт даёт 0,9, а другой 1,4, значит, пауза сильно рулит результатом, и к ней стоит присмотреться отдельно.

Сделала двенадцать стартов, считала только общий кусок 2020-2024. PF от 1,09 до 1,24, медиана 1,16. Без паузы разброс от 1,13 до 1,15, но и медиана ниже, 1,14. То есть пауза чуть помогает в среднем и сильно добавляет случайности. Пока оставлю её, но в своих записях теперь пишу не одну цифру, а разброс по стартам.