백테스트와 과최적화: 과거에 잘 맞는 규칙이 틀리는 이유
과거 데이터로 규칙을 검증하는 백테스트의 순서와 과최적화, 생존 편향, 비용 누락 같은 함정을 설명하고 검증 질문을 정리했습니다.
백테스트란
백테스트는 정한 매매 규칙을 과거 가격 데이터에 적용해 어떤 결과가 나왔는지 시뮬레이션하는 방법입니다. 규칙이 과거에 얼마나 맞았는지를 숫자로 볼 수 있지만 미래 성과를 보장하지 않습니다.
과최적화
규칙의 숫자(이동평균 기간, 손절폭, 진입 조건)를 과거 결과가 가장 좋을 때까지 여러 번 바꾸면 우연히 맞은 값이 선택됩니다. 이렇게 만든 규칙은 과거에는 잘 맞지만 새로운 데이터에서는 무너지기 쉽습니다. 조정 가능한 숫자가 많을수록 위험이 커집니다.
생존 편향과 선행 편향
현재 상장되어 있는 종목만으로 과거를 시험하면 이미 상장폐지된 종목이 빠져 결과가 좋아 보입니다. 또 시험 시점에는 알 수 없었던 정보(나중에 수정된 재무 데이터 등)를 쓰면 선행 편향이 생깁니다. 데이터의 시점과 구성을 확인해야 합니다.
비용과 체결 가정
수수료, 증권거래세, 호가 간격, 체결 지연을 반영하지 않으면 결과가 실제보다 좋아 보입니다. 특히 거래 횟수가 많은 규칙일수록 비용의 영향이 큽니다. 거래대금이 작은 종목은 가정한 가격에 체결되지 않을 수 있습니다.
심층 분석과 해석
표본 구분과 검증
규칙을 만든 기간(학습)과 검증 기간(시험)을 따로 나누고 시험 기간에는 규칙을 바꾸지 않는 방식이 기본입니다. 여러 시장 환경(상승, 하락, 횡보)과 여러 종목에서 비슷한 결과가 나오는지도 확인합니다. 시험 기간의 결과가 학습 기간보다 크게 나쁘면 과최적화 가능성을 의심합니다.
거래 횟수와 우연
거래 횟수가 적으면 좋은 결과도 우연일 수 있습니다. 가상의 예로 10번 거래에서 7번 이겼다고 해서 승률 70%라고 말하기는 어렵습니다. 같은 규칙이 수백 번 거래된 데이터에서 일관된지가 의미 있는 증거에 가깝습니다.
검증 체크리스트
□ 규칙의 조정 가능한 숫자는 몇 개인가 □ 학습과 시험 기간이 분리되어 있는가 □ 상장폐지 종목을 포함했는가 □ 수수료, 세금, 호가 간격을 반영했는가 □ 거래 횟수가 충분한가 □ 시장 환경별 결과가 일관된가 □ 최대 낙폭(자금이 고점에서 줄어든 정도)을 확인했는가. 일곱 항목 중 하나라도 비어 있으면 결과를 낙관적으로 볼 이유가 줄어듭니다.
자주 하는 실수
- 과거 결과가 좋을 때까지 숫자를 바꾸는 것
- 비용을 빼고 결과를 해석하는 것
- 거래 횟수가 적은 결과를 근거로 삼는 것
자주 묻는 질문
백테스트는 필요 없나요?
필요한 도구이지만 한계를 알고 써야 합니다.
수익 인증 영상의 백테스트는요?
기간, 비용 반영, 시험 분리 여부를 확인할 수 있습니다.
프로그램이 없어도 하나요?
손으로 일부 기간을 기록해 보는 방법도 있으며 정확도는 낮습니다.
출처(공식 자료)
같은 주제의 다른 글 전체 보기 →
- 주식 차트 읽기 기초: 캔들, 시간 단위, 거래량, 갭
- 이동평균선과 정배열·역배열: 국내 일봉 차트에서 읽는 법
- 지지선·저항선과 차트 패턴: 삼각수렴, 더블탑, 헤드앤숄더
- RSI·MACD·볼린저밴드: 국내 주식 차트에서 보조지표 읽기
- 거래량과 수급으로 차트 읽기: 거래대금, 평균 대비, 투자자별 매매
- 스켈핑·단타·스윙·장기 투자 비교: 시간 단위별 장단점
- 스켈핑과 데이트레이딩의 구조: 비용, 속도, 체결 위험
- 스윙 매매의 구조: 보유 기간, 갭 위험, 손절과 포지션 크기
- 장기 투자의 구조: 복리, 변동 견디기, 점검 주기
- 손절·포지션 크기·분산: 위험 관리 규칙을 숫자로 정하기
- 매매 일지 쓰는 법: 기록으로 습관과 실수를 찾기
이 글은 정보 제공용이며 투자 권유나 가격 전망이 아닙니다. 투자 판단과 책임은 본인에게 있습니다.