ホーム › 入門・用語 › アウトオブサンプル

アウトオブサンプル・フォワードテストとは ── 本当の実力を測る

入門・用語 ／ 検証の落とし穴

過去データで良い戦略ができた ── でもそれは「答えを見ながら解いた」だけかもしれません。実力を測る唯一の方法がアウトオブサンプル(検証外)での確認です。

アウトオブサンプルとは

データを2つに分け、片方(インサンプル)で戦略を作り、もう片方(アウトオブサンプル＝作成に一切使っていない期間)で成績を確かめるやり方。作成に使った期間で良いのは当たり前 ── 使っていない期間でも通用して初めて"実力"です。さらに、検証時点より後の実時間で試すのがフォワードテストで、これが最も厳しく本物に近いテストです。

仕組み ── なぜ分けるだけで効くのか

戦略作りは無意識に「過去に合う形」を選んでしまいます(→過剰最適化)。だから同じ期間で評価すると必ず良く見える。作成に使っていないデータは、戦略にとって初見の問題。ここで成績が保てれば偶然でない可能性が高く、崩れれば過去専用機だった、と切り分けられます。

使い手が陥りやすい罠

• こっそり覗く：アウトオブサンプルを見て「ダメだったから条件を足す」を繰り返すと、それはもうインサンプル。1回使ったら"消費"です。
• 選抜に使う：多数の戦略を検証外で比べて一番を選ぶと、検証外自体が最適化の道具に変わり、本当のOOSでなくなります。
• 期間が短い：数週間のOOSは偶然で当たります。相場の局面(上げ・下げ・レンジ)を含む十分な長さが必要。

どう正しくやるか

• 作成前に検証外期間を封印し、最後に1回だけ使う(何度も使わない)。
• できればフォワード(これから先の実時間)で観察する ── 当研究室も有望候補は実運用前にフォワード監視で判定します。
• OOS/フォワードでインサンプルより大きく劣化したら不採用。多少の劣化は正常、崩壊は過剰最適化のサインです。

まとめ

アウトオブサンプルは戦略作りに使っていない期間で実力を測る検証、フォワードは"これから先"で試す最も厳しい版。作成期間で良いのは当たり前で、初見のデータでも通用して初めて本物。ただし覗き見・選抜に使うと台無し ── 封印して最後に1回、が鉄則です。

本記事は教育目的の解説・検証であり、投資助言ではありません。投資は自己責任で。