再現性とは何か

再現性とは、同じ条件のもとで同じ結果が得られる性質を指す。科学においては、ある実験や研究の結果が他の研究者によっても確認できることが、知識の客観性を担保する条件とされてきた。

しかし近年、心理学・医学・生物学など幅広い分野で再現性問題(reproducibility crisis)が指摘されている。同じ実験を行っても同じ結果が得られないケースが報告されつづけている。

再現性問題の従来の説明とその限界

これまで再現性問題は、主にデータの不備、統計処理の誤用、実験手順の不一致、バイアスやノイズの混入といった要因によって説明されてきた。これらの説明はいずれも重要である。

しかし、それらはある前提を共有している。

「比較されている二つの研究は、同じ問題を扱っている」という前提。

この前提は、ほとんど検討されることなく受け入れられてきた。しかしそれは自明ではない。

再現性の失敗と問題同一性――本当に同じ問題なのか

ここで根本的な問いが生じる。そもそも、比較されている研究は本当に「同じ問題」を扱っているのか。

もし問題そのものが異なっているなら、結果が一致しないのは当然のことである。その場合、再現性の失敗は手続きや統計の問題ではなく、問題同一性の失敗として理解されるべきだ。

つまり、再現性評価は問題同一性を前提としており、その前提が崩れているとき、再現性の失敗は誤診される可能性がある。

問題同一性の形式化

「同じ問題」とは何かを厳密に問うためには、問題を単なる自然言語の記述としてではなく、構造を持つ対象として捉える必要がある。

SRF Research Programmeでは、科学的問題を次の三つ組として定義する。

M = (S, τ, Γ)

ここで S は状態空間(識別可能なデータ状態の集合)、τ は遷移構造(状態間の動的関係)、Γ は制約集合(問題を個別化する境界条件)を表す。二つの問題が同一であるのは、この三成分をすべて保存する構造同型写像が存在するときに限られる。

DTC条件:問題同一性の三つの基準

構造同型の成立は、次の三条件によって個別に検証される。

  • D

    Data Preservation — データ保存

    比較される二つの研究が、同じ種類のデータを扱っているか。状態空間の構造が対応しているかどうかを問う。

  • T

    Transition Preservation — 遷移保存

    データ間の関係・動的な構造が対応しているか。遷移の論理が保存されているかどうかを問う。

  • C

    Constraint Preservation — 制約保存

    問題を問題として成り立たせている境界条件や前提が一致しているか。問題の個別性を規定する条件が保たれているかを問う。

この三条件(DTC条件)がすべて満たされるとき、二つの問題は構造的に同一であるとみなされ、再現性の評価が初めて正当に成立する。いずれかの条件が崩れているとき、比較は概念的に未決定のまま残る。

再現性の新しい理解

この枠組みは、既存の再現性問題の説明を否定するものではない。それはより根本的な水準で問いを立てる。統計的・方法論的要因を検討する前に、比較そのものが正当であるかを問うのである。

再現性問題は単なる技術的問題ではなく、「何を同じ問題とみなすか」という概念的問題を含んでいる。DTC条件のどこが崩れているかを特定することが、再現性の失敗を正確に診断する出発点となる。