過剰適合について

2024-09-10
過剰適合についての、おもしろい記事がありましたので、ご紹介いたします。
https://diamond.jp/articles/-/348378?page=2

この記事自体は、Science fictionという本に関するものです。
この本は、現在の科学における再現性の危機について、一般向けに書かれています。
私も読みましたが、とても面白い本です。

以下、上記の記事からの引用ですが、

「データと完璧にフィットしたモデルがとても魅力的に見える。(中略)グラフの点をつなぐだけなら科学的な知識は必要ない。」

これは、まさに、薬物ごとのparameter fittingのことです。

「このようなモデルを使えば、データを集める「前に」具体的な線の形(つまり自分の理論)が見えていたかのような論文を書けるのだ。こうしてあなたは科学界の注目を浴びる。」

「「前に」、、、見えていたかのように」、と言うのは、「予測」できていたかのようにということができます。
実際、parameter fittingを「予測」とする論文がとても多く、大変残念な状況になっています。