理論とデータ

最近、うだうだと考えていること。そんなに目新しいことじゃない。

• 何らかのデータがあって、それを解釈するための複数の理論があるとしよう。
• どの理論が、そのデータをうまく説明できるか。言い換えると一番圧縮できるか？とかを考える。
• 個別理論に対しては、一般理論からの制約がかかる。
• 一般には手に入れられるデータが完全では無い。
• あるデータの集まりだけを集めると理論Aが最適に思えるし、別のデータの集まりを考えると理論Bが最適に思えるかもしれない。