マルコフ性

マルコフ性（英: Markov property）とは、確率論における確率過程の持つ特性の一種で、その過程の将来状態の条件付き確率分布が、現在状態のみに依存し、過去のいかなる状態にも依存しない特性を持つことをいう。すなわち、過去の状態が与えられたとき、現在の状態（過程の経路）は条件付き独立である。マルコフ性のある確率過程をマルコフ過程と呼び、主に以下のような種類がある。

• マルコフ連鎖
• 連続時間マルコフ過程

数学的に記せば、確率過程 X(t)、t > 0 がマルコフ性を持つ場合、次が成り立つ。

$\mathrm{Pr}\big[X(t+h) = y \,|\, X(s) = x(s), \forall s \leq t\big] = \mathrm{Pr}\big[X(t+h) = y \,|\, X(t) = x(t)\big], \quad \forall h > 0.$

以下が成り立つマルコフ過程を「斉時的; time-homogeneous」であるという。

$\mathrm{Pr}\big[X(t+h) = y \,|\, X(t) = x\big] = \mathrm{Pr}\big[X(h) = y \,|\, X(0) = x\big], \quad \forall t, h > 0,$

そうでない場合は「非斉時的; time-inhomogeneous」であるという。斉時的マルコフ過程は一般に非斉時的過程よりも単純であり、マルコフ過程の中でも最も重要なクラスである。

実際にはマルコフ過程でないものを「現在」状態や「将来」状態の概念を拡張することでマルコフ過程的に表現することもある。例えば、X が非マルコフ過程であるとする。ここで、X における状態間の時間間隔を過程 Y の各状態とする。これを数式で表すと次のようになる。

$Y(t) = \big\{ X(s): s \in [a(t), b(t)] \, \big\}.$

Y がマルコフ性を持つ場合、それは X のマルコフ的表現となる。この場合 X を二階マルコフ過程（second-order Markov process）と呼ぶ。高階マルコフ過程も同様に定義される。

非マルコフ過程のマルコフ的表現の例として、移動平均を時系列に並べた移動平均線がある。

マルコフ過程で最も知られているのはマルコフ連鎖だが、他にも様々な過程があり、ブラウン運動も近似的にはマルコフ性を有する。

関連項目

• マルコフ過程
• マルコフ連鎖
• マルコフ再生過程
• マルコフ決定過程
• アンドレイ・マルコフ
• 確率過程
• MCMC