現在の状態が1回前の状態で決まるような確率の過程を単純マルコフ過程といい、現在の状態が1回前の状態と2回前の状態の両方によって決まるような確率の過程は2重マルコフ過程といい、3重マルコフ過程も、4重マルコフ過程も考えることができるようです。 上のコインの例では、見ているだけの場合は、1回前の状態によって現在の状態が決まりますから単純マルコフ過程かもしれませんが、放り投げた場合は、前の状態とは無関係に現在の状態が決まりますから、マルコフ過程とは呼ばないかもしれません。この辺は不勉強なため、よく分かりません。 では、マルコフ過程を繰り返したら…。「繰り返す」という表現が正しいかどうか分かりませんが、同じ推移確率で次々に状態が移り変わる場合を考えます。例えば、コインを放り投げて次の状態になり、その状態のコインを再び放り投げて次の状態になり…、をたくさん繰り返したら、表や裏の出る確率はどう