Основное отличие между однородными и неоднородными марковскими процессами заключается в том, как меняются вероятности переходов между состояниями. 14

Однородная марковская цепь — это такая, в которой переходные вероятности не зависят от времени, то есть не меняются от шага к шагу. 1 На протяжении эволюции процесса во времени переходы между состояниями следуют одним и тем же правилам вероятности. 4

Неоднородная марковская цепь — это такая, в которой переходные вероятности зависят от времени. 1 То есть в неоднородных цепочках вероятности перехода могут меняться с течением времени. 4